유사개발자 샤이와 무지

오늘은 정말 오랜만에 크롤링을 했어요 학부과정에서 어어어 하다가 크롤링하는 순서만 기억속에 겨우 넣어두었었는데 오늘 공부를 통해서 이걸 좀 단단하게 잡아야겠어요(분명히 크롤링을 2주전에 했는데 오늘에서야 글을 쓰는 게으른 나 칭찬해) 저는 크게 3가지 부분으로 나누어서 이 데이터를 설계 했어요늘은 정말 오랜만에 크롤링을 했어요 학부과정에서 어어어 하다가 크롤링하는 순서만 기억속에 겨우 넣어두었었는데 오늘 공부를 통해서 이걸 좀 단단하게 잡아야겠어요(분명히 크롤링을 2주전에 했는데 오늘에서야 글을 쓰는 게으른 나 칭찬해) 저는 크게 3가지 부분으로 나누어서 이 데이터를 설계 했어요데이터를 읽어와서 저장하는 부분 (get_contents)웹사이트에 접근해서 데이터를 읽어오는 부분 (get_XML)이 모든..

오늘은 멋사를 시작하고 10일차 lms강의를 듣던 김무지에게 큰 숙제가 발생! 별 생각없이 크롤링 강의를 듣던중 궁금증이 많아져서유튜브 뮤직의 사이트를 크롤링을 시도하는데.(유튜브 뮤직은 유료서비스입니다.)어 아무래도 여기는 크롤링 하면 안될 것 같다는 생각이 든 김무지는 gpt에게 이 상황을 설명하고 문제가 있을지에 대해서 질문하던 도중(다행히 큰 문제는 없을 가능성이 높다고 해요) 크롤링을 할 때도 예절이 존재한다는 사실을 발견하는데...라고 좀 거창하게 이야기 했지만 chatgpt의 비유일 뿐 정확한 내용은 아니에요 사실 누군가에게는 좀 당연한 이야기일 수도 있어요(제가 처음 이걸 받아드리면서 당연하다고 생각했거든요) 어떤 책에서는 법적 윤리적 고려사항이라고도 표현했어요.저는 과도 빅데이터공학과를 ..

다시 돌아온 월요일은 정말 싫어요... 오늘은 시간 함수에서부터 함수를 거쳐서 객체지향 프로그래밍까지 배웠어요 확실히 배웠던 걸 다시 배우면 머릿속에서 정리도 되고 확실히 멋사를 시작하기를 잘했다라는 생각이 들어요오늘은 따로 깊이 파볼만한게 없어서 짧게 갑니다Time 라이브러리에서 배웠던 부분중에 제일 기억나는건 역시 time() 함수 활용법인데요.사용법은 아주 간단해요>>> import time>>> a1=time.time()>>> print(a1)1743984671.4092803결과값은 대강 금일 오전 9시 30분정도였을거에요.근데 왜 숫자가 저렇게 나와요? 라고 궁금해 하실 분들을  자세한 내용은 여길 참고간단히 말하자면 우리 컴퓨터의 시간은 1970년 1월 1일 00시 00분 00초 0ms(kr로..

오늘은 어제에 이어 파이썬의 기초에 대해서 이야기 했어요. 오늘은 크게 문자열과 리스트, 튜플에 대한 이야기를 했어요 개념 자체는 단순하니깐 저는 제가 자주 안 쓰던 함수를 리마인드 차원에서 작성해두겠습니다.str의 methodstr.capitaltize() #가장 앞에 문자를 대문자로 바꾸고 나머지는 소문자로 바꾸는 str의 멤버함수(method)str.center(int) #원본 문자열을 가운데 배치하고 나머지는 공백으로 채우는 str의 멤버함수(method) 홀수면 뒤쪽이 큰 수가 온다str.ljust(int) #원본 문자열을 왼쪽에 배치하고 나머지는 공백으로 채우는 str의 멤버함수(method)str.rjust(int) #원본 문자열을 오른쪽에 배치하고 나머지는 공백으로 채우는 str의 멤버함수..

오늘은 셋째날 오늘도 여전히 파이썬 기초를 하고 있어요,조건문 if문하고 switch문이 있는데 switch문은 파이썬에 없어요... 그래서 사실 간단합니다. 넘어가요반복문은 for문하고 while문이 있는데 while문에서도 else가 가능하다고 하더라고요? 그래서 해봤거든요? 진짜 되는거에요 근데 쓸 일이.... 없습니다 while문의 조건이 끝나면 반복문 자체를 이탈해버려서 else가 사실 밖에 있는 코드 수행하는거랑 같거든요 그냥 있다라는 사실을 발견한거에요여기까지 하고 중간에 데이터를 강사님께서 데이터 분석이 아니라 데이터를 그냥 활용해서 여행 프로그램에 활용하시는 이야기를 해주셨어요 굳이 데이터를 분석용으로 사용하는 것이 아니라도 여러 용도로 쓸 수 있으니 데이터를 많이 찾고 봐두라는 이야기를..

오늘은 둘째날~ 파이썬 기초과정입니다. 파이썬은 기본 문법 자체는 그렇게 어렵지 않지만 기존의 언어들과의 약간의 차이점을 보이는 부분들이 있습니다. 그래서 그 부분하고 오늘 새로 안 부분에 대해서 적어볼까 합니다그 전에 오늘은 주피터 cell에 사용 할 수 있는 단축키를 배웠어요.물론 90%는 이미 사용하던 내용들이었지만 오랜만에 다시 한번 짚고 넘어가면서 다른 사람들에게 가르쳐 줄 수 있는 정도의 레벨까지 올라온 것 같아요그 다음 시간에 나온 내용은 주석이었는데 통상적으로 파이썬의 주석처리는 "#"을 사용한다는 것은 유명한 사실이죠. 한줄은 #으로 그리고,ctrl + /를 입력하면 잡아둔 모든 행에 # 주석을 넣어준다는걸 처음 알았어요 또,따옴표나 쌍따옴표 3개를 이어서 쓰면 1개 이상의 열을 문자열로..

역시 첫 날은 역사 이야기와 셋팅의 시간 다양한 이슈가 호기심을 가득하던 하루였어요.아침시간에는 계산기의 역사 UNIX등 흥미로운 이야기가 많이 나왔지만 특히 기억에 남는건 어떤 프로그램이 운영체제에 대해 독립적이냐 종속적이냐에 대한 이야기였는데아주 간단히 이야기하자면 어떤 프로그램을 만들 때 운영체제마다 다른 코딩을 해야하는 것 이것이 의존적이다 라는 부분이고 운영체제와는 상관 없이 한가지 코딩으로 모든 운영체제를 커버한다면 그것이 독립적이다 라고 이야기를 할 수 있을 것이었어요.  독립적의존적개발자 관점개발 편리개발 비용 많이 듦사용자의 관점사용에 필요한 비용 많음(느림)사용에 필요한 비용 적음(빠름) 여기서부터 한 문단동안 운영체제로 부터 ... 이다의 앞쪽을 생략할게요. 설명을 들은 부분은 여기서..

샤이와 무지가 멋사 데이터분석 5기를 시작하였습니다!! 짝짝짝오랜만에 Jupyter notebook 세팅을 건들 일이 생겼습니다. 멋사를 시작하면서 이제 환경설정을 건들 일이 생겼는데, 그 전엔 그냥 기본 세팅 디렉토리 세팅 되어있는 그대로~ 고민조차하지 않고 사용하면 됐지만..... 이번엔 따로 workspace를 사용할 일이 생겼습니다. 그래서 오랜만에 구글링을 열심히 해서 찾아보니 자료가 좀 오래되어서이와 무지가 멋사 데이터분석 5기를 시작하였습니다!! 짝짝짝오랜만에 Jupyter notebook 세팅을 건들 일이 생겼습니다. 멋사를 시작하면서 이제 환경설정을 건들 일이 생겼는데, 그 전엔 그냥 기본 세팅 디렉토리 세팅 되어있는 그대로~ 고민조차하지 않고 사용하면 됐지만..... 이번엔 따로 wor..