안녕하세요 선생님 빅데이터 분석에 관심이 있어 파이썬을 1도 모르는 상태에서 시작해 현재 선생님의 강의를 통해 많은 도움을 받고 있습니다. 현재 텍스트 마이닝 분석 방법으로 쓴 논문들을 보면 쇼핑몰 댓글 부터 해서 각종 SNS(페이스북, 인스타그램 등)의 댓글을 분석한 논문들을 많이 살펴볼 수 있는데 현재 파이썬 초보로서 데이터를 수집하는 과정(웹크롤링)이 제일 중요하고도 어려운 것 같습니다. 현재 텍스톰이나 빅카인즈 같은 웹사이트를 이용하는 것 말고 파이썬 으로 다양한 데이터를 직접 웹크롤링 해서 데이터를 수집하는 방법을 집중적으로 다룬 강의는 거의 찾아보기 어렵더라구요..ㅠㅠ 블로그 등에 검색해보면 코드가 공개된 것도 있지만 여기저기 코드 방식이 다 다양하고 막상 적용해서 실행해보면 또 에러 생기고 이유는 모르겠고 답답하더라구요. SNS 채널 및 쇼핑몰 댓글 등을 웹크롤링 하는 과정을 하나하나 다 보여주는 강의가 있으면 좋겠다고 생각하고 있는데 혹시 이렇게 여러 채널의 웹크롤링 과정만 다룬 강의를 올려주실 계획은 없으신지요?
함수에 대해 정의내릴 때 예를 들어 코랩 에서는 scaler = minmax_scale() 이렇게 정의를 내리고 scaler(data) 하는데 #코랩은 정의내릴 때 괄호를 빼면 동작안함 구름에서 테스트해보니까 scaler = minmax_scale()하고 scaler(data)하면 에러가 발생하고 괄호없이 scaler = minmax_scale 만해야 에러가 발생하지 않더라구요. 이게 구름 환경만의 특성이라서 그렇다고 보면 될까요?
예제로 배우는 딥러닝 자연어 처리 입문 NLP with TensorFlow - RNN부터 BERT까지
강의를 들으면 가물가물해져 가는 NLP와 BERT기본을 제대로 다지기에 참 좋은 강의 감사합니다. 좀 다른 질문 드려서 죄송합니다만 ㅠㅠ BERT는 모델을 download해서 fine tuning으로 우리가 원하는 모델을 학습시킬수 있죠. 근데 요즘 hot한 chatGPT는 아직까진 온라인 버전입니다. (제가 아직 잘 모르기도 하고..) 반응이 워낙 뜨겁다보니(?) 이걸 활용한 뭔가를 만드는 것도 각 기업에서 고민을 하는거 같은데요... 현재처럼 key를 발급받아 online에 쿼리를 날려서 response를 받아오는 형태는 끊길수도 있고 언제든 변경의 여지가 있어 제품화에 쓰기 어렵습니다. 혹시 chatGPT를 대체할만한 download가능한 딥러닝 모델을 알고 계신게 있나요? bert처럼 무료면 좋겠지만, 타협가능한 수준의 유료모델도 좀 알아놔야 할 것 같습니다. 저도 좀 찾아봤습니다만 현업에 더 가까이 계신분께 insight를 좀 얻고자 문의드립니다 ㅠㅠ 감사합니다
