inflearn logo
강의

Course

Instructor

Python Web Crawling & Automation to Do My Work (feat. Stock, Real Estate Data / Instagram)

9.1 Further to-dos

데이터베이스 종류 추천해주세요

1182

2kiya

5 asked

0

데이터베이스 필요성이 느껴지는데 종류가 너무 많아서 어떤게 실제로 사용하기 쉽고 범용적으로 쓰이나요?

MySQL, sqlite 두개가 파이썬 관련해서 많이 검색되는데 추천해주실만한게 어떤건지? 선생님이 사용하시는 건 어떤건지 알려주시면 도움이 될것 같아요.

제가 하고 싶은것은 금융데이터를 스크래핑하고 백테스트도 하고 여러 지표를 기준으로 매매 시그널을 제공하는 웹서비스를 만들어 보고 싶습니다. 

 

데이터베이스 python 웹-크롤링

Answer 1

0

DeepingSauce

안녕하세요!

우선 처음에는 sqlite3로 연습하신 후, 어느정도 익숙해지면 MySQL, PostgreSQL을 사용해보시는 것을 추천드립니다

(sqlite3가 설정하기가 정말 쉽습니다. 저는 현재 postgresql를 사용하고 있습니다)

이후에 성능을 위해 timeseries에 최적화 되어있는 DB (e.g. influxDB)도 사용해보시면 좋을 듯 합니다.

참고로 DB를 쓰지않고, Data Lake라는 개념으로 구성해도 괜찮습니다.

감사합니다.

0

2kiya

답변 갑사합니다!!!

15.1 네이버 부동산 사이트 개발자도구 실행시 현상 문의

0

862

1

requirments 설치 시 오류

0

84

1

6.1 미국주식 데이터 크롤링이 막혔네요.

0

203

2

태그를 못찾는 오류 질문드립니다.

0

130

2

6.1 미국 주식 데이터 크롤링을 막아둔 거 같아요.

0

261

2

requirements.txt 다운로드가 안끝나요

0

132

2

주신 파일로 다운로드를 하던 중에 끝에 이런 오류가 뜨는데 어떡해야하나요?

0

144

1

혹시 애플 M시리즈 사용하시는 분 중에 오류

0

145

0

전일비 상승,하락때문에 int화를 못하고 있는데

0

120

1

일별 시세 데이터 상승/하락 \t\n해결법

0

152

1

pd.concat(df, ignore_index=True) InvalidIndexError 해결 방법 문의

0

448

2

pip install -r requirements.txt 문제

0

353

3

부동산 KB 시세 크롤링 문의

0

811

1

7.1 주식 일별 시세 데이터(Yahoo finance)

1

372

1

네이버 부동산 매물 크롤링 오류

0

637

1

네이버 부동산 크롤링 문의드립니다.

0

1044

1

버전 관련 질문

0

344

1

5.2강 주식 일별 시세 데이터 관련 질문이 있습니다

0

276

1

7.1 야후 파이낸스 크롤링 request 오류

0

738

1

anaconda

0

355

1

야후파이낸스 크롤링 오류

0

822

1

셀레니움 변경점

2

790

1

request.get() 하면 SSLCertVerificationError 에러가 납니다.

0

511

1

이론 수업 자료 공유 해주실 수 있나요?

0

359

0