inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

묻고 답해요

173만명의 커뮤니티!! 함께 토론해봐요.

현재 모든 판다스 파일에 오류가 발생되는것 같습니다.

미해결

다양한 사례로 익히는 SQL 데이터 분석

어제 장문의 글을 올렸는데 이유는 모르겠으나 찾아볼수가 없어서 다시 작성을 합니다. 현재 sqlalchemy의 문법 강제성의 이유로 2.0.0 버전 이후로는 사용하신 방법으로는 실행이 되지 않습니다. 이에 2.0.0 이전 버전으로 다운그레이 하거나 (저는 이 방법이 통하지 않아 다른 방법을 찾아봤습니다) 다음과 같은 방법을 사용하면 됩니다. 제가 참고한 해외 커뮤니티들에서 제시하는 사용 방법으로는 모든 query에 text() 함수를 사용해 반환된 값을 read_sql_query에 사용하라고 되어 있었는데 테스트 해 보니 현재 작성된 쿼리 스트링으로 사용해도 문제가 없었습니다. import pandas as pd from sqlalchemy import create_engine, text conn_string = 'postgresql://postgres:1324@localhost:5432/inflearn' conn = create_engine(conn_string) postgres_engine = conn.connect()

  • sql
  • postgresql
  • dbms/rdbms
  • 퍼포먼스-마케팅
  • 데이터-엔지니어링
bluebamus 댓글 2 좋아요 0 조회수 435

zookeeper 관련 문의드립니다.

미해결

15일간의 빅데이터 파일럿 프로젝트

실습에서는 server01에 zookeeper 설치하고, server02에서 zookeeper-client 실행시 문제가 없는데 제환경에서는 Server01에 설치하여 server01에서만 클라이언트 실행되고, server02에서는 오류가 나는데요 정상일까요

  • 빅데이터
  • hadoop
  • kafka
  • zookeeper
  • redis
  • flume
  • impala
  • 데이터-엔지니어링
special_one 댓글 1 좋아요 0 조회수 303

M:N 관계 테이블의 상속형 PK 질문

미해결

데이터베이스 중급(Modeling)

안녕하세요, 선생님. M:N 관계 중 상속형 PK에 관해서 질문 드릴게 있는데요. 제가 예전에 데이터베이스 수업을 들을 때 엔티티 자체적으로 식별자가 없어 다른 FK를 PK처럼 쓸때 해당 엔티티를 weak Entity라고 들었던 것 같은데요 그러면 해당 내용에서 학생과 과목의 PK를 참조해서 PK로 사용하고 있는 수강이라는 테이블은 weak entity에 속하는 건가요? 감사합니다.

  • dbms/rdbms
  • 데이터-엔지니어링
대훈 댓글 2 좋아요 0 조회수 572

SQL 구글 애널리틱스 전체 데이터셋 다운로드

미해결

다양한 사례로 익히는 SQL 데이터 분석

안녕하세요. 완강을 하고 전반적으로 복습을 하는 차원에서 다시 쿼리를 공부하고 있는데 3달이 아닌 전체 데이터세트를 가지고 한 번 해보고 싶어서요. 혹시 구글 애널리틱스 전체 데이터셋을 다운 받을 수 있는 방법이 있을까요 ? 제가 찾아보니까 날짜 하루하루 단위로 다운로드는 가능한데 1년치를 이렇게 다운받는 건 너무 일이 많은 거 같아서 질문드립니다.

  • sql
  • postgresql
  • dbms/rdbms
  • 퍼포먼스-마케팅
  • 데이터-엔지니어링
정동석 댓글 2 좋아요 0 조회수 462

auto.offset.reset은 첫구독일때만 의미가 있는건가요?

미해결

카프카 완벽 가이드 - 코어편

__consumer_offsets 토픽에 오프셋 데이터 적재 이후로는 의미가 없는 설정값인게 맞을까요?

  • kafka
  • 데이터-엔지니어링
목동 개발자 댓글 1 좋아요 0 조회수 813

애플리케이션 개발 실습간 레코드 미등록 사항

미해결

[아파치 카프카 애플리케이션 프로그래밍] 개념부터 컨슈머, 프로듀서, 커넥트, 스트림즈까지!

안녕하십니까 애플리케이션 실습 중인데 레코드가 등록 되지 않아서 이런경우는 어떤것을 확인하면 되는지 알려주시면 감사하겠습니다. 이클립스에서 git에 올려주신 코드를 그대로 실행하였습니다. 그래서 아래와 같이 로그가 떴고 아래와 같이 해당 토픽을 조회하였지만 아무 레코드가 조회되지 않았습니다.

  • kafka
  • 데이터-엔지니어링
sppartnersDev 댓글 2 좋아요 0 조회수 410

Git의 하나의 Repository 안에서 branch별 배포가 가능한가요?

미해결

따라하며 배우는 도커와 CI환경 [2023.11 업데이트]

안녕하세요. 저는 IT 교육 프로그램에서 5명의 팀원과 프로젝트를 진행하고 있습니다. GitLab에서 하나의 Repository 안에서 작업을 하고 있습니다. 테스트 서버와 실환경 서버를 분리해서 진행해보려고 합니다. 그러기 위해 master 브랜치에 Push 될 때는 테스트 서버에 배포를 하고, master 에서 테스트 이후에 안정적인 코드를 production 이라는 브랜치에 Push 하려고 합니다. 이때 하나의 Repository에서 브랜치별로도 다른 서버로 배포를 진행할 수 있나요?

  • aws
  • docker
  • github
  • ci/cd
  • travis-ci
  • 데이터-엔지니어링
송병훈 댓글 1 좋아요 0 조회수 937

윈도우로 volume 적용 실패할 때

해결됨

따라하며 배우는 도커와 CI환경 [2023.11 업데이트]

아래 n 번째에 윈도우에서 %cd% 로 경로 설정해도 안되는 증상이 같아서 해결방법을 알려주신 분이 계신데, 그 방법으로 해결해서 글 남깁니다. docker run -d -p 5000:8080 -v /usr/src/app/node_modules -v "/$(pwd)/server.js:/usr/src/app/server.js" thdqudgns/node 처럼, 마운트 할 앞 경로 전체를 큰 따옴표로 감싸주고, 앞쪽에는 /${pwd}/server.js 를 적어서 파일을 명시해주고, 뒤쪽에도 /usr/src/app/server.js로 파일을 명시해주니 예제는 잘 해결되었습니다. 그러나 고민이... 실제로 프로젝트를 진행하면서 배포를 하고 빌드를 할 때에는 폴더 단위로 작업이 이루어져야 하는데, 파일 단위로만 되는 것을 확인하여서 앞이 막막합니다... ++ 터미널을 우분투 (wsl) 로 열어서 $(pwd) docker run -d -p 5000:8080 -v /usr/src/app/node_modules -v $(pwd):/usr/src/app thdqudgns/node 로 하니까 잘 되네요.. 터미널이 이상한 걸로... 조만간 토이프로젝트를 AWS에 올릴 예정인데 문제가 없기를...

  • aws
  • docker
  • github
  • ci/cd
  • travis-ci
  • 데이터-엔지니어링
송병훈 댓글 1 좋아요 0 조회수 525

프로젝트 진행중인데..

미해결

따라하며 배우는 도커와 CI환경 [2023.11 업데이트]

현재 프론트와 백 나눠서 프로젝트를 진행중입니다. 강의에서는 하나의 레파지토리에 프론트폴더, 백앤드폴더, docker-compose.yml 파일이 있던데 저희는 오가니제이션으로 사용중이며, 프론트레파지토리, 백앤드레파지토리 나뉘어져있는 상황입니다. 이 상황에서 프론트레파지토리는 nginx를 위한 Dockerfile과 리액트를 위한 Dockerfile, 백앤드 레파지토리는 스프링부트에 대한 Dockerfile, docker-compose.yml에는 redis 및 스프링부트에 대한 dockerfile정보 등이 들어가는게 맞을까요? 결론은, nginx가 백앤드 레파지토리에도 필요한 것이 일반적인 것인지 여쭤봅니다!

  • aws
  • docker
  • github
  • ci/cd
  • travis-ci
  • 데이터-엔지니어링
qkrtngus116 댓글 1 좋아요 0 조회수 463

집계 함수 order by

미해결

다양한 사례로 익히는 SQL 데이터 분석

with temp_01 as ( select d.category_name, to_char ( date_trunc ('month', a.order_date), 'yyyymm') as month_day, sum (amount) as sum_amount, count ( distinct a.order_id) as monthly_ord_cnt from orders a join order_items b on a.order_id = b.order_id join products c on b.product_id = c.product_id join categories d on c.category_id = d.category_id group by d.category_name, to_char ( date_trunc ('month', a.order_date), 'yyyymm') ) select *, sum (sum_amount) over ( partition by month_day order by month_day) as temp1, sum (sum_amount) over ( partition by month_day) as temp2, sum_amount / sum (sum_amount) over ( partition by month_day) as ratio from temp_01 집계 어날리틱 함수는 order by를 사용하면 파티션 내에서 누적합이 되는것으로 알고 있었는데 왜 이렇게 나올까요...? 제가 혹시 놓친게 있는 걸까요

  • sql
  • postgresql
  • dbms/rdbms
  • 퍼포먼스-마케팅
  • 데이터-엔지니어링
정성훈 댓글 1 좋아요 0 조회수 323

date_trunc 사용 이유

미해결

다양한 사례로 익히는 SQL 데이터 분석

order_date 컬럼에 대해 쿼리를 할 때 date_trunc ('day', order_date):: date ; 로 사용하셨는데 date는 YYYY-MM-DD 형태인데 date_trunc()를 굳이 사용할 필요가 있나요?

  • sql
  • postgresql
  • dbms/rdbms
  • 퍼포먼스-마케팅
  • 데이터-엔지니어링
정성훈 댓글 1 좋아요 0 조회수 435

KStreamJoinKTable 에서

미해결

[아파치 카프카 애플리케이션 프로그래밍] 개념부터 컨슈머, 프로듀서, 커넥트, 스트림즈까지!

ADDRESS_TABLE에서 기존의 key에 주소를 새로 작성했을 때에는, consumer에 메시지가 새로 뜨지 않고, ORDER_STREAM에서 기존의 key에 새로운 value를 작성했을 때에만 consumer에 메시지가 새로 뜨는 이유는 무엇인가요?

  • kafka
  • 데이터-엔지니어링
asdqweasdzxcasd 댓글 2 좋아요 0 조회수 354

Kafka에 설정값이 엄청 많은데요

해결됨

카프카 완벽 가이드 - 코어편

이직하는 회사가 Kafka 기반으로 MSA간 통신을 해서 max.in .flight.~ 강의까지 열심히 듣는 중입니다 ㅎㅎ 보다보니까 설정할 수 있는 영역이 엄청 많은데요~ 보통 실무에서 로드테스트 등을 통해서 서비스에 적합한 값을 찾아가나요? 어느정도 경험이 없다면 최적의 설정값을 찾기가 어려울 것 같아서요 ㅎㅎ

  • kafka
  • 데이터-엔지니어링
목동 개발자 댓글 1 좋아요 0 조회수 411

강의와 다른 출력에 대한 내용 정리

미해결

따라하며 배우는 도커와 CI환경 [2023.11 업데이트]

[internal] load .dockerignore : .dockerignore 파일을 로드하는 단계입니다. .dockerignore 파일은 Docker 이미지를 빌드할 때 무시할 파일 또는 디렉토리를 지정하는 파일입니다. [internal] load build definition from dockerfile : Dockerfile을 로드하는 단계입니다. Dockerfile은 이미지 빌드에 필요한 설정과 명령어들을 정의하는 파일입니다. [internal] load metadata for docker.io/library/alpine:latest : Docker Hub에서 Alpine Linux의 최신 이미지에 대한 메타데이터를 로드하는 단계입니다. FROM docker.io/library/alpine 명령어에서 사용된 "alpine" 이미지를 가져오기 위한 작업입니다. [1/1] FROM docker.io/library/alpine : Alpine Linux를 기반으로 이미지를 생성하는 단계입니다. FROM 명령어는 이미지의 베이스로 사용할 이미지를 정의하는데, 여기서는 Docker Hub의 Alpine Linux 이미지를 사용합니다. exporting to image : 이미지를 빌드하고 있는 단계가 끝났으며, 이미지를 내보내는 단계입니다. => exporting layers : 이미지의 레이어를 내보내는 단계입니다. Docker 이미지는 여러 레이어로 구성되어 있으며, 각 레이어는 변경된 파일들을 포함하고 있습니다. => writing image sha256:c85225625fb8e8572c14c74944213a43a1b92fe78b270278bde228 : 최종 이미지를 기록하는 단계입니다. 이미지의 SHA256 해시값을 보여주며, 해당 해시값으로 이미지를 식별할 수 있습니다

  • aws
  • docker
  • github
  • ci/cd
  • travis-ci
  • 데이터-엔지니어링
김종식 댓글 1 좋아요 7 조회수 685

docker rm `docker ps -a -q` 명령어 안 먹으시는 분들에게

미해결

따라하며 배우는 도커와 CI환경 [2023.11 업데이트]

강사님은 mac 환경에서 진행 하셔서 cmd 에서 ` 백틱으로 사용하십니다. 윈도우 환경에서는 ` 대신 $() 사용을 해야하고 해당 기호도 powershell에서만 적용이 됩니다. docker rm $(docker ps -a -q) 위의 명령어를 powershell에 입력 하시면 됩니다.

  • aws
  • docker
  • github
  • ci/cd
  • travis-ci
  • 데이터-엔지니어링
김종식 댓글 1 좋아요 1 조회수 433

ElasticBeanStalk생성 후 보안그룹 적용

미해결

따라하며 배우는 도커와 CI환경 [2023.11 업데이트]

EB -> 구성 -> 보안그룹을 누르면 위와 같은 에러가 발생합니다. 이유가 무엇인가요?

  • aws
  • docker
  • github
  • ci/cd
  • travis-ci
  • 데이터-엔지니어링
qkrtngus116 댓글 1 좋아요 0 조회수 426

ElasticBeanstalk생성시 질문입니다.

미해결

따라하며 배우는 도커와 CI환경 [2023.11 업데이트]

플랫폼에 docker를 누르는 부분이 나와있지않습니다. 바로 생성이 나오는데 그냥 생성버튼을 눌러야할까요?

  • aws
  • docker
  • github
  • ci/cd
  • travis-ci
  • 데이터-엔지니어링
qkrtngus116 댓글 1 좋아요 0 조회수 336

프로젝트 중인데 빠른답변 부탁드립니다..ㅜㅜ

미해결

따라하며 배우는 도커와 CI환경 [2023.11 업데이트]

현재 프론트와 백 나눠서 프로젝트를 진행중입니다. 강의에서는 하나의 레파지토리에 프론트폴더, 백앤드폴더, docker-compose.yml 파일이 있던데 저희는 오가니제이션으로 사용중이며, 프론트레파지토리, 백앤드레파지토리 나뉘어져있는 상황입니다. 강의처럼 Docker, Travis ci를 이용해서 자동배포를 할 예정인데, 1. 이 상황에서는 docker-compose.yml파일과 nginx를 위한 Dockfile이 어느곳에 위치하게 되나요? 2. 또, 강의에서는 mysql을 도커이미지로 만들고있던데, 만약 로컬에 이미 mysql이 깔려있고, AWS RDS를 이용중이라면 mysql에 대한 도커파일이 필요없는게 맞을까요? jwt토큰기반으로 프로젝트를 진행중이라 AT를 저장하기위해 redis를 사용중인데 이 상황이라면 redis에 대한 도커파일도 필요한건가요? 만약필요하다면 도커파일을 어떤식으로 작성해야하나요? ㅠㅠ 또 강의에서는 travis ci를 하나의 레파지토리(프론트 폴더와 백앤드폴더)로 하여 자동배포중이던데 1번에서 언급한것처럼 두개의 레파지토리로 나뉘어져있을 경우 travis ci에는 두개로 등록하여 빌드 및 테스트하는게 맞을까요??

  • aws
  • docker
  • github
  • ci/cd
  • travis-ci
  • 데이터-엔지니어링
qkrtngus116 댓글 1 좋아요 0 조회수 395

몽고 db를 백업방법을 부탁합니다.

해결됨

mongoDB 기초부터 실무까지(feat. Node.js)

mongodump로 로컬에 설치된 몽고 db를 백업하려 하는데 아래의 오류가 나옵니다.해결방법을 부탁합니다. - (mongodump.exe)를 별도로 다운받아야 하나요? -최신버전에는 mongodump.exe파일이 설치되어 있지 않습니다. [오류메세지] 'mongodump'은(는) 내부 또는 외부 명령, 실행할 수 있는 프로그램, 또는 배치 파일이 아닙니다

  • javascript
  • node.js
  • aws
  • mongodb
  • rest-api
  • dbms/rdbms
  • 데이터-엔지니어링
Jongwoo Park 댓글 1 좋아요 0 조회수 629

프로젝트 중인데 강사님 질문입니다 ㅜㅜ

미해결

따라하며 배우는 도커와 CI환경 [2023.11 업데이트]

현재 프로젝트 진행중입니다. 전 백앤드담당이긴한데, 여튼 프론트분들의 프로젝트를 로컬에서 실행해보려고하는데요. 자꾸 이렇게 오류가 납니다.. 왜이런건가요? 다음은 Dockerfile.dev파일입니다. 강의대로 Dockerfile.dev를 작성하였습니다.

  • aws
  • docker
  • github
  • ci/cd
  • travis-ci
  • 데이터-엔지니어링
댓글 1 좋아요 0 조회수 518

인기 태그

인프런 TOP Writers

주간 인기글