jenkins 설치 후, 플러그인 설치 시 오류

덕분에 jenkins 실습을 안정적으로 마칠 수 있었습니다 감사합니다 ㅎㅎ

jenkins 설치 후, 플러그인 설치 시 오류

헉 ㅠㅠ 주말인데도 이렇게 빠르게 답변 주셔서 감사드립니다! 덕분에 강의 너무 잘 듣고 있습니다!

tigera-operator 관련 질문 (eviction loop)

(사진)(사진)loki grafana prometheus를 설치한 후, tigera-operator가 바로 이런 식으로 늘어나게 됩니다...! 직접적인 원인이 loki grafana prometheus인지는 모르겠으나, k8s cluster를 설치한 후, 위 모니터링을 이어서 설치하고 나서, "위와 같이 계속 증식하는 상황을 발견했습니다.

안녕하세요 ECS를 활용한 ETL 작업 관련해서 질문 드립니다

정말 많이 배워갑니다 ㅎㅎ 강사님 나중에 강사님께서 ECS 관련된 강의 하나 더 내시면 또 따라가야겠어요 ㅎㅎ 강의를 들으면서 도커 컴포즈 파일을 이용한 ECS 배포를 해보려고 하는데 기존의 강의처럼 웹 콘솔로 하는 것과 상이한 것 같아 어려움을 겪고 있습니다. https://dev.to/raphaelmansuy/10-minutes-to-deploy-a-docker-compose-stack-on-aws-illustrated-with-hasura-and-postgres-3f6e 이와 같은 컴포즈 파일의 경우 어떻게 진행할 수 있는지 궁금합니다. 질문이 뭔가 추상적인 것 같아 강사님께서 참고 url을 추천해주실 수 있다면 너무 감사할 것 같습니다 (이미 너무 많은 정보와 도움을 주셔서 ㅠ) version: "3" services: chrome: image: .dkr.ecr.us-east-2.amazonaws.com/de_selenium_grid_chrome platform: linux/amd64 build: context: ./chrome dockerfile: Dockerfile container_name: de_selenium_grid_chrome shm_size: 3gb depends_on: - selenium-hub environment: - SE_EVENT_BUS_HOST=de_selenium_grid_selenium_hub - SE_EVENT_BUS_PUBLISH_PORT=4442 - SE_EVENT_BUS_SUBSCRIBE_PORT=4443 - SE_NODE_MAX_SESSIONS=7 - SE_NODE_MAX_INSTANCES=4 - SE_NODE_OVERRIDE_MAX_SESSIONS=true - SE_NODE_SESSION_TIMEOUT=300 deploy: mode: replicated replicas: 3 resources: limits: cpus: '1.5' memory: 4000M reservations: cpus: '0.25' memory: 1000M volumes: - ./logs/chrome:/var/log/selenium networks: - selenium_grid selenium-hub: image: .dkr.ecr.us-east-2.amazonaws.com/de_selenium_grid_selenium_hub platform: linux/amd64 build: context: ./selenium-hub dockerfile: Dockerfile container_name: de_selenium_grid_selenium_hub ports: - "4442:4442" - "4443:4443" - "4444:4444" volumes: - ./logs/hub:/var/log/selenium networks: - selenium_grid nginx: image: .dkr.ecr.us-east-2.amazonaws.com/de_selenium_grid_nginx build: context: ./nginx dockerfile: Dockerfile platform: linux/amd64 container_name: de_selenium_grid_nginx ports: - "80:80" volumes: - .nginx/nginx.conf:/etc/nginx/nginx.conf depends_on: - de_selenium_grid_selenium_hub networks: - selenium_grid networks: selenium_grid: driver: bridge 태스크 정의에 필요한 컨테이너 이름과 태스크 이름은 container_name과 동일하게 설정했습니다. nginx conf에서 server { listen 80; location / { proxy_pass http://de_selenium_grid_selenium_hub:4444; proxy_set_header Host $host; proxy_set_header X-Real-IP $remote_addr; proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; } } } 위와 같이 설정 후, (사진) 위와 같이 서비스를 단일 클러스터에 배포했는데요 또한 서비스 디스커버리를 아래와 같이 설정했습니다 첫번째가 nginx, 두번째가 de_selenium_grid_selenium_hub 입니다 (사진)(사진) 근데 nginx 서비스에서 계속 nginx conf에 적힌 de_selenium_grid_selenium_hub 를 찾질 못하네요 혹시 제가 서비스 디스커버리를 컨테이너 이름과 다르게 설정했을까요? 2023/11/19 09:29:08 [emerg] 1#1: host not found in upstream "de_selenium_grid_selenium_hub" in /etc/nginx/nginx.conf:39

안녕하세요 ECS를 활용한 ETL 작업 관련해서 질문 드립니다

친절한 답변에 너무 감사합니다 ㅎㅎ 저는 에어플로우를 사용하는 개발자라서 말씀해주신 방법대로 위의 ECS 태스크를 이용해 ETL 잡을 처리하도록 했습니다 한가지 더 궁금한 점이 있습니다. 현재 대용량의 데이터를 컨테이너 잡을 3개를 이용해서 처리합니다. 1. 컨테이너 내에 다운받고 압축 해체 데이터를 cpu 바운드로 전처리 데이터베이스에 저장하는 작업을 해야합니다. ECS 태스크를 처리할 때, 처리 중인 데이터를 공유하기 위해 볼륨을 잡는 것이 필요한데 이 경우, EFS와 바인드 차이가 어떻게 될지 궁금합니다.