• 카테고리

    질문 & 답변
  • 세부 분야

    데브옵스 · 인프라

  • 해결 여부

    미해결

SQS로 이런것도 가능할까요?

22.10.24 02:28 작성 조회수 222

0

데이터 하나가 1TB정도 되는 Log

해당 데이터를 1024개의 인스턴스로 빠르게 처리하고싶음

이때 1GB씩만 사이좋게 나눠서 처리하게 가능할까요?

답변 1

답변을 작성해보세요.

0

안녕하세요.

지금 말씀하신 Use Case는 SQS보다는 Batch형태로 데이터를 분산처리의 형태로 나눠서 처리해야 하는 것으로 보이기 때문에 AWS Batch를 고려해보시면 될 꺼 같습니다. SQS는 잘못하면 병목현상이 생길 수도 있습니다.

0S님의 프로필

0S

질문자

2022.10.25

선생님 답변감사합니다!

AWS 배치는 따로 강의에는 없던걸로 아는데 자습해놓겠습니다!

로롱쓰님의 프로필

로롱쓰

2023.04.29

혹시 어떤 것 때문에 병목현상이 발생할까요?
FIFO로 순간순간 처리할 수 있는게 1개라서 그런 걸까요?