인프런 커뮤니티 질문&답변
작성한 질문수
스트리밍 window 관련 질문드립니다.
23.05.15 12:45 작성
·
294
1
spark streaming을 설명하시면서 광고로그를 join? 하는걸 예시로 들어주셨는데요, 노출이랑 클릭이랑 interval이 10분~30분 정도가 아니라 7일 이렇게 되는 경우에도 spark streaming으로 처리가 가능한가요?? 궁금합니다.
답변 1
0
미쿡엔지니어
지식공유자
2023. 05. 15. 16:57
안녕하세요 뎁꼼님,
대부분의 경우 스트리밍은 리얼타임을 다루기 위해서 사용하지 일주일 간격의 lookback을 사용하지 않습니다. 그 경우에서 저장하시는 곳(e.g. S3, HDFS or GCS)등에서 오프라인으로 처리하시길 추천 드립니다.
도움이 되셨으면 좋겠네요.