샤딩의 기준
안녕하세요 쿠케님 강의 잘 보고 있습니다!
강의를 보다가 갑자기 궁금한 점이 생겨서 질문 드립니다.
샤딩의 기준이 현재는 article_id로 되어 있는데, 특정 샤드에 댓글 데이터가 엄청 생성되어서 불균형하게 저장이 되는 경우도 있을까요??
있다면 샤딩의 기준을 다시 정의하는 일도 있는지 궁금합니다.
항상 잘 보고 있습니다. 감사합니다.
답변 1
0
azosi님, 안녕하세요!
강의 잘 수강해 주셔서 감사합니다!
샤딩의 기준이 현재는 article_id로 되어 있는데, 특정 샤드에 댓글 데이터가 엄청 생성되어서 불균형하게 저장이 되는 경우도 있을까요??
확률에 대해서 물어보신거라면 당연히 0이 아니므로 불균형하게 저장될 수 있습니다.
물론, 서비스 정책적으로 최대 댓글 수를 막는다면 큰 문제는 아니겠지만요.
아무튼 샤딩이 불균형하게 되는 상황이 일어날 수 있는지 궁금하신 것으로 이해하였고,
게시글-댓글 관계가 아닌 다른 데이터 구조에서도 이러한 상황은 분명 발생할 수 있습니다.
있다면 샤딩의 기준을 다시 정의하는 일도 있는지 궁금합니다.
위와 같은 상황이 아무튼 생길 수 있으므로, 샤딩의 기준을 다시 정의하는 일도 분명 생길 수는 있습니다.
다만, 이미 운영중인 시스템의 샤드 키를 무중단 시스템에서 변경하는 것은 복잡하고 무거운 작업이 될 수 있습니다.
그래서 처음부터 샤드 키를 잘 설정하는 것이 중요합니다.
여기에서 자세한 내용을 다룰 수는 없고, 샤딩 환경에서의 모델링 전략 관련하여 강의를 만든 것이 있어서 궁금하시면 수강해보셔도 좋을 것 같습니다. (분산 DB 환경을 직접 접하고 있지 않다면 꼭 들을 필요는 없어서 절대 강요는 아닙니다!)
다른 방법으로는, 특정 샤드 키에만 데이터가 쏠린다면, 해당 키를 Hot Key로 보고 특별하게 별도 취급하는 방법도 있습니다. (다른 데이터들은 기존 샤딩 전략을 쓰고, 일부 Hot Key만 별도 전용 샤드로 빼는 등의 방법을 취한다는 것)
감사합니다.
consumer에서 에러가 발생할 경우 데이터 유실 문의
0
39
2
게시글 테스트 데이터 삽입
0
44
2
정렬, 필터, 검색 등의 조건이 붙을 경우 최적화할 수 있는 방법이 무엇이 있을까요?
0
97
2
좋아요 기능 정합성 보장 방법
0
90
2
좋아요 동시성처리 최적의 선택?
1
115
2
프론트엔드 msa 환경 api 주소 통합? 과 서버끼리 통신 방식에대해
0
85
2
안녕하세요 무한스크롤 강의듣다가 질문이 있습니다.
0
54
1
조회수 조회 로직 질문
1
64
2
비로그인 유저도 어뷰징 방지 정책
1
63
2
CommentServiceTest의 테스트 로직 질문
0
50
2
무한 스크롤 방식에서 페이지 번호 방식 쿼리의 문제점 의문
1
69
2
path 쿼리 관련 질문드립니다!
0
55
2
antigravity 에디터를 쓰신다면 종료해주세요
1
122
0
프로젝트 구조
0
83
2
article_like_count api test
0
70
2
이벤트 페이로드 객체의 생성 방식이 팩토리 메서드 패턴이 아닌 빌더 패턴인 이유가 궁금합니다!.
0
101
2
[33. 좋아요 수 구현] 에서 테스트 하는 화면 동시성 문제
0
88
2
findByPath에서 articleId로도 검색을 해야 할 것 같아요.
0
87
3
jpa ddl-auto none을 하는 이유와 join 방법
0
92
2
팩터리 메소드와 response 객체 사용 이유가 궁금합니다!
0
85
2
커서 기반 페이지네이션 과 무한 스크롤링
0
97
2
게시글 생성 로직에서 오류 발생시 redis 게시글 수 되돌리기
0
95
2
멀티 모듈이 아닌 MSA 환경에서 common
0
146
2
2Depth 강의 도중 궁금한 점 있어요!!
0
73
2