안녕 하세요
478
投稿した質問数 10
안녕 하세요 궁금한 사항이 있어서 문의드립니다.
Debezium CDC source connector 강의 내용중
redo 로그에 commit되지 않은 데이터도 쓰여진다고 말씀해주셨는데요
저보다 당연히 잘 아시겠지만 제가 알기로는 commit하면 버퍼에 쌓이고 디스크에는 반영되지 않고 그 이후에 주기적으로
redo log에 쌓이는 것으로 알고 있습니다
즉 commit이 되어야 redo log에 쌓이는 걸로 알고 있는데 제가 잘못알고 있는걸까요?
감사합니다.
回答 3
2
안녕하십니까,
일반적으로 DML이 발생하면 commit이 되거나 commit이 되지 않아도 redo log buffer(redo log 파일이 아니라 메모리)에는 변경 데이터가 쌓이게 됩니다.
commit이 되면 해당 데이터는 반드시 redo log 파일에 저장이 됩니다. 그런데, redo log 파일에 commit 되지 않은 데이터가 저장되어야 하는 경우가 있는데, 바로 redo log buffer 에 데이터가 일정 수준 가득 차서 이를 비워 줘야 할 때가 있습니다. 이런 경우 commit이 되지 않은 redo log buffer의 데이터도 redo log 파일에 저장되어야 합니다.
감사합니다.
0
안녕 하세요! 감사드립니다!
그럼 redo log와 binlog의 관계는 어떻게 되는걸까요?
binlog는 명령에 대한 히스토리가 남는걸로 알고 있는데요.
binlog도 commit된 것만 쌓이는걸로 알고 있는데
해당 내용이 인터넷에 검색했을 땐 대부분 얕은 정보뿐이여서요!
덕분에 디비에 대한 지식도 쌓이고 있습니다 감사합니다!!
1
아, 이 댓글이 있는걸 깜빡 잊고 있었군요.
mysql 은 다른 DB와 다르게 DB내에 별도의 Storage engine이 있습니다. 그러니까 db엔진과 storage engine이 별도로 있습니다.
binlog는 db엔진단에서 생성되며, redo log는 storage 엔진단에서 생성됩니다.
binlog역시 DML발생 시 redo log와 비슷한 역할을 수행하지만, db자체내의 모든 변경에 대한 데이터를 다 가지고, 내부적인 복구의 역할을 한다기 보다는 DB 복제에 주로 사용됩니다.
binlog는 redo log와는 달리 논리적으로 복제 DB에서 SQL로 전환 될 수 있는 형태로 저장됩니다. 또한 redo log와 다르게 Commit과 같은 Transaction이 종료 될 때에만 레코드가 생성됩니다.
계속 csv파일을 폴더로 인식하는 중입니다.
0
65
2
cdc failover
0
69
2
avro plugin에 안보이는거 같아요
0
68
2
zookeeper가 실행이 안되요
0
73
3
Debezium CDC Source Connector 이벤트 메시지
0
82
2
재 질문! 다른 connector가 동일 토픽 사용
0
63
2
메시지 발행이 안 됩니다.
0
75
2
디비지움 오프셋 리셋
0
94
2
mysql_jdbc_oc_sink_customers_02.json 에서 오류납니다.
0
69
3
io.debezium.connector.mysql.MySqlConnector 질문
0
67
2
Debezium 이벤트 메시지 발행 시 성공여부
0
80
2
connect 구동 오류
0
97
3
CDC Connect 통시에서의 암호화 관련 하여 문의 드립니다.
0
121
2
GCSSinkconnector
0
64
1
debezium source connector에서 `poll.interval.ms` 파라미터
0
142
2
자문자답: JDBC Sink Connector가 PostgreSQL의 Schema를 바라보지 않습니다.
0
212
1
table.name.format에 관하여..
0
196
2
binlog와 offset 관련 추가 질문드립니다
0
149
1
Debezium cdc source for MSSQL-Server [등록오류]
0
190
2
http http://localhost:8083/connector-plugins 시 플러그인이 보이지 않습니다.
0
187
2
안녕하세요 sink connector 생성 config 관련 질문입니다.
0
159
2
수강환경 VirtualBox -> Docker
0
223
2
일반적인 예시들이 궁금해서 질문 남깁니다.
1
145
2
debezium connector schema 찾지 못하는 오류
0
426
2

