Các khái niệm và phương pháp điều chỉnh được xem xét khi di chuyển 20 tỷ mẩu dữ liệu sang MySQL

Làm thế nào để chúng ta di chuyển 20 tỷ bản ghi dữ liệu? 🤔

Trong công việc gần đây, tôi đã di chuyển 20 tỷ bản ghi dữ liệu từ MongoDB sang MySQL, giúp tiết kiệm chi phí và chuẩn hóa.

Nói thẳng ra thì không có câu trả lời đúng. Tôi không biết mình đã làm đúng chưa, hay liệu có thể tối ưu hóa thêm được nữa không.

Tuy nhiên, chúng tôi vẫn triển khai dịch vụ một cách bình thường và không bị gián đoạn, và tôi muốn chia sẻ với bạn những lĩnh vực mà chúng tôi đã cân nhắc và chú ý để tối ưu hóa trong quá trình này.

Qua bài giảng này, tôi hy vọng bạn sẽ hiểu được sức hấp dẫn của DB và những mối quan tâm của các nhà phát triển backend .

Các tính năng của khóa học này

📌 Chủ đề này dựa trên 100% kinh nghiệm của tôi.

📌 Nội dung bao gồm những điều tôi muốn chia sẻ ngoài những gì tôi đã trải nghiệm.

📌 Tôi sẽ xem xét bất kỳ phần nào mà lời giải thích cá nhân của tôi còn thiếu sót và cho bạn biết.

📌 Tôi sẽ kể cho bạn nghe về kinh nghiệm thực tế của tôi.

Tôi giới thiệu điều này cho những người này

Bài giảng bao gồm các chủ đề sau: 🤔

1. Chỉ mục nhiều cột [Chỉ mục tổng hợp]

2. Giải thích truy vấn [Phân tích truy vấn]

3. Chỉ số bao phủ [ Tối ưu hóa chỉ số ]

4. RDB so với ElasticSearch [Chỉ mục và Chỉ mục đảo ngược]

5. SẮP XẾP THEO [Tối ưu hóa sắp xếp]

6. CHÈN [Tối ưu hóa chèn]

7. KHÓA TỰ ĐỘNG TĂNG [ Khóa TỰ ĐỘNG TĂNG ]

8. Index Dive [Tối ưu hóa lập kế hoạch truy vấn]

9. Tiền tố Index [Chỉ số Lightening]

10. Khóa MySQL [ Tính toàn vẹn và đồng thời của MySQL ]

11. DeadLock [Hiểu về DeadLock thông qua Phân tích trường hợp]

12. Không có OFFSET [Điều chỉnh truy vấn]

13. Bỏ qua Khóa [ Quản lý Phiên ]

Ai đã tạo ra khóa học này

Tôi có nhiều kinh nghiệm đa dạng, từ khởi nghiệp đến phát triển dịch vụ metaverse và nền tảng. Gần đây, tôi đã di chuyển một dịch vụ xử lý 20 tỷ dữ liệu MongoDB sang MySQL, và hiện tôi là nhà phát triển máy chủ nền tảng xử lý 20 tỷ dữ liệu MySQL.

Những điều cần lưu ý trước khi tham gia khóa học

Một bài giảng hay để tham khảo 💁

Khóa học này chủ yếu tập trung vào MySQL.

Nhưng không có công ty nào tôi từng trải nghiệm sử dụng một DB duy nhất.

• Tất nhiên, trong trường hợp khởi nghiệp, nó được cấu hình với một DB.

Chúng tôi lựa chọn và sử dụng nhiều DB khác nhau tùy theo tình huống, tình trạng cũ và môi trường.

Vì vậy, tôi nghĩ chỉ sử dụng MySQL thôi có thể là không đủ.

Nếu bạn tò mò về MongoDB, một nền tảng NoSQL hàng đầu, bài giảng dưới đây sẽ rất hữu ích.

• Cách xây dựng đường ống dữ liệu với hơn 20 tỷ bản ghi bằng MongoDB
  Bài giảng này chủ yếu đề cập đến các câu hỏi thực tế.