PostgreSQL của nhà phát triển AI tại Thung lũng Silicon, người xử lý hơn 200 tỷ dữ liệu

Vấn đề lớn nhất khi vận hành một hệ thống batch xử lý hơn hàng triệu dữ liệu chính là sự suy giảm hiệu năng và khó khăn trong việc phục hồi khi xảy ra lỗi. Những vấn đề này không thể được giải quyết bằng các vòng lặp đơn giản hay thiết kế sai lầm. Dựa trên kinh nghiệm xử lý dữ liệu lớn một cách ổn định trong môi trường dịch vụ thực tế, khóa học này sẽ giúp bạn hiểu rõ cấu trúc và nguyên lý hoạt động của Spring Batch, từ đó truyền tải phương pháp thiết kế đảm bảo cả hiệu năng lẫn tính ổn định. Vượt xa việc giải thích các tính năng đơn thuần, khóa học giúp bạn nâng cao khả năng giải quyết vấn đề cốt lõi trong xử lý dữ liệu thông qua kiến trúc batch có thể áp dụng ngay vào thực tế công việc.

Hầu hết các nhà phát triển vẫn chỉ dừng lại ở Batch và CronJob khi nói về xử lý dữ liệu. Tuy nhiên, trong môi trường dịch vụ thực tế, dữ liệu được tạo ra liên tục, và nếu không thể xử lý luồng đó ngay lập tức, nó sẽ dẫn đến các vấn đề về độ trễ, nghẽn cổ chai và tính nhất quán. Bản thân tôi cũng đã trực tiếp trải qua các vấn đề về đề xuất thời gian thực, đồng bộ hóa trạng thái và trễ sự kiện trong môi trường lưu lượng truy cập lớn, và đã vô số lần trăn trở rằng: "Liệu xử lý việc này bằng Batch có thực sự đúng đắn không?". Khóa học này bắt đầu từ chính câu hỏi đó. Khóa học sẽ giải quyết dưới góc nhìn thực tiễn cách sử dụng Apache Flink để tính toán ngay tại thời điểm dữ liệu luân chuyển, quản lý trạng thái một cách an toàn và tạo ra kết quả chính xác dựa trên Event Time. Không chỉ dừng lại ở việc giải thích lý thuyết đơn thuần, bạn sẽ được trải nghiệm cách thiết kế và vận hành hệ thống xử lý luồng thời gian thực thông qua mã nguồn và cấu trúc thực tế. Đối với những ai cảm thấy xử lý thời gian thực còn mơ hồ, hay những ai tò mò về thế giới sau hệ thống nhắn tin (messaging), khóa học này sẽ đưa ra một hướng đi rõ ràng.

Có lẽ bạn đã từng cảm thấy bế tắc khi đang sử dụng Redis nhưng lại không thể giải thích được tại sao phải thiết kế như vậy, hay tại sao mô hình này lại ra đời. Bản thân tôi, thông qua kinh nghiệm làm việc thực tế và vai trò người phỏng vấn, đã luôn xem Redis không chỉ là một bộ nhớ đệm đơn thuần, mà là một thành phần cốt lõi quyết định tính ổn định và khả năng mở rộng của dịch vụ. Khóa học này không bắt bạn phải học thuộc lòng các câu lệnh, mà dựa trên kinh nghiệm của tôi để giải thích việc lựa chọn cấu trúc nào trong môi trường lưu lượng truy cập thực tế cùng những đánh giá về sự đánh đổi (trade-off). Từ đó, giúp bạn tự thiết lập các tiêu chuẩn để có thể tự tin giải thích trong cả công việc thực tế lẫn khi phỏng vấn.

Đây là khóa học dành cho những nhà phát triển đang tìm kiếm giải pháp căn bản trong môi trường mà phản hồi chậm dần khi lưu lượng truy cập tăng lên, thread pool nhanh chóng bị cạn kiệt và tình trạng nghẽn cổ chai trở nên nghiêm trọng khi các lượt gọi API bên ngoài tăng cao. Khóa học giúp bạn nhìn nhận vấn đề từ góc độ thay đổi cấu trúc thay vì chỉ đơn thuần là mở rộng máy chủ. Thông qua khóa học này, trước tiên bạn sẽ hiểu được những hạn chế của mô hình Thread per Request truyền thống trong Spring MVC. Bạn sẽ xác định ở cấp độ mã nguồn lý do tại sao CPU vẫn còn trống nhưng hiệu suất xử lý không tăng lên, và cách thức Blocking I/O thực sự chiếm dụng tài nguyên hệ thống như thế nào. Tiếp theo, bạn sẽ học về khái niệm và đặc tả chuẩn của Reactive Streams, đồng thời nắm vững cách xử lý luồng dữ liệu bằng Mono và Flux của Reactor. Không chỉ dừng lại ở cách sử dụng đơn thuần, bạn sẽ được trải nghiệm thực tế cách luồng dữ liệu bắt đầu, được tiêu thụ và cách điều chỉnh lưu lượng xử lý. Đặc biệt, bạn cũng sẽ trực tiếp triển khai phương thức thiết kế sử dụng Back Pressure để ngăn ngừa lỗi OOM (Out Of Memory) hoặc quá tải. Ngoài ra, bạn sẽ hiểu về cấu trúc xử lý dựa trên Event Loop của Spring WebFlux và tiến hành thực hành so sánh cách Non-Blocking I/O hoạt động trong quá trình xử lý yêu cầu thực tế. Bằng cách đặt MVC và WebFlux cạnh nhau để xác nhận sự khác biệt về cấu trúc, bạn cũng sẽ đúc kết được tiêu chí đánh giá khi nào nên lựa chọn Reactive. Khóa học không chỉ dừng lại ở mức độ "học về bất đồng bộ". Bạn sẽ học được cách xử lý nhiều yêu cầu hơn với ít thread hơn, cách duy trì luồng ổn định trong môi trường phụ thuộc nhiều vào API bên ngoài, và tư duy thiết kế để đảm bảo hiệu suất xử lý trong môi trường có tính đồng thời cao.

Xây dựng cụm Kafka với Spring Boot 3.x + Kotlin, đồng thời phát triển hệ thống xử lý đơn hàng có khả năng mở rộng và truyền phát sự kiện thời gian thực bằng cách sử dụng PostgreSQL CDC, Debezium Connect và Apache Avro schema.

Khóa học này tập trung vào các kỹ thuật giao tiếp RPC để tối đa hóa hiệu suất trong môi trường MSA (Microservice Architecture) quy mô lớn. Vượt ra ngoài việc thực hành gRPC đơn giản, bạn sẽ học cách triển khai giao tiếp giữa các dịch vụ một cách ổn định và hiệu quả trong môi trường vận hành thực tế nơi hàng trăm microservice hoạt động đồng thời. Dựa trên Golang, khóa học sẽ đề cập đến việc viết cú pháp Protocol Buffers(proto), tự động tạo code và triển khai dịch vụ, cấu trúc của gRPC và những ưu điểm so với RPC truyền thống, cũng như các chiến lược tối ưu hóa hiệu suất với định hướng thực tế. Để những người không chuyên ngành hoặc người mới bắt đầu phát triển server cũng có thể dễ dàng hiểu, khóa học sẽ giải thích từng bước từ khái niệm RPC đến nguyên lý hoạt động bên trong của gRPC, giúp bạn trang bị năng lực thực tế có thể áp dụng ngay vào dịch vụ thực tế.

Đây là khóa học giúp bạn thành thạo Kotlin thông qua máy chủ thanh toán ảo.

Khóa học này được tạo ra nhằm giải quyết vấn đề mà nhiều người gặp phải trong quá trình chuẩn bị xin việc lập trình viên: "Đã học qua CS (Khoa học máy tính) và Cấu trúc dữ liệu nhưng lại lúng túng không nói nên lời khi phỏng vấn". Qua quá trình trực tiếp phỏng vấn tại các công ty như Naver, Kakao, Toss, tôi nhận thấy rằng đa số ứng viên tuy có học thuộc lòng các khái niệm, nhưng lại không giải thích được tại sao khái niệm đó lại cần thiết và chúng được ứng dụng như thế nào trong tình huống thực tế. Khóa học này không dạy cách học vẹt đơn thuần, mà sẽ giúp bạn hiểu rõ ý đồ câu hỏi của người phỏng vấn và cách trả lời thuyết phục hơn cho cùng một câu hỏi. Tất cả các chủ đề từ OSI 7 lớp, Cấu trúc dữ liệu cho đến Coding Test đều được tập trung khai thác xoay quanh các khía cạnh: Tại sao phải biết? Khi nào thì dùng? Và phải trả lời thế nào trong buổi phỏng vấn để nhận được đánh giá cao? Đây là khóa học dành cho những ai muốn trở thành một lập trình viên có khả năng giải thích kiến thức bằng ngôn ngữ của chính mình, thay vì chỉ đưa ra những câu trả lời rập khuôn giống như bao người khác.

Khóa học này là một lớp master class, nơi bạn sẽ học một cách bài bản về 🌺 Coroutine của Kotlin, từ nền tảng lý thuyết đến ứng dụng thực tế. Khóa học sẽ đi sâu vào các tính năng chính thường dùng trong thực tế một cách tuần tự, bao gồm nguyên lý và cấu trúc cốt lõi của Coroutine, sự cần thiết của lập trình bất đồng bộ, Coroutine builders và scope, xử lý ngoại lệ, Channel, Flow, v.v. Mỗi khái niệm được giải thích kèm theo ví dụ thực hành, giúp cả người mới bắt đầu cũng có thể dễ dàng hiểu và áp dụng ngay vào thực tế. Đây là khóa học nhập môn và thực hành tốt nhất dành cho các lập trình viên muốn xây dựng kỹ năng Coroutine vững vàng trong thực tế.

Khóa học này không chỉ đơn thuần dạy cách thiết lập NGINX, mà tập trung vào việc giải quyết những vấn đề bế tắc trong phỏng vấn và thực tế do không hiểu rõ tại sao cần cấu trúc và thiết lập như vậy. Dựa trên kinh nghiệm từng là người phỏng vấn tại Naver, Kakao và Toss để đánh giá vô số ứng viên, tôi sẽ cùng bạn thực hành và giải đáp cách giải thích cũng như vận dụng NGINX dưới góc độ hiệu suất, khả năng mở rộng và vận hành. Cốt lõi của khóa học này là giúp bạn hình thành tư duy có thể theo dõi luồng lưu lượng và truy vết vấn đề, thay vì chỉ học thuộc lòng các giá trị thiết lập.

Khi làm phát triển backend, sẽ có lúc bạn phải đối mặt với những trăn trở như thế này. Đó là khoảnh khắc bạn cảm nhận được giới hạn của việc chỉ sử dụng giao tiếp REST đơn thuần và cấu trúc CRUD khi dịch vụ mở rộng và lưu lượng truy cập tăng lên. Bản thân tôi cũng đã gặp phải vấn đề tương tự trong thực tế và đã trải qua nhiều lần thử sai giữa hiệu suất và sự phức tạp của cấu trúc. Câu trả lời mà tôi lựa chọn trong quá trình đó chính là NATS. Với cấu trúc đơn giản dựa trên một tệp thực thi duy nhất (single binary), hiệu suất độ trễ cực thấp tính bằng micro giây, và việc cung cấp vừa đủ các tính năng thiết yếu cho thực tế từ Pub/Sub đến Queue Group, JetStream đã khiến nó trở thành một lựa chọn rất thực tế trong môi trường dịch vụ thực tế. Khóa học này không phải là một bài giảng liệt kê các tính năng của NATS. Dựa trên những vấn đề tôi đã đối mặt trong công việc, tôi sẽ giải thích thông qua mã nguồn và luồng xử lý về việc tại sao tôi chọn NATS trong những tình huống nào và cách tôi thiết kế cấu trúc ra sao. Đây là khóa học giúp mọi người, từ những người mới bắt đầu với hệ thống nhắn tin (messaging system), các nhà phát triển backend đang chuẩn bị xin việc, cho đến các nhà phát triển cấp cao đang trăn trở về một kiến trúc tốt hơn, có thể hiểu về hệ thống phân tán và tiến thêm một bước trong sự nghiệp.

Khóa học này không chỉ liệt kê các công nghệ về kiến trúc microservices và môi trường phân tán, mà còn giải thích chúng từ 'góc nhìn thiết kế' được yêu cầu trong thực tế công việc và phỏng vấn. Bắt đầu từ sự khác biệt giữa Monolithic và MSA, khóa học đề cập từng bước đến chiến lược chuyển đổi dần dần, modular monolithic, clean architecture và hexagonal architecture, đồng thời giải thích rõ ràng tại sao mỗi lựa chọn lại cần thiết và những đánh đổi (trade-off) đi kèm. Ngoài ra, thông qua thực hành, bạn có thể trực tiếp xác nhận ý đồ của cấu trúc và học các vấn đề cốt lõi mà tất yếu phải đối mặt trong môi trường phân tán như tính nhất quán dữ liệu, transaction, giao tiếp giữa các service, và xử lý sự cố thông qua các kịch bản thực tế. Được xây dựng dựa trên các câu hỏi và quan điểm thực tế của phỏng vấn viên Kakao, khóa học này không chỉ dừng lại ở việc tiếp thu kiến thức, mà còn hướng đến mục tiêu nâng cao một bậc chính tư duy nhìn nhận hệ thống phân tán.

Khóa học này giúp bạn học tập từng bước từ cách sử dụng MySQL cơ bản đến các kỹ thuật nâng cao cần thiết trong môi trường dịch vụ thực tế. Ngoài ra, khóa học còn bao gồm nhiều chủ đề đa dạng như kỹ thuật mô hình hóa dữ liệu dựa trên các ví dụ thực tiễn và dữ liệu thực tế, xem xét tính hiệu quả của thiết kế Foreign Key, phân tích DDL lược đồ của Google Calendar, và các nguyên tắc thiết kế DDL hiện đại. Đây là khóa học giúp bạn tìm hiểu sâu sắc cách vận dụng MySQL không chỉ như một cơ sở dữ liệu đơn thuần mà còn là một thành phần cốt lõi của hệ thống.

Khóa học tập trung vào thực hành về kỹ thuật quản lý giao dịch SAGA để duy trì tính nhất quán của dữ liệu trong môi trường phân tán. Bạn sẽ xây dựng 3 microservices bằng Spring Boot và Docker, đồng thời triển khai hai mô hình Orchestration và Choreography với Kafka và MySQL. Thông qua khóa học này, bạn có thể nắm vững các khái niệm cốt lõi có thể áp dụng ngay vào thực tế như nguyên lý hoạt động của giao dịch phân tán, thiết kế giao dịch bù (compensating transaction) và xử lý phục hồi sau sự cố.

Học cách xây dựng Observability từ cơ bản đến thực chiến, một yếu tố thiết yếu trong môi trường kiến trúc Microservices (MSA). Thông qua thực hành từng bước, bạn sẽ nắm vững việc thu thập dữ liệu chuẩn hóa bằng OpenTelemetry, lưu trữ và tìm kiếm trace với Grafana Tempo, cũng như trực quan hóa bằng TraceQL. Bạn có thể học cách theo dõi luồng dịch vụ thông qua distributed tracing, xác định điểm nghẽn và phân tích nguyên nhân sự cố.

Học cách xây dựng data pipeline sử dụng Apache Airflow từ cơ bản đến thực chiến. Hiểu rõ các khái niệm cốt lõi và kiến trúc của Airflow, đồng thời thực hành các mẫu thiết kế nâng cao thường được sử dụng trong thực tế như Dynamic DAG, xử lý song song, xử lý phân tán, Custom Operator. Thiết lập môi trường thực hành với Python và Docker, phát triển năng lực thực chiến để thiết kế và vận hành workflow thực tế.

Làm thế nào để chịu tải được lượng truy cập bùng nổ? Thông qua các mô hình thiết kế thực tế dựa trên EDA (Kiến trúc hướng sự kiện) sử dụng Kafka, Spring, CDC và Temporal, bạn sẽ học được cách xây dựng một kiến trúc có khả năng chống chịu lỗi tốt và mở rộng linh hoạt. Với kinh nghiệm thực tế từ nhà phát triển Kakao, khóa học giải thích một cách dễ hiểu và rõ ràng để ngay cả những người không chuyên cũng có thể nắm bắt được. Đây là khóa học tập trung vào thực hành, bao gồm tất cả từ dòng dữ liệu thời gian thực, xử lý sự kiện cho đến liên kết microservices!

Cùng với các nhà phát triển tại Toss - những người xử lý hàng trăm tỷ lượt truy cập tài chính, và các nhà phát triển đang phát triển nền tảng tại Pangyo (bắt đầu từ những người không chuyên ngành), bạn sẽ học cách thiết kế và xử lý kiến trúc dữ liệu lớn xử lý hàng trăm tỷ dữ liệu chỉ bằng cách sử dụng SQL thuần túy và các tính năng cốt lõi của MySQL.

Phát triển máy chủ trò chuyện thời gian thực WebSocket có khả năng mở rộng, xử lý lưu lượng truy cập lớn bằng cách xây dựng cụm 3 thực thể (instance) với Spring Boot 3.x + Kotlin, đồng thời sử dụng tin nhắn phân tán Redis Pub/Sub và bộ cân bằng tải Nginx.

Khóa học này bao gồm cách cấu hình một dự án đa module từ đầu, sử dụng Kotlin và Spring Boot. Khóa học được tiến hành theo hướng thực hành, từ các khái niệm cơ bản về module hóa, cài đặt Gradle, quản lý phụ thuộc giữa các module, cho đến phát triển ứng dụng thực tế. Từ người mới bắt đầu đến nhà phát triển trung cấp, hãy tham khảo khóa học này khi muốn tìm hiểu kiến thức cơ bản và ứng dụng thực tế của multi-module.

Khóa học này giúp bạn học tập từng bước từ cách sử dụng MySQL cơ bản đến các kỹ thuật nâng cao cần thiết trong môi trường dịch vụ thực tế. Ngoài ra, khóa học còn bao gồm nhiều chủ đề đa dạng như kỹ thuật mô hình hóa dữ liệu dựa trên các ví dụ thực tiễn và dữ liệu thực tế, xem xét tính hiệu quả của thiết kế Foreign Key, phân tích DDL lược đồ của Google Calendar, và các nguyên tắc thiết kế DDL hiện đại. Đây là khóa học giúp bạn tìm hiểu sâu sắc cách vận dụng MySQL không chỉ như một cơ sở dữ liệu đơn thuần mà còn là một thành phần cốt lõi của hệ thống.

Làm thế nào để chịu tải được lượng truy cập bùng nổ? Thông qua các mô hình thiết kế thực tế dựa trên EDA (Kiến trúc hướng sự kiện) sử dụng Kafka, Spring, CDC và Temporal, bạn sẽ học được cách xây dựng một kiến trúc có khả năng chống chịu lỗi tốt và mở rộng linh hoạt. Với kinh nghiệm thực tế từ nhà phát triển Kakao, khóa học giải thích một cách dễ hiểu và rõ ràng để ngay cả những người không chuyên cũng có thể nắm bắt được. Đây là khóa học tập trung vào thực hành, bao gồm tất cả từ dòng dữ liệu thời gian thực, xử lý sự kiện cho đến liên kết microservices!

Redis là cơ sở dữ liệu nguồn mở nhanh chóng và có thể mở rộng. Công nghệ này được sử dụng để tối đa hóa hiệu suất trong các ứng dụng thời gian thực, trò chơi, nền tảng truyền thông xã hội, v.v. Tuy nhiên, để hiểu được sức mạnh thực sự của Redis và sử dụng hiệu quả, bạn cần phải có sự hiểu biết sâu sắc. Bây giờ đã đến lúc bạn có thể học chuyên sâu về Redis. Trong "Redis cùng kỹ sư Thung lũng Silicon", chúng tôi sẽ đề cập đến nhiều chủ đề từ các khái niệm cốt lõi của Redis cho đến các tính năng nâng cao. Khóa học này dành cho tất cả mọi người, từ những người mới bắt đầu sử dụng Redis cho đến những người dùng nâng cao.

Câu chuyện vận hành SQL Server dễ dàng và thú vị từ Microsoft Certified Trainer! Giải thích từng bước các kỹ thuật vận hành cốt lõi thực sự cần thiết tại chỗ mà bạn có thể học và sử dụng ngay, để ngay cả người mới bắt đầu cũng có thể dễ dàng hiểu được.

Giảng viên DBA với 30 năm kinh nghiệm sẽ hướng dẫn bạn 45 kỹ thuật tối ưu SQL cốt lõi có thể áp dụng ngay vào thực tế thông qua các ví dụ thực chiến. Hãy nắm vững bí quyết thực tế để làm cho các truy vấn chậm nhanh hơn 10 lần, từ phân tích execution plan đến tối ưu hóa index và tuning join!

Bắt đầu Spring CRUD với giá gà rán Hãy bắt đầu phát triển server với giá gà rán!

[Dành cho người mới bắt đầu phát triển web] Hiểu rõ đến cả JPA và từng bước xây dựng Spring Boot REST API một cách dễ dàng

Đây là một bài giảng toàn diện về những điều sẽ tốt cho những ai muốn tìm việc làm backend Java mới, đặc biệt là những người sắp được phỏng vấn, cần biết trước.

Trích xuất và sử dụng dữ liệu thông qua Oracle 18c và trở thành chuyên gia cơ sở dữ liệu!

Tôi đã học một cách khó khăn, nhưng mong các bạn sẽ học thật dễ dàng. Tôi đã loại bỏ những lý thuyết không cần thiết và chỉ gói gọn những cốt lõi của SQL. Hãy nhanh chóng hoàn thiện sự tự tin với SQL của bạn.

Đây là bài giảng sử dụng khuôn khổ chính phủ điện tử và Kiến trúc phân lớp duy nhất tại Hàn Quốc được sử dụng rộng rãi trong thực tế nhưng không có ở Hàn Quốc. Trong bài giảng này, chúng ta sẽ tìm hiểu cách xây dựng phần phụ trợ và phía máy chủ của phát triển web bằng cách sử dụng Spring Framework và khuôn khổ chuẩn chính phủ điện tử.

Tôi đã tóm tắt câu lệnh SQL SELECT thiết yếu và cách sử dụng cơ bản của Google Trang tính mà tôi đã học được khi làm nhà phân tích cho một công ty dịch vụ.

Khóa học thực hành xây dựng bảng tin siêu đơn giản một cách dễ dàng với Spring Boot và React.js! Khóa học này tập trung vào thực hành hơn là lý thuyết, bao gồm quy trình phát triển ứng dụng web để hoàn thành nhanh chóng.

Khóa học này được thiết kế như một khóa học để tiếp thu và thực hành các khái niệm về sử dụng lập trình PHP và dành cho những sinh viên muốn tiếp thu các khái niệm về sử dụng lập trình PHP.

Đây là khóa học hướng dẫn cách dễ dàng triển khai hệ thống backend game bằng UGS (Unity Gaming Service). Bạn sẽ thực hành các tính năng thiết yếu như xác thực Guest và Username/Password, lưu trữ dữ liệu game, Leaderboard, Remote Config, v.v. UGS đã chuẩn bị một khóa học thực chiến cho phép bạn dễ dàng học hỏi và áp dụng ngay vào dự án của mình, nhờ hệ sinh thái hoàn hảo được xây dựng với Unity mà không có rào cản gia nhập.

Đây là khóa học học MS-SQL thông qua cơ sở dữ liệu về bóng chày/công ty.

Tương tự như công việc thực tế, quá trình này diễn ra qua các giai đoạn xây dựng cơ sở hạ tầng và học tập, áp dụng những kiến ​​thức cần thiết.

Cứ nghe thử đi. Năng lực giảng dạy, sức hút và chất lượng bài giảng khác hẳn.

Tìm hiểu các thành phần chung của dịch vụ quy mô toàn cầu thông qua các bài báo, sách và bài báo nổi tiếng.

Đây là khóa học hướng dẫn làm game Unity thực tế kết hợp với cơ sở dữ liệu. Bạn có thể giải quyết những phần khó tiếp cận thông qua bài giảng này.