Kafka, Hadoop/Spark, Airflow를 활용한 데이터파이프라인 구축 입문

Debezium 기반 CDC를 처음 접해 어디서부터 시작해야 할지 막막한 분들을 위한 강의입니다. MySQL의 변경 데이터를 Kafka로 실시간 수집하고 PostgreSQL까지 전달하는 전 과정을 직접 실습합니다. CDC의 기본 원리부터 설정과 운영 노하우까지 익혀, 실시간 데이터 파이프라인을 스스로 구축할 수 있습니다.

본 강의는 ksqlDB의 활용과 핵심 메커니즘을 다양한 실습을 통해 익힐 수 있게 구성되어 있습니다. 강의를 마치고 나면 여러분은 Kafka(카프카) 기반의 실시간 Streaming 데이터 분석 시스템을 쉽고 빠르게 구축하실 수 있게 됩니다.

카프카 문법 암기가 아닌 '언제·왜 이벤트로 흘려보내야 하는가'를 배우는 개념 중심 강의입니다. 쇼핑몰 '온마켓' 하나를 관통 프로젝트로 삼아 주문·재고·알림·검색·분석 등 10가지 실전 사례의 이벤트 흐름과 원리를 익히고, 토픽·파티션·컨슈머 그룹부터 이벤트 소싱·CQRS·멱등성까지 시스템 전체를 보는 눈을 키웁니다.

실전 환경에서 사용하는 아파치 카프카 애플리케이션 프로그래밍 지식들을 모았습니다! 데이터 파이프라인을 구축하는데 핵심이 되는 아파치 카프카의 각종 기능들을 살펴보고 실습하는 시간을 가집니다.

RabbitMQ, Kafka, Redis를 Python Flask와 통합해, 대규모 트래픽 처리와 실시간 스트리밍을 실전 프로젝트로 익히는 강의입니다.

실시간 데이터 스트리밍의 핵심 기술인 아파치 카프카의 내부 구조와 동작 원리를 체계적으로 학습합니다. 기초 개념부터 클러스터 구축, 클라이언트 개발, 마이크로서비스 적용까지 실무에 필요한 모든 지식과 노하우를 습득하여 안정적인 카프카 운영 역량을 갖추게 됩니다.

sw 개발자가 알아야할 카프카 활용을 위한 기초/필수/실전 지식 배웁니다. springboot를 활용하여 카프카와 연동하고 다양한 실전 상황에 맞는 메시지 송/수신 실습을 진행합니다.

LLM 활용 Hadoop & Hive 빅데이터 실무 AI Tutor와 함께하는 Hadoop Ecosystem 빅데이터 시대의 핵심 기술인 Hadoop Ecosystem을 이해하고, 분산 저장(HDFS)과 분산 처리(MapReduce), 데이터 웨어하우스(Hive)를 활용하여 대용량 데이터를 처리하는 방법을 실습 중심으로 학습하는 과정입니다. 본 강의는 Hadoop의 기본 구조와 동작 원리부터 HDFS, YARN, MapReduce, Hive까지 빅데이터 처리의 핵심 기술을 단계적으로 익힐 수 있도록 구성되어 있습니다. 특히 가상머신 기반의 실습 환경 구축부터 실제 데이터 처리 및 분석까지 수행함으로써 실무에서 활용 가능한 역량을 갖출 수 있습니다. 또한 본 과정은 단순한 동영상 강의를 넘어 LLM 기반 AI Tutor를 활용한 자기주도 학습 환경을 제공합니다. 수강생은 AI Tutor를 통해 Hadoop 및 Hive 관련 개념 질의응답, 오류 해결, 실습 문제 생성, HiveQL 작성 지원, 프로젝트 학습 가이드 등을 제공받으며 학습 효율을 극대화할 수 있습니다.

이 강의에서는 가상 결제서버를 통해서 코틀린을 마스터 할 수 있는 강의 입니다.

이력서를 기반으로 모의면접을 진행하는 텍스트형식의 강의입니다.

IntelliJ IDEA Conf 2025는 JetBrains에서 매년 주최하는 온라인 컨퍼런스로, Java와 Kotlin 개발 개발자를 위한 유익한 세션을 제공합니다. AI 도입, Spring Boot, Gradle, Kafka, 데이터베이스 관리 등 다양한 주제를 다루며, 클라우드 통합, 보안 코딩, 개발자 성능 향상 및 고급 개발 기법에 대한 인사이트도 공유됩니다. 이 컨퍼런스는 전문 개발자는 물론 초보 개발자도 참여가능하며, 더 빠르게 고품질의 코드를 작성할 수 있는 생산성 팁과 함께 최신 기술을 접할 수 있는 기회를 제공합니다.