inflearn logo
inflearn logo

Airflowใƒžใ‚นใ‚ฟใƒผใ‚ฏใƒฉใ‚น

ใƒ‡ใƒผใ‚ฟใƒ‘ใ‚คใƒ—ใƒฉใ‚คใƒณใ‚’ๅŠน็އ็š„ใซไฝœๆˆใ—็ฎก็†ใ™ใ‚‹ใŸใ‚ใฎOrchestrationใƒ„ใƒผใƒซใงใ‚ใ‚‹Airflowใซใคใ„ใฆๅญฆใถ่ฌ›็พฉใงใ™ใ€‚ๅˆๅฟƒ่€…ใงใ‚‚้ †ใ‚’่ฟฝใฃใฆๅญฆในใ‚‹Airflowใƒžใ‚นใ‚ฟใƒผใ‚ฏใƒฉใ‚นใธใ‚ˆใ†ใ“ใ๏ผ

้›ฃๆ˜“ๅบฆ ๅˆ็ดš

ๅ—่ฌ›ๆœŸ้–“ ็„กๅˆถ้™

airflow
airflow
Data Engineering
Data Engineering
Python
Python
airflow
airflow
Data Engineering
Data Engineering
Python
Python
hyunjinkim๋‹˜์˜ ํ”„๋กœํ•„ ์ด๋ฏธ์ง€

Kafka & Spark ๊ธฐ๋ฐ˜ ์‹ค์‹œ๊ฐ„ ํŒŒ์ดํ”„๋ผ์ธ ๊ฐ•์˜ ์˜คํ”ˆ

ใ“ใ‚“ใซใกใฏ

Airflow Master Class ใ‚ญใƒ ใƒปใƒ’ใƒงใƒณใ‚ธใƒณใงใ™ใ€‚

ๆœ€่ฟ‘ใฎใƒชใ‚ขใƒซใ‚ฟใ‚คใƒ ๅ‡ฆ็†ใซๅฏพใ™ใ‚‹ใƒ‹ใƒผใ‚บใŒๅคงใใๅข—ๅŠ ใ—ใฆใ„ใ‚‹ใฎใซๅฏพใ—ใ€ใƒชใ‚ขใƒซใ‚ฟใ‚คใƒ ใƒ‘ใ‚คใƒ—ใƒฉใ‚คใƒณใ‚’ๆ‰ฑใ†่ฌ›็พฉใŒไธ่ถณใ—ใฆ

Kafka๏ผ†Sparkใƒ™ใƒผใ‚นใฎใƒชใ‚ขใƒซใ‚ฟใ‚คใƒ ๅ‡ฆ็†ใƒ‘ใ‚คใƒ—ใƒฉใ‚คใƒณใ‚’ๅฎŸ่ทตใ—ใฆๅญฆใถใ“ใจใŒใงใใ‚‹่ฌ›็พฉใ‚’ใ‚ชใƒผใƒ—ใƒณใ—ใพใ—ใŸใ€‚

KafkaใจSparkใจใ‚‚ใซๅŸบๆœฌใ‹ใ‚‰ใƒชใ‚ขใƒซใ‚ฟใ‚คใƒ ใƒ‘ใ‚คใƒ—ใƒฉใ‚คใƒณใ‚’ๆง‹ๆˆใงใใ‚‹ๅ†…ๅฎนใพใงใ€ใ˜ใฃใใ‚Šๅญฆในใ‚‹ใ‚ˆใ†ใซๆบ–ๅ‚™ใ—ใพใ—ใŸใ€‚

ใฉใ‚“ใฉใ‚“ๅคฉๆฐ—ใŒใปใใ‚ŒใชใŒใ‚‰ๆ˜ฅใŒ่ฟ‘ใฅใ„ใฆใ„ใพใ™ใŒใ€็š†ใ•ใ‚“ใซใ‚‚็ด ๆ•ตใช25ๅนดๅบฆใฎๆ˜ฅใŒๆฅใ‚‹ใ“ใจใ‚’็ฅˆใ‚Šใพใ™ใ€‚

ใ‚ใ‚ŠใŒใจใ†ใ”ใ–ใ„ใพใ™ใ€‚

ใ‚ณใƒกใƒณใƒˆ 1
    hyunsooit๋‹˜์˜ ํ”„๋กœํ•„ ์ด๋ฏธ์ง€

    ใกใ‚‡ใ†ใฉ็งใŒๆฑ‚ใ‚ใฆใ„ใŸๅ†…ๅฎนใฎ่ฌ›ๅบงใฎใƒชใƒชใƒผใ‚นใฎใŠ็Ÿฅใ‚‰ใ›ใ ใฃใŸใฎใงใ€ใ™ใ”ใๅฌ‰ใ—ใ„ใงใ™๐Ÿ˜ข๐Ÿ˜ข๐Ÿ˜ข ๆ—ฉ้€Ÿๅ—่ฌ›ใ—ใฆใฟใพใ™!!๐Ÿ‘๐Ÿ‘๐Ÿ‘๐Ÿ‘

๏ฟฅ18,015