inflearn logo
inflearn logo

ใ‚ซใƒ•ใ‚ซใƒ‘ใƒผใƒ•ใ‚งใ‚ฏใƒˆใ‚ฌใ‚คใƒ‰ - ksqlDB

ๆœฌ่ฌ›็พฉใฏใ€ksqlDBใฎๆดป็”จใจใ‚ณใ‚ขใƒกใ‚ซใƒ‹ใ‚บใƒ ใ‚’ๆง˜ใ€…ใชๅฎŸ็ฟ’ใ‚’้€šใ˜ใฆ็ฟ’ๅพ—ใงใใ‚‹ใ‚ˆใ†ใซๆง‹ๆˆใ•ใ‚Œใฆใ„ใพใ™ใ€‚่ฌ›็พฉใ‚’็ต‚ใˆใŸใ‚‰ใ€Kafka๏ผˆใ‚ซใƒ•ใ‚ซ๏ผ‰ใƒ™ใƒผใ‚นใฎใƒชใ‚ขใƒซใ‚ฟใ‚คใƒ ใ‚นใƒˆใƒชใƒผใƒŸใƒณใ‚ฐใƒ‡ใƒผใ‚ฟๅˆ†ๆžใ‚ทใ‚นใƒ†ใƒ ใ‚’็ฐกๅ˜ใ‹ใค่ฟ…้€Ÿใซๆง‹็ฏ‰ใงใใพใ™ใ€‚

้›ฃๆ˜“ๅบฆ ไธญ็ดšไปฅไธŠ

ๅ—่ฌ›ๆœŸ้–“ ็„กๅˆถ้™

Kafka
Kafka
ksqlDB
ksqlDB
Data Engineering
Data Engineering
Kafka
Kafka
ksqlDB
ksqlDB
Data Engineering
Data Engineering
dooleyz3525๋‹˜์˜ ํ”„๋กœํ•„ ์ด๋ฏธ์ง€

Transformerใ‚’ๅฎŸ่ฃ…ใ—ใชใŒใ‚‰ๅญฆใถ่ฌ›ๅบงใƒชใƒชใƒผใ‚น

ใ“ใ‚“ใซใกใฏใ€็š†ใ•ใ‚“ใ€‚ใ‚ฏใ‚ฉใƒณใƒปใƒใƒงใƒซใƒŸใƒณใงใ™ใ€‚

ไปŠๅ›žใ€็งใŒใ€ŒๅฎŸ่ฃ…ใ—ใชใŒใ‚‰ๅญฆใถTransformerใ€ใจใ„ใ†ใ‚ฟใ‚คใƒˆใƒซใงๆ–ฐใ—ใ่ฌ›ๅบงใ‚’ใƒชใƒชใƒผใ‚นใ—ใพใ—ใŸใ€‚

ๆœฌ่ฌ›็พฉใฏใ€Transformerใฎๆ ธๅฟƒใƒกใ‚ซใƒ‹ใ‚บใƒ ใงใ‚ใ‚‹Multi Head Attentionใ‹ใ‚‰Original Transformerใƒขใƒ‡ใƒซใŠใ‚ˆใณBERTใ€Encoder-Decoder็ฟป่จณใƒขใƒ‡ใƒซใงใ‚ใ‚‹MarianMTใƒขใƒ‡ใƒซใพใงใ‚ผใƒญใ‹ใ‚‰็›ดๆŽฅๅฎŸ่ฃ…ใ—ใชใŒใ‚‰Transformerใ‚’้š…ใ€…ใพใงๅญฆใถใ“ใจใŒใงใใ‚‹่ฌ›็พฉใงใ™ใ€‚

ใ“ใ‚ŒใพใงTransformerใซ่ˆˆๅ‘ณใฏใ‚ใฃใŸใ‚‚ใฎใฎใ€Transformerใฎ็†่งฃใซๅ›ฐ้›ฃใ‚’ๆ„Ÿใ˜ใฆใ„ใŸๆ–นใงใ‚ใ‚Œใฐใ€ๅˆ†ใ‹ใ‚Šใ‚„ใ™ใ่ฉณ็ดฐใช็†่ซ–่ชฌๆ˜Žใ‹ใ‚‰ๅฎŸ้š›ใฎใ‚ณใƒผใƒ‰ๅฎŸ่ฃ…ใพใง็น‹ใŒใ‚‹ๆœฌ่ฌ›ๅบงใŒใ€็š†ใ•ใ‚“ใฎTransformerใธใฎๆธ‡ๆœ›ใ‚’ใ™ใฃใใ‚Šใจ่งฃๆฑบใ—ใฆใใ‚Œใ‚‹ใ“ใจใงใ—ใ‚‡ใ†ใ€‚

็พๅœจใ‚ชใƒผใƒ—ใƒณ่จ˜ๅฟต35%ๅ‰ฒๅผ•ใ‚’ๅฎŸๆ–ฝไธญใงใ€ไปฅไธ‹ใฏ่ฌ›็พฉ็ดนไป‹ใƒšใƒผใ‚ธใงใ™ใ€‚

https://inf.run/9iXA7

ใ€ŒๅฎŸ่ฃ…ใ—ใชใŒใ‚‰ๅญฆใถTransformer่ฌ›ๅบงใ€ใฎๅ…ฌๅผ็š„ใชๅ‰ๆๅ—่ฌ›่ฌ›ๅบงใฏใ€Œใƒ‡ใ‚ฃใƒผใƒ—ใƒฉใƒผใƒ‹ใƒณใ‚ฐCNNๅฎŒ็’งใ‚ฌใ‚คใƒ‰ - Pytorch็‰ˆใ€ใงใ™ใ€‚ใƒ‡ใ‚ฃใƒผใƒ—ใƒฉใƒผใƒ‹ใƒณใ‚ฐCNNๅฎŒ็’งใ‚ฌใ‚คใƒ‰ - Pytorch็‰ˆ่ฌ›ๅบงใ‚‚25%ๅ‰ฒๅผ•ใ‚’ๅฎŸๆ–ฝใ—ใฆใ„ใพใ™ใ€‚

Pytorchใงใƒขใƒ‡ใƒซๅฎŸ่ฃ…ใฎ็ตŒ้จ“ใŒใ‚ใ‚‹็จ‹ๅบฆใŠใ‚ใ‚Šใงใ—ใŸใ‚‰ใ€ๅ‰ๆ่ฌ›ๅบงใ‚’ๅ—่ฌ›ใ›ใšใซใ‚‚ๆŒ‘ๆˆฆใ—ใฆใ„ใŸใ ใ‘ใพใ™ใ€‚ใ‚ˆใ‚Š่ฉณใ—ใ„ๅ†…ๅฎนใฏhttps://inf.run/K4ZyT

ๅ‹•็”ปใ‚’ใ”ๅ‚็…งใใ ใ•ใ„ใ€‚

ๅคฉๆฐ—ใŒใ ใ„ใถ่‚Œๅฏ’ใใชใฃใฆใใพใ™ใญใ€‚ใ„ใคใ‚‚ใŠไฝ“ใซใŠๆฐ—ใ‚’ใคใ‘ใฆใ€ๆดปๆฐ—ใซๆบ€ใกใŸไธ€ๆ—ฅใ‚’ใŠ้Žใ”ใ—ใใ ใ•ใ„ใ€‚

ใ‚ใ‚ŠใŒใจใ†ใ”ใ–ใ„ใพใ™ใ€‚

ใ‚ณใƒกใƒณใƒˆ 1
    masterchief๋‹˜์˜ ํ”„๋กœํ•„ ์ด๋ฏธ์ง€

    ใ„ใคใพใงใ‚ขใƒผใƒชใƒผใƒใƒผใƒ‰ไผ็”ปใŠใ‚ˆใณCNNๅฎŒ็’งใ‚ฌใ‚คใƒ‰ๅ‰ฒๅผ•ใ‚’ใ•ใ‚Œใพใ™ใ‹๏ผŸ

๏ฟฅ12,328