ビッグデータを処理するというのは、Pandasでデータを処理することと何が違うのでしょうか？ビッグデータ処理の必須フレームワークであるSparkについて学んでみましょうか？

AI時代が到来し、データパイプラインの構築は企業の競争力を左右する核心的な力量として位置づけられています。最も広く使用されているAirflowを活用し、効率的なデータパイプラインを構築するノウハウを、実戦経験と豊富な講義経歴を持つシリコンバレーの専門家（元Udemyデータチームヘッド、現サンノゼ州立大学データ修士課程教授）から直接学んでみましょう。

データを扱う人なら必ず知っておくべき基本技術はSQLです。今回の講義では、SQLをデータ分析という観点から実習中心に学習していきます。実習はDuckDBを用いてGoogle Colabで行います。

本映像は、<板橋仕事帰りミートアップ with インフラン - 開発者キャリア>で行われた発表セッションの録画です。