シリコンバレヌの゚ンゞニアから孊ぶPython Apache Spark

シリコンバレヌの゜フトりェア゚ンゞニアからビッグデヌタの凊理方法を孊び、Apache Sparkでビッグデヌタコヌドを開発する方法をPythonを䜿っお孊びたす。珟圚14幎間゜フトりェア開発者ずしお、Webアプリケヌション、ビッグデヌタ、SRE & DevOpsたでPythonで凊理しおいたす。Pythonを䜿っお、ビッグデヌタ職皮で必ず知っおおくべきApache Sparkに぀いお、簡単に深く孊べる機䌚を絶察に逃さないでください!

難易床 䞭玚以䞊

受講期間 無制限

Machine Learning(ML)
Machine Learning(ML)
Big Data
Big Data
Apache Spark
Apache Spark
iceberg
iceberg
Machine Learning(ML)
Machine Learning(ML)
Big Data
Big Data
Apache Spark
Apache Spark
iceberg
iceberg

孊習した受講者のレビュヌ

孊習した受講者のレビュヌ

4.7

5.0

cleanby

78% 受講埌に䜜成

Sparkを本番で䜿甚するのに最適な講矩構成です。 い぀も開発環境の構築が耇雑で時間がかかり、孊び始める前に゚ネルギヌが消費されおいたしたが、docker-composeで䞀床に勉匷できる環境構築方法も教えおくれお孊ぶのに集䞭できおよかったです。 䜕幎もSparkを䜿っお開発しおきたしたが、抂念を党䜓的に振り返りながら、私が知らなかった機胜をさらに詳しく知るこずができおよかったです。初心者や䞭玚者の䞡方に適したSpark講矩だず思いたす。 ありがずうございたす

5.0

였늘했던거 까뚹는사람

100% 受講埌に䜜成

deでバック゚ンド開発者に匕っ越したしたが、再びdeをやりたくお埩習する過皋でいいですね。 spark UIずコヌドずマッピングしお説明するこずもあればよかったず思いたした。 完了埌のレビュヌ spark UIずコヌドずマッピングしお説明するこずもありたしたね ストリヌミングの抂念がもっず必芁で講矩を聞いたこずもあったのによかったです。 今埌スパヌクの䜿い方は孊んだが、どのようにデヌタパむプラむニングを構築し、どのように構築をすべきかに぀いおの講矩も出おほしいですね。

5.0

믞국달팜읎

93% 受講埌に䜜成

私もシリコンバレヌに䜏んでいたすが、コンセプトからの䟋ずストリヌミングに関しおはずおも圹に立ちたした。

受講埌に埗られるこず

  • PySpark(パむスパヌク)

  • Apache Spark(アパッチ スパヌク)

  • ビッグデヌタ

  • ビッグデヌタ マシンラヌニング

  • リアルタむムビッグデヌタ凊理

  • Apache Cassandra

  • Apache Kafka

  • Apache Iceberg

シリコンバレヌ゚ンゞニアに盎接孊ぶ
ビッグデヌタ講矩を聞いおみたせんか

シリコンバレヌ開発者のノりハり
私の郚屋で

ビッグデヌタ開発をシリコンバレヌ開発者のノりハりずずもに簡単に孊ぶこずができたす。

シリコンバレヌを含む䞖界䞭の倚くの倧䌁業や金融機関では、Apache Sparkを掻甚しお倧容量デヌタを分析し、機械孊習モデルを䜜成しおいたす。ず分析するためには、今Sparkの胜力は必須です。

Sparkは最初から分散デヌタ凊理フレヌムに基づいお䜜成されたため、少なくは1台から倚くは数癟台のサヌバヌで容量を拡匵しおいき、リアルタむムでビッグデヌタを凊理し、たたこれを機械孊習モデルにするこずができたす。 PB以䞊のデヌタを管理し、100TB以䞊のメモリを運甚しおいたす。

この講矩を聞いた埌は、Apache Sparkのコアフレヌムワヌクを理解し、ビッグデヌタを簡単に収集しお加工するこずができ、簡単なマシンラヌニングモデルを耇数のサヌバヌに利甚しお䜜成できるはずです。を知っおいれば十分に勉匷できたすよ。

ビッグデヌタ分析のためのSparkのRDDずDataframeの掻甚胜力

機械孊習フレヌムワヌクを構成するさたざたな技術芁玠の理解

リアルタむムデヌタを分析するためのSpark Streamingの理解


こんな方におすすめですよ🙋

倧量のデヌタを扱う必芁がある
バック゚ンド開発者

ビッグデヌタ分野
勉匷したい開発者

火花の深い知識を孊ぶ
したいデヌタ゚ンゞニア


こんなこずを孊びたす📚

1. Apache Sparkに぀いお

  • Apacheスパヌクの玹介
  • DockerDockerを䜿甚したむンストヌル方法
  • Data Brix Community Editionの賌読ず利甚方法

2. Apache Spark RDDの基本的な特城ず䟋

  • ApacheスパヌクのResilient Distributed DatasetRDDの基本的な特城ず利甚方法
  • Apache Spark RDDの䟋に぀いお

3. Apache Spark SQLずDataframeデヌタフレヌム

  • Apache Spark SQLずDataframeの導入ず応甚方法
  • Apache Spark SQL、デヌタフレヌムの䟋

4. Apache Spark Engine Deep dive

  • 珟業埓事者もよく知らないApache Spark Engineの知識


5. Apache Spark Machine Learningマシンラヌニングラむブラリ、MLlib

  • 簡単な機械孊習のアルゎリズム
  • Apacheスパヌクで機械孊習モデルを䜜成する方法

6. Apache Spark Streaming、リアルタむムデヌタ凊理ラむブラリ

  • Apacheスパヌクでリアルタむムデヌタを扱う方法


予想される質問 Q&A 💬

Q. 非専攻者も聞ける講矩ですか

はい、しかし、Pythonの基本的なスキルずデヌタを扱った経隓があれば、理解しやすいかもしれたせん。

Pythonが初めおの堎合は、YouTubeでPythonの基瀎を孊んだり、以䞋の講矩を先に受講しおください

Q. 授業内容をどのレベルたで扱いたすか

火花の基瀎から、事業に必芁な高床な情報たで取り䞊げたす。

Q.なぜスパヌクを孊ぶべきですか

囜内だけでなくシリコンバレヌのほずんどの䌚瀟にスパヌクでビッグデヌタを凊理しおいたす。


知識共有者の玹介✒

履歎

ポヌトフォリオ/個人映像



受講前の泚意 📢

緎習環境

  • オペレヌティングシステムずバヌゞョンOS MacOS、Linux、Ubuntu
  • 䜿甚ツヌル最も人気のあるDockerを䜿甚公開ドッカヌ画像を䜿甚、DataBrics Community Edition
    • 本講矩の実習はDockerで環境蚭定になっおいたす。

孊習資料

  • ゜ヌスコヌドず添付資料の提䟛

こんな方に
おすすめです

孊習察象は
誰でしょう

  • Pythonの基本的な文法を知っおいる人

  • ビッグデヌタ盎軍に転職したい方

  • 比范的安定したバック゚ンド゚ンゞニアになりたい方

  • バック゚ンド゚ンゞニアに転職したい人

  • Apache Spark の最新情報ず詳现を知りたい方

前提知識、
必芁でしょうか

  • パむ゜ン

  • Dockerダヌカヌ

こんにちは
altoformulaです。

22,974

受講生

1,188

受講レビュヌ

347

回答

4.8

講座評䟡

30

講座

韓囜で終わらせる぀もり英語で䞖界垂堎を突き砎れ 🌍🚀

こんにちは。UC Berkeleyで💻コンピュヌタヌ工孊EECSを専攻し、シリコンバレヌで15幎以䞊゜フトりェア゚ンゞニアずしお働いおきたした。珟圚はシリコンバレヌのビッグテック本瀟でビッグデヌタずDevOpsを担圓するStaff Software Engineerを務めおいたす。 working with Big Data and DevOps at a Big Tech headquarters in Silicon Valley.

  • 🧭 シリコンバレヌのむノベヌションの珟堎で盎接孊んだ技術ずノりハりを、オンラむン講矩を通じお皆さんず分かち合いたいず思いたす。

  • 🚀 技術革新の最前線で孊び成長しおきた私ず共に、皆さんもグロヌバルな舞台で掻躍できる力を身に぀けたしょう

  • 🫡 頭は良くありたせんが、諊めずにコツコツず続ければ䜕事も成し遂げられるずいうこずを、ぜひお䌝えしたいです。い぀も圹立぀資料で、そばからサポヌトさせおいただきたす。

 

もっず芋る

カリキュラム

党䜓

65件 ∙ (7時間 46分)

講座資料こうぎしりょう:

授業資料
講座掲茉日: 
最終曎新日: 

受講レビュヌ

党䜓

81ä»¶

4.7

81件の受講レビュヌ

  • sjg47922057님의 프로필 읎믞지
    sjg47922057

    受講レビュヌ 1

    ∙

    平均評䟡 5.0

    5

    100% 受講埌に䜜成

    良い講矩をありがずうございたした。実務でSpark関連の業務を行うために受講したしたが、理論的な郚分ず実習を栞心的な内容に絞っお扱っおくださり、倧倉 도움읎 되었습니닀。

    • altoformula
      知識共有者

      こんにちは、シム・ゞュンゎル様。 お時間を割いお良いレビュヌをお曞きいただきありがずうございたす。実務でお圹に立おたなら嬉しいです

  • 427paul님의 프로필 읎믞지
    427paul

    受講レビュヌ 4

    ∙

    平均評䟡 5.0

    5

    32% 受講埌に䜜成

    ただ受講䞭ですが、党䜓的な抂芁、講矩構成、説明の仕方がよくできおいお満足しおいたす。コヌドの文法を䞀぀䞀぀詳しく説明するわけではありたせんが、コヌドを芋ながら実行の流れず動䜜原理を説明しおくれるので、ある皋床コヌディング経隓のある方であれば、理解しながら孊習するのに適した講矩だず思いたす。

    • altoformula
      知識共有者

      こんにちは、チェ・キュペン様。 お時間を割いお玠晎らしいレビュヌをお寄せいただき、誠にありがずうございたす。

  • sewontheplash5051님의 프로필 읎믞지
    sewontheplash5051

    受講レビュヌ 2

    ∙

    平均評䟡 5.0

    5

    31% 受講埌に䜜成

    重芁な内容だけを効率よく孊べ、サンプルデヌタや゜ヌスがよく敎理されおいるので、効率的に孊習できたす

    • altoformula
      知識共有者

      Ophelie様、こんにちは。 お忙しい䞭、玠敵なレビュヌをお寄せいただき誠にありがずうございたす

  • jh41gong5625님의 프로필 읎믞지
    jh41gong5625

    受講レビュヌ 2

    ∙

    平均評䟡 5.0

    5

    100% 受講埌に䜜成

    良い内容を分かりやすく説明しおいただき、よく理解できたした

    • altoformula
      知識共有者

      こんにちは、コン・ゞュノ様。 お時間を割いお玠晎らしいレビュヌをお寄せいただき、ありがずうございたす。

  • hangman님의 프로필 읎믞지
    hangman

    受講レビュヌ 2

    ∙

    平均評䟡 5.0

    5

    14% 受講埌に䜜成

    珟圚アメリカでデヌタ゚ンゞニアずしおキャリアチェンゞしお働き始めお1幎ほどになりたすが、Sparkの抂念に぀いおもう䞀床レビュヌし、知らなかった内容も孊ぶこずができ、倧倉 도움읎 됩니닀!!

    • altoformula
      知識共有者

      こんにちは、gogo91rla様。 お時間を割いお良いレビュヌをお寄せいただきありがずうございたすお圹に立おお幞いです

altoformulaの他の講座

知識共有者の他の講座を芋おみたしょう

䌌おいる講座

同じ分野の他の講座を芋おみたしょう

ï¿¥12,662