実践しながら学ぶクローリングマスター withデータ工房

情報の海で快適に魚を釣ったり水遊びをしたりするような、クローリングのノウハウをお教えします。

📑 下記のリストの中で、該当する事項があるかチェックしてみてください！

• ✅ 反復作業を一つ一つ直接修正し、手を加えながら毎日毎日進めている。
• ✅ 反復作業に追われて時間がなく、肝心な分析業務にまで手が回らない。
• ✅ 簡単なグラフ作成や、単純なPPT作成・報告業務を効率化したい。
• ✅ ひたすらCtrl + C、Ctrl + Vを無限に繰り返す業務に自壊感（情けなさ）を感じる。 from endlessly repeating Ctrl + C and Ctrl + V.
• ✅ コンピューターに作業を任せて、本当に重要なことに時間と誠意、努力を投資したい。
• 👉 1つでも当てはまる事項があれば、あなたはこの講義を受けるべきです。

---

情報の海で楽に魚も釣り、水遊びも楽しむクローリングのノウハウ 📑

最近、インターネットにないデータなんてありますか？ありません。見つけた資料をすべて保存して使えばいいと思っても、それがなかなか簡単ではありませんよね？その難しいことを可能にすること、インターネットのウェブページにある情報を収集することをまさにクローリングと言います。クローリングを学べば、業務効率を高めるのに本当に役立ちますよね？しかし、Pythonのクローリングには数多くの方法が存在します。これらをすべて学ぼうとすると、大変で時間もかかります。そして、実はすべてを把握している人もそう多くはありません。

この講義は、私が夜通し一つひとつ調べ、テストし、実際に進めてきたものの中から、不要なものや重複するものを除いて残った必要不可欠な核心的なコマンドや技術だけを厳選して構成しました。皆さんに細かいこと（？）抜きで、核心だけを絞ってお伝えします。

---

信頼して見れる「データ工房」💪

3年前に私がブログに書いたクローリングの基礎記事などを見るために、今でも一日に千人以上の人々がブログを訪れています。

📗NAVERブログ "データ工房"

<コードが分からないマーケターでもクローリング #4.BeautifulSoupで情報を取得する>
累計閲覧数 4.4万件、2021.01.14基準 -

3年前に記事を書いてからも、多くのプロジェクトを進行し、Q&Aも確認しながら新たにテストを重ねていますが、これまでに私がまとめた技術で解決できなかった部分はありませんでした。多くのライブラリや多様な手法が次々と登場していますが、結局のところ最も基本となることさえ身につければ、何にでも応用することができます。短期的につまみ食いのように一つだけ解決する方法ではなく、あれもこれもできて、これからもずっと使い続けられる方法をお伝えしようと思います。

あれこれ様々なコマンドや講義の中で迷うことなく、"データ工房"と一緒に始めてみましょう。私がこれまで数え切れないほどの試行錯誤とテストを重ね、自信を持ってまとめた核心的な内容を紹介します。今、他の講義に移ってしまうと、後でまた戻ってきた時に「あぁ…あの時すぐに受講しておけばよかった…」と思うはずです。知れば技術、知らなければ魔法！その技術を学べば、人生が本当に楽〜になります！

---

この講義はどのような講義ですか？ 🧐

• コードをただ読んで、実行して、そのまま流すような講義ではありません。
• 一つ一つ直接タイピングしながら説明し、解釈し、共に悩みます。
• 逆に言えば、楽な講義ではありません。
• ただ実行するだけだったり、ただ聞いているだけでいい講義ではありません。
• 絶えずタイピングし、真似して入力しながら進めていく、不便な講義です。.

---

この講座で学ぶこと ✏️

• Pythonのインストールから、クローリングに欠かせないPythonの使い方
• 自分の目に見えるウェブページの情報たち
• Ctrl + C, Ctrl + V を不要にするクローリング技術
• あえて不必要な、見栄えだけの言葉や、活用度の低い内容はNO！
• まさに！活用度200%の内容だけを核心的に！

---

ここで扱うツール 🧰

講義の進行時に実習用のコンピューターが必要です。

• Python 3.x のインストール
• ジュピターノートブック（Jupyter Notebook）のインストール
• Chromeブラウザのインストール

コンピューターのスペックは、起動に20分以上かからなければ問題ありません。

PythonのインストールはAnacondaを利用することをお勧めします。インストール案内資料を参考にしてくださいhttps://m.blog.naver.com/kiddwannabe/221154599192

---

予想質問 Q&A 🙋🏻‍♂️

Q. 非専門家でも受講できますか？コーディングは初めてなのですが…。
A. 非専門家のための講義です。プログラムのインストールから一つずつ進めていきます。所々に私なりのコツをお伝えするために、口と手を休めることなく解説しました。授業の動画を飛ばさずにすべて視聴することをおすすめします。

※ プログラミングに詳しい方は、再生速度を上げるか、他の講義を受講することをお勧めします。

Q. どのような人が受講すると良いですか？
A. Pythonで何ができるか気になっている方！
   プログラミングは初めてで不安な方！
   コンピューターに仕事を任せて退社したい方！

Q. 他の講義との違いは？
A. PPTを見るだけで終わる講義ではありません！
すでに入力されたコードを読み上げるだけの講義でもありません！
一つひとつ直接入力して実行し、エラーも確認しながら結果を考察する、実践活用のための講義です。

Q. 実習ファイルやまとめられた資料もありますか？
A. 可能な限りライブコーディング環境に合わせて、空の Jupyter Notebook に一つ一つタイピングしながら進行し、画像での説明がどうしても必要な部分についてはPPTスライドを活用して講義を進行します。

[updated]
- 2021.02.17. Instagramのクローリングを追加しました
- 2021.05.06 YouTubeのクローリングを追加しました。

- 2023.01.31  Chromeブラウザのバージョン自動アップデートコードの活用方法を追加しました。

 

講義は継続的に追加予定であり、
ご要望やご不明な点がございましたら datago0ba0@gmail.com までメールでお問い合わせください。ありがとうございます。