簡単に初めてのPython高度なクロール[Scrapy、Selenium、Headless Chrome]

こんにちは。

FLUTTER講義オープンとともに、既存講義もアップデートを行い、共有をいたします。一度受講すると、更新された内容までいつでも聞くことができます。

Python入門とクロールブートキャンプ

• これまで実際のサイトをベースにクロールをしてみると、実際のサイトが随時変わって、提供していたコードが正常に動作しないケースがありましたが、私が直接コントロール可能なサイトを作って、これを基にクロール練習ができるように講義を更新しました。 。

• また、ExcelをPythonで扱う機能もよりアップデートしました。

• 従来よりも全体的に少し難易度を高め、もう少し多くの機能を身につけるように構成しました。

SQL/DB(MySQL)基本からPython/データ分析活用まで！

• 最近の就職などでSQLコーディングテストがある場合もあるほど、SQL作成能力が重要になっています。

• そこで、SQLの練習を試すことができるように、実際のビジネスで使用されていたsakilaデータベースと直接私がデータ分析用に収集したデータベースと、これに基づいたSQLの問題に基づいて

• さまざまなSQL練習ができるように構成しました。

• Pythonのクロール+ pymysqlは、より簡潔でパターン化されたコードで迅速に利用できるように、例で説明しました。

どうぞ二つの講義がより良い講義で、本当に役立つ印象深い講義になってほしいです。
さらに、Mongodb講義もまもなく更新される予定です。アップデートが完了したらまた共有させていただきます。

ありがとうございます。

こんにちは。残材ミコーディング Dave Lee です。

相違ではなく、初めてのフルスタックのためのFlutterブートキャンプ[フルスタックPart4]講義がオープンして共有をいたします。
また、できるだけ最大の期間割引を適用することで、内容は置いておくこともできるほど豊富ですが、安い金額でご覧いただけるようにしました。

Flutterは、1つのコードでWeb、Android、iPhone、MACOS、WINDOWS、さらにはLINIX用のアプリ/プログラムを作成できる技術です。何より生産性が高くて。 Googleが作成し、迅速に更新されている非常に魅力的な技術です。すでに国外ではReact Nativeを越えてから長く、国内でもホットになっている技術です。

フロントエンドの専門性を開発したい開発者であれ、フルスタックになりたい方でも、バックエンド開発者として、フロントエンド技術を身につけて、シニア級の視野を持っていたい方にも役立つと思います。超小規模でももっともらしいサービスを作りたい方にも役立つようです。

実はもっと隠れた意味はどうすれば、もっともらしいウェブ、アプリを一人でも実験ができるのだろうか。必ずしも一人である必要はありませんが、最新の技術を適用すれば、より少ないリソースで入門者としてもどんな近道になるロードマップがあるのでしょうか。私が活用した結果は本当にFANTASTICです。最も簡単なPythonで始まり、FLASKを介して（よりパフォーマンスを向上させるには、FLASKの理解に基づいて同様のFASTAPIを書くことができます）、Webベース（HTML / CSS / JS）で巻き取り、ドッカーを取得してサーバーの運用効率を最大化した後、ひとつのコードでフロントアンドをFLUTTERにするなら！

ここにchatGPTまで書いたら、もっともらしいサービスを最小限のリソースにすることができました。より競争力があるためには、AIが入るといいでしょうが、AIも別々のデータロードマップで感覚を取ることができますよ。 chatGPTにデータを追加（またはプロンプトエンジニアリングを追加する）して、特定の領域に強いサービスも可能です。

急速に変化するFLUTTERの最新バージョンをベースにしており、本講義自体でもバックエンドまで可能なように講義を構成しました。

個人的にFlutterを私の技術にするのに思ったより道を戻ったんですよ。時間にFlutterを私のスキルにすることができるように、私が感じた最も速い学習方法をそのまま溶かしました。ご活用いただけます。

さらに、chatGPTをFlutterに活用するためのヒント？もちろん、chatGPTをFlutterの開発に活用すれば、本講義の知識に基づいて素早くFlutterを活用できます。

今日オープンしたし、どうしても内容が多いので、間違いがあるかもしれません。間違いがあれば話していただければ、すぐに修正いたします。

どうぞ役立つ講義になってほしいです。

ありがとうございます。

こんにちは。残材ミコーディング Dave Lee です。

相違ではなく、初めてのフルスタックのためのFlutterブートキャンプ[フルスタックPart4]講義をインフラに提出し、
共有します。講義オープンにはインフラ側の日程によって、一定期間がかかりそうです。

Flutterは、1つのコードでWeb、Android、iPhone、MACOS、WINDOWS、さらにはLINIX用のアプリ/プログラムを作成できる技術です。何より生産性が高くて。 Googleが作成し、迅速に更新されている非常に魅力的な技術です。すでに国外ではReact Nativeを越えてから長く、国内でもホットになっている技術です。

フロントエンドの専門性を開発したい開発者であれ、フルスタックになりたい方でも、バックエンド開発者として、フロントエンド技術を身につけて、シニア級の視野を持っていたい方にも役立つと思います。超小規模でももっともらしいサービスを作りたい方にも役立つようです。

個人的にFlutterを私の技術にするのに思ったより道に戻りました。あまりにも多くの機能があるので、道を間違えれば、時間は時間帯にかかり、感が来ませんでした。この講義は、この経験に基づいて、短時間でFlutterを私の技術にすることができるように、私が感じた最も速い学習方法をそのまま溶かしました。そのため、短時間でFlutterを活用することができます。

さらに、chatGPTをFlutterに活用するためのヒント？私も説明します。 chatGPTをFlutterの開発に活用すれば、本講義の知識に基づいて素早くFlutterを活用できます。

どうぞ早くオープンすることを願って、オープンしたらすぐにニュースで共有します。
ありがとうございます。

こんにちは。残材ミコーディング Dave Lee です。

これまで仲良くなったんですね。相違ではなく、たまに私に感謝しても、就職したというメールをいただく方がいらっしゃいました。じっくり考えると、こういう事例を共有してくれれば、講義を聞かれる方ももう少しやる気になっても、情報にもならないかという気がするんですよ。もちろん、各メール内容自体を共有することはできませんが、軽くコアコンテンツのみ共有いたします。

ITを身につければ、アクセスできる様々なポジションがあります。一度考えてみると良いポジションがデータアナリストです。最近、少しずつこのポジションで就職されたという方が増えてきました。以前からスタートアップはデータに基づいて意思決定をしようと努力していました。今は普遍化されているようです。そういえば、さまざまなデータ分析が必要で、これを行うポジションがまさにデータアナリストです。

データアナリストは、データを扱うIT技術に精通している必要があります。データベースを扱うSQLが重要です。ここでは、Pythonベースのデータ分析技術、さらに機械学習/ディープラーニングのコア理解程度なら技術的な面では十分です。

これまで5万分の受講生分を見てみると、プログラミングよりは、データ側の技術を好んで、よく習っていく方がいらっしゃいました。これが適性だと思います。どちらもIT技術に見えますが、プログラミングとデータには少し異なる考え方が必要です。また、データアナリストはIT技術に埋没するのではなく、IT技術と就業後はビジネスをよく理解する必要があり、ビジネスとIT技術の両方を知っている人にとっては非常に良いポジションです。

実際、関連技術はIT技術に埋没しなければならないわけではないので、必ず6ヶ月のフルタイム過程まで入らなくても、身につけることができますよ。そのような過程を非専攻者としてまったくITを知らないと仮定し、IT基礎からディープラーニングまで習得できるようにした講義シリーズが次のデータ科学ロードマップでした。

• https://www.inflearn.com/roadmaps/66

もちろんここに確率統計関連理論は追加して身につければいいのですが、実際の現業を考えてみると、必ずしも必須までではないようです。 （実際にはSQLを最も多く使っています。後でSQLを多様に練習できるSQLコーディングテスト（仮題）を追加しようとしています）

とにかくこのような過程を通じて、完全非専攻者たちもITを始めながら、データアナリストを知ることになり、夢を育て、就職された、または離職されたというメールをたまに受けています。また、必ずしもデータアナリストまでではなくても、データをITで扱えば、どんなことをしても、事業をしても、莫大な競争力を持つことができます。おそらく今後2〜3年後には、今よりもはるかにデータアナリストの価値が大きくなると思います。

最後に私は最近はFlutterのプロセスを準備しています。年前に私の講義を聞かれた方は、その時から、私が詳細ページにFlutterを言及したことを知っていると思います。 （やっぱりついにホットになりましたㅎㅎ） 4月末ごろにオープンシェアしていただきます。

どうぞこのメールがお役に立てば幸いです。

ありがとうございます。

こんにちは。残材ミコーディング Dave Lee です。

簡単に初めてのPython高度なクロールレッスンが更新され共有されます。

最近seleniumライブラリが更新され、メソッド名を変更しました。もちろん、メソッド名を変更しても、既存のメソッドは同じように使用できるようにするのが一般的です。 「互換性」のためです。さて、seleniumライブラリ開発チーム？は既存のメソッドをまったくサポートしないようにしました。これにより、既存のseleniumを活用したコードはseleniumライブラリのバージョンによって、動作しないケースが発生しますが、大きな決定のようです。

これと一緒にコードには影響しませんが、変更したいコードが見えて、次のように2つのことを変更しました。

1. find_element_by_***() メソッドをすべて find_element(By.***, ***) と同じ型に変更されました。

- 例: find_element_by_id('myid') --> find_element(By.ID, 'myid')

- By.IDなどを宣言するには、次の追加宣言も必要です。

from selenium.webdriver.common.by import By

2. seleniumが4.xx以上では、コードには影響しませんが、初期設定コードも変更したいようです。

- 従来はパスを直接引数として入れれば良いのですが（例：webdriver.Chrome（chromedriver））

- 以降は Service オブジェクトに入れる方向に変更されるようです。 （例：webdriver.Chrome（service = Service（chromedriver））

- このために、webdriver_managerライブラリも別途インストールが必要です。

以上の変更が事実上、メソッド名が変更されただけですが、コアメソッド名が変更され、関連コードおよび資料をすべて更新しました。次の章のコードを含む資料をすべて更新しましたので、必要に応じて、新しくダウンロードしていただければ幸いです。

- SeleniumとScrapyフレームワーク大きな画像と目標を理解する

- 練習問題で解決する1：Headless ChromeとSeleniumクロール

- XPATH 大きな画像で理解する

- 練習問題で解いて理解するXPATH活用

- Seleniumを活用したマルチページクロール

- Scrapy 多様な使用法: Selenium と Scrapy を組み合わせて、動的ウェブページをクロールする

私も今日急いで知り合い、急いで修正しました。どうぞ進行に問題はなかったらと思います。

ありがとうございます。

こんにちは。残材ミコーディング Dave Lee です。
他にも、ディープラーニングとフルーター川のオープンスケジュールが延期され、共有をいたします。

本来ディープラーニングとフルーター講義は上半期までオープンする計画でした。
まずディープラーニング講義を準備中ですが、期間が少し延期されそうです。
お問い合わせいただいた方が多かったのですが、申し訳ありません。

週末まで時間をすべて出し、準備をしているが、
川の数が多くなり、運営側面でも時間がかかり、
他の業務とも並行してみると、群れが少しできそうです。

できるだけ早く、ディープラーニング、フルーター講義の順に下半期に順次オープンさせていただきます。
短時間でディープラーニング基本技術を簡単にコードレベルまで整理・活用できる講義が多くなく、関連部分を用意しています。
flutterは3.0になり、ついに徐々に安定状態になっています。

最終的に flutter までなると、データ側技術までまとめて、
かなり面白いデータフルスタックサービスの開発も可能です。

どうぞもっと良い講義にして、役に立つようにさせていただきます。
ありがとうございます。

Dave Lee 夢