PythonでのWebスクレイピング

Pythonで学ぶWebスクレイピング

Thomas Laetsch

Data Scientist, NYU

ビジネス視点

企業が求めるもの

• 価格比較
• 顧客満足度
• リード創出
• ほか多数

パーソナルに

あなたにできること

• 好きなサイトでミームを検索。
• 掲示板で欲しいガジェットを自動探索。
• ソーシャルサイトをスクレイピングし話題を収集。
• 料理ブログをスクレイピングし特定のレシピやレビューを探索。
• ほか多数

私の仕事について

パイプライン

パイプライン: セットアップ

セットアップ

• 目的を明確にする。
• 実行に必要な情報源を見つける。

パイプライン: 取得

取得

• オンラインの生データを読み込む。
• 利用可能な形式に整える。

パイプライン: 処理

処理

• 多くの選択肢！

やり方は？

本講義の焦点

• 取得！
• （pythonでscrapyを使用）

参加しますか？

Pythonで学ぶWebスクレイピング