Extraction de données Web avec Python

Extraction de données Web en Python

Thomas Laetsch

Data Scientist, NYU

Sens des affaires

Qu'est-ce que les entreprises recherchent ?

  • Comparer les prix
  • Satisfaction de la clientèle
  • Générer des pistes de vente
  • …et bien plus !
Extraction de données Web en Python

À titre personnel

Que pourriez-vous faire ?

  • Chercher vos mèmes favoris sur vos sites préférés.
  • Parcourir automatiquement les petites annonces pour vos gadgets favoris.
  • Extraire du contenu de réseaux sociaux pour repérer les sujets chauds.
  • Extraire des blogues de cuisine des recettes précises ou des avis de recettes.
  • …et bien plus !
Extraction de données Web en Python

À propos de mon travail

AVorg.png

Extraction de données Web en Python

Rêve de pipeline

pipeline_setup_acq_proc.png

Extraction de données Web en Python

Rêve de pipeline : mise en place

pipeline_setup.png

Mise en place

  • Définir l'objectif.
  • Trouver des sources pour y arriver.
Extraction de données Web en Python

Rêve de pipeline : acquisition

pipeline_setup_acq.png

Acquisition

  • Lire les données brutes en ligne.
  • Les mettre en forme pour qu'elles soient exploitables.
Extraction de données Web en Python

Rêve de pipeline : traitement

pipeline_setup_acq_proc.png

Traitement

  • Plusieurs options !
Extraction de données Web en Python

Comment procéder ?

Notre cible

  • Acquisition !
  • (Avec scrapy via python)
Extraction de données Web en Python

Vous embarquez ?

Extraction de données Web en Python

Preparing Video For Download...