Comprendre les bases de l'importation de données

Importer des données en Java

Anthony Markham

VP Quant Developer

Rencontrez votre instructeur !

Anthony Markham

VP, Développeur Quantitatif/Responsable Analytique
Développeur C++/Java/Python en banque d'investissement
Expérience d'enseignement universitaire

Anthony Markham

Fondamentaux de l'importation de données

Essentiel pour traiter des informations externes dans les applications Java
Formats courants : CSV (valeurs séparées par des virgules), JSON et Excel

Diagramme de flux montrant les cinq étapes du flux de travail d'importation

Java offre des outils robustes dans les packages java.io et java.nio

Bases de la gestion des fichiers

La classe File représente des fichiers ou des répertoires
Méthodes comme exists(), length(), et isDirectory() permettent de valider notre fichier

import java.io.File;

File dataFile = new File("data.csv");
boolean exists = dataFile.exists();
long size = dataFile.length();
boolean isDirectory = dataFile.isDirectory();

L'interface Path et la classe Files

L'interface Path et la classe Files offrent des opérations de fichiers modernes (java.nio)
Avantages : Plus de flexibilité, meilleure gestion des exceptions, et performance
java.io pour les opérations simples ; java.nio pour les entrées/sorties haute performance

import java.nio.file.Path;
import java.nio.file.Paths;
import java.nio.file.Files;

Path dataPath = Paths.get("data.csv");

boolean exists = Files.exists(dataPath);
long size = Files.size(dataPath);

Lecture de fichiers texte

Files.readAllLines(): Lit le fichier entier dans une List<String> (un élément par ligne)
Files.readString(): Lit le fichier entier en une seule chaîne

Path file = Paths.get("data.csv");

// Lire toutes les lignes d'un coup
List<String> lines = Files.readAllLines(file);
// Lire le fichier entier comme une chaîne
String content = Files.readString(file);

Le fichier entier est chargé en mémoire 🛑

Validation des données

Assure la qualité des données avant le traitement
Vérifier la qualité et la structure des données
Effectuer des validations courantes
Gérer toute Exception

Vérifications de validation des données

Validation des données

Vérifications courantes : vérifier que le fichier n'est pas vide, confirmer les colonnes requises dans l'en-tête
Gérer Exception avec un bloc try-catch ✅

try {
  Path file = Paths.get("data.csv");
  List<String> lines = Files.readAllLines(file);
  if (lines.isEmpty()) { // Valider que le fichier a du contenu
      System.out.println("Avertissement : Fichier vide");}

  String header = lines.get(0);
  if (!header.contains("id") || !header.contains("name")) {    // Vérifier l'en-tête
      System.out.println("Erreur : Colonnes requises manquantes");
} catch (Exception e) {
    System.out.println("Erreur de lecture du fichier : " + e.getMessage());}

Résumé

Classe/Interface	Méthode	Description
`File`	`new File()`	Crée une représentation abstraite d'un chemin de fichier
`File`	`exists()`	Vérifie si un fichier existe
`File`	`length()`	Obtient la taille du fichier en octets
`Paths`	`get()`	Crée un objet Path à partir d'une chaîne
`Files`	`exists()`	Vérifie si un fichier existe (API moderne)
`Files`	`size()`	Obtient la taille du fichier en octets (API moderne)
`Files`	`readAllLines()`	Lit le fichier entier dans List<String>
`Files`	`readString()`	Lit le fichier entier en une seule chaîne

¹ https://docs.oracle.com/javase/8/docs/api/java/nio/file/Files.html

Passons à la pratique !

Importer des données en Java