Comprendre les bases de l'importation de données

Importer des données en Java

Anthony Markham

VP Quant Developer

Faites connaissance avec votre instructeur !

Anthony Markham

VP, responsable du développement quantitatif/analytique
Développeur C++/Java/Python en banque d'investissement
Expérience en enseignement universitaire

Anthony Markham

Principes de base de l'importation de données

Essentiel pour traiter des données externes dans des applications Java
Formats courants : CSV (valeurs séparées par des virgules), JSON et Excel

Organigramme montrant les cinq étapes du flux d'importation

Java offre des outils robustes dans les ensembles de classes java.io et java.nio

Notions de base sur les fichiers

La classe File représente des fichiers ou des répertoires
Des méthodes comme exists(), length() et isDirectory() permettent de valider le fichier

import java.io.File;

File dataFile = new File("data.csv");
boolean exists = dataFile.exists();
long size = dataFile.length();
boolean isDirectory = dataFile.isDirectory();

L'interface Path et la classe Files

L'interface Path et la classe Files offrent des opérations modernes sur les fichiers (java.nio)
Avantages : plus de flexibilité, meilleure gestion des exceptions et performance
java.io pour les opérations simples ; java.nio pour l'E/S à haut rendement

import java.nio.file.Path;
import java.nio.file.Paths;
import java.nio.file.Files;

Path dataPath = Paths.get("data.csv");

boolean exists = Files.exists(dataPath);
long size = Files.size(dataPath);

Lecture de fichiers texte

Files.readAllLines() : lit tout le fichier dans un List<String> (un élément par ligne)
Files.readString() : lit tout le fichier dans une seule chaîne

Path file = Paths.get("data.csv");

// Lire toutes les lignes d'un coup
List<String> lines = Files.readAllLines(file);
// Lire tout le fichier comme une chaîne
String content = Files.readString(file);

Tout le fichier est chargé en mémoire 🛑

Validation des données

Assure la qualité des données avant traitement
Vérifier la qualité et la structure des données
Effectuer des validations courantes
Gérer toute Exception

Vérifications de validation des données

Validation des données

Vérifications courantes : s'assurer que le fichier n'est pas vide, confirmer les colonnes requises dans l'en-tête
Gérer les Exception avec un bloc try-catch ✅

try {
  Path file = Paths.get("data.csv");
  List<String> lines = Files.readAllLines(file);
  if (lines.isEmpty()) { // Validate file has content
      System.out.println("Warning: File is empty");}

  String header = lines.get(0);
  if (!header.contains("id") || !header.contains("name")) {    // Check header
      System.out.println("Error: File missing required columns");
} catch (Exception e) {
    System.out.println("Error reading file: " + e.getMessage());}

Résumé

Classe/Interface	Méthode	Description
`File`	`new File()`	Crée une représentation abstraite d'un chemin de fichier
`File`	`exists()`	Vérifie si un fichier existe
`File`	`length()`	Obtient la taille du fichier en octets
`Paths`	`get()`	Crée un objet Path à partir d'une chaîne
`Files`	`exists()`	Vérifie si un fichier existe (API moderne)
`Files`	`size()`	Obtient la taille du fichier en octets (API moderne)
`Files`	`readAllLines()`	Lit tout le fichier dans List<String>
`Files`	`readString()`	Lit tout le fichier dans une seule String

¹ https://docs.oracle.com/javase/8/docs/api/java/nio/file/Files.html

Passons à la pratique !

Importer des données en Java