Vérification des types de données

Nettoyer des données en Java

Dennis Lee

Software Engineer

Pourquoi vérifier les types ?

Besoin d'analyser du texte de sources externes
Types invalides = erreurs d'exécution
Une validation adéquate évite les crashs

String priceText = "$30.61";
double price = Double.parseDouble(priceText);  // Échec : $ n'est pas valide dans un nombre

Exception in thread "main" java.lang.NumberFormatException

Valider du texte numérique

// Utilitaire pour valider les nombres
import org.apache.commons.lang3.math.NumberUtils;

String reviewCountText = "165";
System.out.println(NumberUtils.isParsable(reviewCountText));

true

String priceText = "$30.61"; // Nombre invalide
System.out.println(NumberUtils.isParsable(priceText)); // false : contient le symbole $

false

Analyser du texte numérique

private static String validateNumeric(String value) {
    if (NumberUtils.isParsable(value)) return value;  // OK si nombre valide
    throw new IllegalArgumentException("Invalid: " + value);  // Sinon erreur
}

int reviews = Integer.parseInt(validateNumeric("165"));  // Valider puis analyser

// Retirer $ d'abord
double price = Double.parseDouble(validateNumeric("$30.61".replace("$", "")));
System.out.println("reviews: " + reviews + "\nprice in $: " + price);

reviews: 165
price in $: 30.61

Valider les formats de date

import java.time.format.DateTimeFormatter; // Pour formater les modèles de date

private static LocalDate parseDate(String dateStr) {
    DateTimeFormatter format = DateTimeFormatter.ofPattern("M/d/yy");

    return LocalDate.parse(dateStr, format); // Convertir la chaîne en LocalDate
}


LocalDate date = parseDate("1/10/23"); // "1/10/23" devient 2023-01-10 
System.out.println("Date: " + date);

Date: 2023-01-10

Combiner validation des nombres et des dates

private static double parsePrice(String price) {
    return Double.parseDouble(validateNumeric(price.replace("$", "")); // Retirer $
}


// Convertir les champs CSV en BookSales
public static BookSales parseSalesData(String[] fields) {
    String title = fields[0];
    LocalDate publishDate = parseDate(fields[1]); // Analyse de date personnalisée
    int reviews = Integer.parseInt(validateNumeric(fields[2]));
    double rating = Double.parseDouble(validateNumeric(fields[3]));
    double price = parsePrice(fields[4]); // Gérer le format monétaire
    return new BookSales(title, publishDate, reviews, rating, price);
}

Lecture sûre de fichiers CSV

List<BookSales> sales = new ArrayList<>(); // Stocke des objets BookSales


try (BufferedReader reader = new BufferedReader(new FileReader("book_sales.csv"))) {

    String line = reader.readLine(); // Ignorer l'entête

    while ((line = reader.readLine()) != null) {  // Lire jusqu'à la fin du fichier
      String[] fields = line.split(",");  // Découper la ligne CSV en tableau
      sales.add(parseSalesData(fields));  // Convertir en objet BookSales
    }
}

sales.forEach(System.out::println);  // Afficher chaque vente

BookSales[title=Python Crash Course, publishDate=2023-01-10, 
reviewCount=165, rating=4.8, price=30.61]

Récapitulatif : vérification des types

Valider le texte avant l'analyse pour éviter les erreurs d'exécution
Importations clés
- org.apache.commons.lang3.math.NumberUtils
- java.time.format.DateTimeFormatter
Utiliser NumberUtils.isParsable() pour tester les nombres
Gérer plusieurs formats de date avec DateTimeFormatter
Intercepter les erreurs de type garantit l'intégrité des données

Passons à la pratique !

Nettoyer des données en Java