Nullの検出

Java によるデータクリーニング

Dennis Lee

Software Engineer

データはどこにあるか？

欠損データ: NullとBlank
- Null: データが存在しない
- Blank: 空白文字。入力エラーの可能性あり

タイトル	発行日	評価	レビュー数	価格
Python Crash Course	1/10/23	4.8	165	$30.61
	9/13/19	4.8	2,521	$38.00
Clean Code	8/1/08	[null]	[null]	[null]

Null値によるエラー

// book is missing reviewCount, rating, and price
BookSales book = new BookSales("Clean Code", LocalDate.of(2008, 8, 1),
                               null, null, null)


// rating is null, so the code will throw a NullPointerException
int rating = book.rating();

Exception in thread "main" java.lang.NullPointerException

Null値を確認する

// Import Objects
import java.util.Objects;

// Use .isNull()
if (Objects.isNull(book.rating())) {
    System.out.println("Missing rating");
}

Missing rating

Nullにデフォルト値を提供する

import java.util.Optional;

// Use Optional.ofNullable for numbers
double rating = Optional.ofNullable(book.rating()).orElse(0.0);
System.out.println("Book rating: " + rating);

Book rating: 0.0

// Use Objects.toString for strings
String displayTitle = Objects.toString(book.title(), "[No Title]");
System.out.println(displayTitle);

Book title: [No Title]

空白/Null文字列を確認する

import org.apache.commons.lang3.StringUtils;  // Utility for string operations

// book is missing a title
BookSales book = new BookSales(" ", LocalDate.of(2019, 9, 13), 2521, 4.5, 38.00)


if StringUtils.isBlank(book.title()) {
    System.out.println("Invalid - empty title"); 
}

Invalid - empty title

空白の数値を確認する

// priceText is blank
String priceText = " ";

// Check for blank values before converting to a number
if StringUtils.isBlank(priceText) {
    System.out.println("Invalid price: blank detected");
}

Invalid price: blank detected

まとめ: NullおよびBlankの検出

Null値は欠損または未定義のデータを示す
- 主なインポート: java.util.Objects および java.util.Optional
- 使用前にNullチェックで NullPointerException を防ぐ
- Objects.isNull() でNullを確認する
- Optional.ofNullable() でデフォルト値を提供する
空白値は空または空白のみのテキストを示す
- 主なインポート: org.apache.commons.lang3.StringUtils
- StringUtils.isBlank() で ""、null、空白を検出する
- データ入力エラーで多く見られる

演習に挑戦しましょう！

Java によるデータクリーニング