Сложная обработка JSON

Импорт данных в Java

Anthony Markham

VP Quant Developer

Сложные данные JSON

Вложенные объекты и массивы
Смешанные типы данных
Работа с API и конфигурационными файлами 🧠

Сложные данные JSON

Вложенные объекты JSON

Вложенность — объекты внутри объектов
Tablesaw умеет автоматически разворачивать простые случаи
Разворачивание — преобразование столбца со списками или массивами в отдельные строки

{
  "customer": {
    "name": "John Doe",
    "address": {
      "street": "123 Main St",                            <- Nested information
      "city": "Boston",                                   <- Nested information
      "coordinates": {"lat": 42.3601, "lng": -71.0589}    <- Nested within nested information
    }
  }
}

Разворачивание JSON

customer.name	customer.address.street	customer.address.city
John Doe	123 Main St	Boston

$ $

customer.address.coordinates.lat	customer.address.coordinates.lng
42.3601	-71.0589

Настройка JsonReader

JsonReadOptions позволяет настроить:
- Источник данных (файл, URL или строка)
- Имя таблицы
- Обработку пропущенных значений

JsonReadOptions options = JsonReadOptions

    .builder("complex.json")

    .tableName("Products")

    .missingValueIndicator("N/A")

    .build();

Table data = new JsonReader().read(options);

missingValues = data.stringColumn("name").isMissing();

Объединение таблиц

Используйте joinOn для объединения таблиц
Внутреннее соединение оставляет только строки, присутствующие в обеих таблицах

Table phones = Table.read().csv("phones.csv");   // name, phone

Table diets  = Table.read().csv("diets.csv");    // name, diet


// Perform the inner join on the two tables
Table joined = phones.joinOn("name").inner(diets);

Существуют и другие типы соединений

Давайте потренируемся!

Импорт данных в Java