Основы работы с JSON в Tablesaw

Импорт данных в Java

Anthony Markham

VP Quant Developer

Введение в JSON

  • JSON: JavaScript Object Notation
    • Лёгкий формат обмена данными
    • Стандартный формат для Web API
    • Структура «ключ — значение»

json_image.jpg

Импорт данных в Java

Табличные данные

  • Фиксированные строки и столбцы
  • Табличный формат: однородные типы данных
| Name  | Age | City    |
|-------|-----|---------|
| Alice | 30  | Boston  |
| Bob   | 25  | Seattle |

JSON

  • Гибкие вложенные структуры
  • Смешанные типы данных и иерархии
[
  {"name": "Alice", 
      "age": 30, 
      "address": {"city": "Boston", 
                  "state": "MA"}},
  {"name": "Bob", 
      "age": 25, 
      "address": {"city": "Seattle", 
                  "state": "WA"}}
]
Импорт данных в Java

Чтение JSON

  • Используйте только для простых JSON-файлов
// Simple method to read a JSON file
Table products = Table.read().file("products.json");

$$

import tech.tablesaw.io.json.JsonReader;
import tech.tablesaw.io.json.JsonReadOptions;
  • Предоставляет дополнительные настройки
// Reading a JSON file using JsonReadOptions
JsonReadOptions options = JsonReadOptions.builder("products.json").build();

Table products = new JsonReader().read(options);
Импорт данных в Java

Доступ к данным JSON

  • Привычные методы Tablesaw по-прежнему работают
// Access columns from JSON data
StringColumn names = table.stringColumn("name");
DoubleColumn prices = table.doubleColumn("price");

// Perform calculations double avgPrice = prices.mean(); String mostExpensive = table .where(prices.isEqualTo(prices.max())) .stringColumn("name").get(0);
Импорт данных в Java

Рекомендации по работе с JSON — валидация

  • Проверяйте структуру JSON перед обработкой
// Validation and error handling
try {
    JsonReadOptions options = JsonReadOptions.builder("data.json").build();
    Table data = new JsonReader().read(options);
    if (data.rowCount() > 0) {
        // Process data
    }
} catch (Exception e) {
    System.err.println("Error reading JSON: " + e.getMessage());
}
if (data.rowCount() == 100) {
    System.out.println("Table has exactly 100 rows - processing data");
}
Импорт данных в Java

Рекомендации по работе с JSON — пропущенные значения

  • Обрабатывайте пропущенные значения и null
// Remove rows with any missing values
data = data.dropRowsWithMissingValues();
  • Приводите типы данных в соответствие с задачами анализа
// Convert integer column to double for calculations
data = data.replaceColumn("price", data.intColumn("price").asDoubleColumn());
Импорт данных в Java

Давайте потренируемся!

Импорт данных в Java

Preparing Video For Download...