Основи даних JSON із Tablesaw

Імпорт даних у Java

Anthony Markham

VP Quant Developer

Вступ до JSON

JSON: JavaScript Object Notation
- Легкий формат обміну даними
- Стандартний формат для веб-API
- Структура «ключ–значення»

Зображення JSON

Табличні дані

Фіксовані рядки та стовпці
Табличні: одноманітні типи даних

| Name  | Age | City    |
|-------|-----|---------|
| Alice | 30  | Boston  |
| Bob   | 25  | Seattle |

JSON

Гнучкі вкладені структури
Змішані типи даних і ієрархії

[
  {"name": "Alice", 
      "age": 30, 
      "address": {"city": "Boston", 
                  "state": "MA"}},
  {"name": "Bob", 
      "age": 25, 
      "address": {"city": "Seattle", 
                  "state": "WA"}}
]

Зчитування JSON

Використовуйте лише для простих файлів JSON

// Simple method to read a JSON file
Table products = Table.read().file("products.json");

import tech.tablesaw.io.json.JsonReader;
import tech.tablesaw.io.json.JsonReadOptions;

Надає додаткові налаштування

// Reading a JSON file using JsonReadOptions
JsonReadOptions options = JsonReadOptions.builder("products.json").build();

Table products = new JsonReader().read(options);

Доступ до даних JSON

Працюють знайомі методи Tablesaw

// Access columns from JSON data
StringColumn names = table.stringColumn("name");
DoubleColumn prices = table.doubleColumn("price");


// Perform calculations
double avgPrice = prices.mean();
String mostExpensive = table
    .where(prices.isEqualTo(prices.max()))
    .stringColumn("name").get(0);

Найкращі практики JSON — валідація

Перевіряйте структуру JSON перед обробкою

// Validation and error handling
try {
    JsonReadOptions options = JsonReadOptions.builder("data.json").build();
    Table data = new JsonReader().read(options);
    if (data.rowCount() > 0) {
        // Process data
    }
} catch (Exception e) {
    System.err.println("Error reading JSON: " + e.getMessage());
}

if (data.rowCount() == 100) {
    System.out.println("Table has exactly 100 rows - processing data");
}

Найкращі практики JSON — пропуски

Обробляйте відсутні/null значення

// Remove rows with any missing values
data = data.dropRowsWithMissingValues();

Узгоджуйте типи даних з потребами аналізу

// Convert integer column to double for calculations
data = data.replaceColumn("price", data.intColumn("price").asDoubleColumn());

Давайте потренуємось!

Імпорт даних у Java