Манипуляция данными и анализ

Импорт данных в Java

Anthony Markham

VP Quant Developer

Выбор столбцов

.selectColumns() создаёт новый объект Table

// Select specific columns by name
Table nameAndSalary = employees.selectColumns("Name", "Salary");

// Select by column type
Table numericColumns = employees.selectColumns(
    column -> column.type().equals(ColumnType.DOUBLE) ||
    column.type().equals(ColumnType.INTEGER));

Фильтрация данных

Фильтрация строк с помощью .where()
Возвращает новый объект Table

// Filter with a single condition
Table seniors = employees.where(
    employees.intColumn("Age").isGreaterThanOrEqualTo(65));

// Filtering using multiple conditions
Table targetGroup = employees.where(
    employees.intColumn("Age").isBetweenInclusive(30, 50)
        .and(employees.doubleColumn("Salary")
            .isGreaterThan(75000)));

Сортировка данных

Сортировка данных с помощью .sortOn()
- Сортирует по возрастанию
Возвращает новую отсортированную таблицу
.sortDescendingOn() — для сортировки по убыванию

// Sort by a single column (ascending)
Table sortedBySalary = employees.sortOn("Salary");

// Sort by multiple columns (custom direction)
Table complexSort = employees
    .sortOn("Department") 
    .sortDescendingOn("Salary");

Агрегация с помощью summarize

Сводная статистика вычисляется с помощью .summarize()
Возвращает новую таблицу

import tech.tablesaw.aggregate.AggregateFunctions.*;

// Summarize salary
Table deptSummary = employees.summarize("Salary", mean, count, max).apply();

Mean [Salary]	Count [Salary]	Max [Salary]
113606.20299999935	1000	199793

По умолчанию применяется ко всем числовым столбцам

Агрегация с помощью summarize

Доступны более сложные агрегации

// Multiple aggregations
Table complexSummary = employees.summarize(
    "Salary", "Age", 
    mean, median, min, max).apply();

Mean [Salary]	Median [Salary]	Min [Salary]	Max [Salary]	Mean [Age]	Median [Age]	Min [Age]	Max [Age]
113606.2029	112667	30301	199793	45.6699	46	22	70

Основные методы манипуляции данными

.select() — выбор конкретных столбцов
```
Table selected = employees.select("Name", "Salary");
```
.where() — фильтрация строк по условиям
```
Table filtered = employees.where(condition);
```
.sortOn() — сортировка данных по столбцам
```
Table sorted = employees.sortOn("Department", "Salary");
```

.summarize() — вычисление статистики

Table summary = employees.summarize("Salary", mean, max).apply();

Давайте потренируемся!

Импорт данных в Java