Обробка та аналіз даних

Імпорт даних у Java

Anthony Markham

VP Quant Developer

Вибір стовпців

  • .selectColumns() створює новий об'єкт Table
// Select specific columns by name
Table nameAndSalary = employees.selectColumns("Name", "Salary");
// Select by column type
Table numericColumns = employees.selectColumns(
    column -> column.type().equals(ColumnType.DOUBLE) ||
    column.type().equals(ColumnType.INTEGER));
Імпорт даних у Java

Фільтрування даних

  • Фільтруйте рядки за допомогою .where()
  • Повертає новий об'єкт Table
// Filter with a single condition
Table seniors = employees.where(
    employees.intColumn("Age").isGreaterThanOrEqualTo(65));
// Filtering using multiple conditions
Table targetGroup = employees.where(
    employees.intColumn("Age").isBetweenInclusive(30, 50)
        .and(employees.doubleColumn("Salary")
            .isGreaterThan(75000)));
Імпорт даних у Java

Сортування даних

  • Упорядковуйте дані з .sortOn()
    • Сортує за зростанням
  • Повертає нову відсортовану таблицю
  • Для спадання — .sortDescendingOn()
// Sort by a single column (ascending)
Table sortedBySalary = employees.sortOn("Salary");
// Sort by multiple columns (custom direction)
Table complexSort = employees
    .sortOn("Department") 
    .sortDescendingOn("Salary");
Імпорт даних у Java

Агрегація з summarize

  • Обчислюйте підсумкові статистики з .summarize()
  • Повертає нову таблицю
import tech.tablesaw.aggregate.AggregateFunctions.*;
// Summarize salary
Table deptSummary = employees.summarize("Salary", mean, count, max).apply();
Mean [Salary] Count [Salary] Max [Salary]
113606.20299999935 1000 199793
  • Типово застосовується до всіх числових стовпців
Імпорт даних у Java

Агрегація з summarize

  • Можливі складніші агрегації
// Multiple aggregations
Table complexSummary = employees.summarize(
    "Salary", "Age", 
    mean, median, min, max).apply();
Mean [Salary] Median [Salary] Min [Salary] Max [Salary] Mean [Age] Median [Age] Min [Age] Max [Age]
113606.2029 112667 30301 199793 45.6699 46 22 70
Імпорт даних у Java

Основні методи обробки

  • .select() — вибір конкретних стовпців
    Table selected = employees.select("Name", "Salary");
    
  • .where() — фільтрування рядків за умовами
    Table filtered = employees.where(condition);
    
  • .sortOn() — впорядкування за стовпцями
    Table sorted = employees.sortOn("Department", "Salary");
    
  • .summarize() — підрахунок статистик
    Table summary = employees.summarize("Salary", mean, max).apply();
    
Імпорт даних у Java

Давайте потренуємось!

Імпорт даних у Java

Preparing Video For Download...