Пивотинг

Анализ бизнес-данных с помощью SQL

Michel Semaan

Data Scientist

Что такое пивотинг?

  • Пивотинг: поворот таблицы вокруг опорного столбца; транспонирование значений столбца в новые столбцы
    • Преобразует «длинную» таблицу в «широкую»
Анализ бизнес-данных с помощью SQL

Преимущества

  • Управление формой таблицы без потери данных
  • Данные в горизонтальном представлении зачастую читаются легче, чем в вертикальном
Анализ бизнес-данных с помощью SQL

До

meal_id  delivr_month  count_orders
-------  ------------  ------------
0        2018-06-01    39          
0        2018-07-01    47          
1        2018-06-01    25          
1        2018-07-01    55          

После

meal_id  2018-06-01  2018-07-01
-------  ----------  ----------
0        39          47        
1        25          55        
  • Пивот по delivr_month
Анализ бизнес-данных с помощью SQL

Таблица «до»

SELECT
  meal_id,
  DATE_TRUNC('month', order_date) :: DATE AS delivr_month,
  COUNT(DISTINCT orders) :: INT AS revenue
FROM meals
JOIN orders ON meals.meal_id = orders.meal_id
WHERE meals.meal_id IN (0, 1)
  AND order_date < '2018-08-01'
GROUP BY meal_id, delivr_month
ORDER BY meal_id, delivr_month;
Анализ бизнес-данных с помощью SQL

CROSSTAB()

CREATE EXTENSION IF NOT EXISTS tablefunc;
  • CREATE EXTENSION аналогична import в Python
SELECT * FROM CROSSTAB($$
  TEXT source_sql
$$)

AS ct (column_1 DATA_TYPE_1,
       column_2 DATA_TYPE_2,
       ...,
       column_n DATA_TYPE_N)
;
Анализ бизнес-данных с помощью SQL

Использование CROSSTAB()

CREATE EXTENSION IF NOT EXISTS tablefunc;

SELECT * FROM CROSSTAB($$ SELECT meal_id, DATE_TRUNC('month', order_date) :: DATE AS delivr_month, COUNT(DISTINCT order_id) :: INT AS orders FROM orders WHERE meal_id IN (0, 1) AND order_date < '2018-08-01' GROUP BY meal_id, delivr_month ORDER BY meal_id, delivr_month $$)
AS ct (meal_id INT, "2018-06-01" INT, "2018-07-01" INT) ORDER BY meal_id ASC;
Анализ бизнес-данных с помощью SQL

Таблица «до»

meal_id  delivr_month  count_orders
-------  ------------  ------------
0        2018-06-01    39          
0        2018-07-01    47          
1        2018-06-01    25          
1        2018-07-01    55          

Таблица «после»

meal_id  2018-06-01  2018-07-01
-------  ----------  ----------
0        39          47        
1        25          55        
  • Пивот по delivr_month
Анализ бизнес-данных с помощью SQL

Пивотинг

Анализ бизнес-данных с помощью SQL

Preparing Video For Download...