Візуалізація потокових даних

Потокові дані з AWS Kinesis і Lambda

Maksim Pecherskiy

Data Engineer

Наша пайплайна зараз

2020-08-02_15-29.png

Потокові дані з AWS Kinesis і Lambda

Подання Discover у Kibana

2020-08-02_16-03.png

Потокові дані з AWS Kinesis і Lambda

Візуалізації в Kibana

2020-08-11_07-16.png

Потокові дані з AWS Kinesis і Lambda

Панелі та сповіщення

2020-08-11_07-32.png

Потокові дані з AWS Kinesis і Lambda

Elasticsearch проти CloudWatch

CloudWatch

  • Орієнтований на AWS
  • Приймає власні дані, але це не основний сценарій
  • Чудовий для роботи з журналами

Elasticsearch

  • Загальний, відкритий інструмент
  • Приймає власні дані, зокрема журнали
  • Краща візуалізація, ніж у CloudWatch
  • Потужна екосистема плагінів
Потокові дані з AWS Kinesis і Lambda

Давайте потренуємось!

Потокові дані з AWS Kinesis і Lambda

Preparing Video For Download...