Wizualizacja danych strumieniowych

Strumieniowanie danych z AWS Kinesis i Lambda

Maksim Pecherskiy

Data Engineer

Dotychczasowy potok

2020-08-02_15-29.png

Strumieniowanie danych z AWS Kinesis i Lambda

Widok Discover w Kibanie

2020-08-02_16-03.png

Strumieniowanie danych z AWS Kinesis i Lambda

Wizualizacje w Kibanie

2020-08-11_07-16.png

Strumieniowanie danych z AWS Kinesis i Lambda

Dashboardy i alerty

2020-08-11_07-32.png

Strumieniowanie danych z AWS Kinesis i Lambda

Elasticsearch vs CloudWatch

CloudWatch

  • Skoncentrowany na AWS
  • Przyjmuje dane niestandardowe, ale nie jest to jego główne zastosowanie
  • Doskonały do pracy z logami

Elasticsearch

  • Ogólne narzędzie open source
  • Przyjmuje dane niestandardowe, w tym logi
  • Lepsza wizualizacja niż CloudWatch
  • Rozbudowany ekosystem wtyczek
Strumieniowanie danych z AWS Kinesis i Lambda

Ćwiczmy!

Strumieniowanie danych z AWS Kinesis i Lambda

Preparing Video For Download...