Streamingdata visualiseren

Streaming data met AWS Kinesis en Lambda

Maksim Pecherskiy

Data Engineer

Onze pipeline tot nu toe

2020-08-02_15-29.png

Streaming data met AWS Kinesis en Lambda

Kibana Discover-weergave

2020-08-02_16-03.png

Streaming data met AWS Kinesis en Lambda

Kibana-visualisaties

2020-08-11_07-16.png

Streaming data met AWS Kinesis en Lambda

Dashboards en alerts

2020-08-11_07-32.png

Streaming data met AWS Kinesis en Lambda

Elasticsearch vs CloudWatch

CloudWatch

  • AWS-gericht
  • Kan custom data aan, maar niet het hoofddoel
  • Geweldig voor werken met logs

Elasticsearch

  • Algemeen, open-sourcetool
  • Neemt custom data op, incl. logs
  • Betere viz dan CloudWatch
  • Sterk plugin-ecosysteem
Streaming data met AWS Kinesis en Lambda

Laten we oefenen!

Streaming data met AWS Kinesis en Lambda

Preparing Video For Download...