Visualizzare dati in streaming

Dati in streaming con AWS Kinesis e Lambda

Maksim Pecherskiy

Data Engineer

La nostra pipeline finora

2020-08-02_15-29.png

Dati in streaming con AWS Kinesis e Lambda

Vista Discover di Kibana

2020-08-02_16-03.png

Dati in streaming con AWS Kinesis e Lambda

Visualizzazioni in Kibana

2020-08-11_07-16.png

Dati in streaming con AWS Kinesis e Lambda

Dashboard e avvisi

2020-08-11_07-32.png

Dati in streaming con AWS Kinesis e Lambda

Elasticsearch vs CloudWatch

CloudWatch

  • Incentrato su AWS
  • Può accettare dati personalizzati, ma non è l'uso principale
  • Ottimo per lavorare con i log

Elasticsearch

  • Strumento generico e open source
  • Accetta dati personalizzati, inclusi i log
  • Visualizzazioni migliori di CloudWatch
  • Ecosistema di plugin solido
Dati in streaming con AWS Kinesis e Lambda

Passiamo alla pratica!

Dati in streaming con AWS Kinesis e Lambda

Preparing Video For Download...