Підготовка до першого стриму

Потокові дані з AWS Kinesis і Lambda

Maksim Pecherskiy

Data Engineer

Кінцева мета

chapter1_take_ms_liQuR.png

Потокові дані з AWS Kinesis і Lambda

Кінцева мета

gGuLC.png

Потокові дані з AWS Kinesis і Lambda

Кінцева мета

IIFUE.png

Потокові дані з AWS Kinesis і Lambda

Кінцева мета

XpcGO.png

Потокові дані з AWS Kinesis і Lambda

p5yig.png

Потокові дані з AWS Kinesis і Lambda

dcUser

Drh4F.png

Потокові дані з AWS Kinesis і Lambda

Цільовий бакет S3

s3 = boto3.client('s3', 
                  aws_access_key_id=AWS_KEY_ID, 
                  aws_secret_access_key=AWS_SECRET, 
                  region_name='us-east-1')

s3.create_bucket(Bucket='sd-vehicle-data')
Потокові дані з AWS Kinesis і Lambda

LDGmc.png

Потокові дані з AWS Kinesis і Lambda

bFQoE.png

Потокові дані з AWS Kinesis і Lambda

Додайте дозволи користувачу

SSdiv.png

Потокові дані з AWS Kinesis і Lambda

Додайте дозволи користувачу

Yqb6Y.png

Потокові дані з AWS Kinesis і Lambda

Додайте дозволи користувачу

M4HOZ.png

Потокові дані з AWS Kinesis і Lambda

Додайте дозволи користувачу

NBLCR.png

Потокові дані з AWS Kinesis і Lambda

Додайте дозволи користувачу

ncOZ7.png

Потокові дані з AWS Kinesis і Lambda

Додайте дозволи користувачу

1xvfb.png

Потокові дані з AWS Kinesis і Lambda

Нові можливості

bEbSB.png

Потокові дані з AWS Kinesis і Lambda

Заувага щодо безпеки

MBXWT.png

Потокові дані з AWS Kinesis і Lambda

Заувага щодо безпеки

OsJnK.png

Потокові дані з AWS Kinesis і Lambda

vroeW.png

Потокові дані з AWS Kinesis і Lambda

Нові можливості

bEbSB.png

Потокові дані з AWS Kinesis і Lambda

Потокові дані з AWS Kinesis і Lambda

Дозволи потоку Firehose

m1sn3.png

Потокові дані з AWS Kinesis і Lambda

BLo0S.png

Потокові дані з AWS Kinesis і Lambda

RAFOr.png

Потокові дані з AWS Kinesis і Lambda

vx0iX.png

Потокові дані з AWS Kinesis і Lambda

xVkJU.png

Потокові дані з AWS Kinesis і Lambda

Ролі vs користувачі

rGbOt.png

  • Існують в IAM
  • Мають політики дозволів
  • Прикріплюються лише до інших сервісів
  • Не мають ключів і логіна

qQ1pa.png

  • Існують в IAM
  • Мають політики дозволів
  • Можуть діяти самостійно
  • Можуть мати ключі або логін
Потокові дані з AWS Kinesis і Lambda

Огляд — кінцева мета

WlEwO.png

Потокові дані з AWS Kinesis і Lambda

Огляд

m0gxE.png

Потокові дані з AWS Kinesis і Lambda

Огляд

Drh4F.png

Потокові дані з AWS Kinesis і Lambda

Огляд

BLo0S.png

Потокові дані з AWS Kinesis і Lambda

Поїхали!

Потокові дані з AWS Kinesis і Lambda

Preparing Video For Download...