Chuyển sang serverless

Xử lý dữ liệu streaming với AWS Kinesis và Lambda

Maksim Pecherskiy

Data Engineer

Chương trước

Lambda

Serverless

• Máy chủ do nhà cung cấp quản lý
• Trả tiền theo lần chạy
• Tự động mở rộng
• Giới hạn bộ nhớ và thời gian chạy thấp hơn
• Phù hợp cho hàm nhỏ, nhanh
• Gọi lại để phản hồi sự kiện

Máy chủ (Truyền thống)

• Máy chủ do người dùng quản lý
• Trả tiền theo giờ chạy máy
• Mở rộng thủ công
• Giới hạn bộ nhớ và thời gian chạy cao hơn
• Phù hợp cho tác vụ chạy dài
• Huấn luyện mô hình machine learning

1. Kích hoạt (Trigger)

2. Handler

3. Layer

4. Đích (Destination)

Kết hợp mạnh mẽ

Chuyển đổi dữ liệu

API

Cảnh báo

Alexa

Handler mẫu

import json

def lambda_handler(event, context):

    return {
        'statusCode': 200,
        'body': json.dumps('Hello from Lambda!')
    }

Ôn tập

Ôn tập

Chuyển đổi dữ liệu

API

Cảnh báo

Alexa

Ôn tập

Serverless

• Phản hồi một sự kiện

Truyền thống

• Huấn luyện mô hình ML

Ôn tập

Ayo berlatih!

Xử lý dữ liệu streaming với AWS Kinesis và Lambda