Giữ đối tượng an toàn

Giới thiệu về AWS Boto trong Python

Maksim Pecherskiy

Data engineer

Vì sao cần quan tâm đến quyền?

df = pd.read_csv('https://gid-staging.potholes.csv')

Tổng quan quyền

Vì sao cần quan tâm đến quyền?

Được cấp quyền!

# Generate the boto3 client for interacting with S3
s3 = boto3.client('s3', region_name='us-east-1', 
                         aws_access_key_id=AWS_KEY_ID, 
                         aws_secret_access_key=AWS_SECRET)

# Use client to download a file
s3.download_file(
  Filename='potholes.csv',
  Bucket='gid-requests', 
  Key='potholes.csv')

Hệ thống cấp quyền AWS

IAM

Bucket Policy

ACL

URL có chữ ký trước

Hệ thống cấp quyền AWS

IAM

Bucket Policy

ACL

URL có chữ ký trước

ACL

Tải tệp lên

s3.upload_file(
  Filename='potholes.csv', Bucket='gid-requests', Key='potholes.csv')

Đặt ACL thành 'public-read'

s3.put_object_acl(
  Bucket='gid-requests', Key='potholes.csv', ACL='public-read')

Đặt ACL khi tải lên

Tải tệp với ACL 'public-read'

s3.upload_file(
  Bucket='gid-requests', 
  Filename='potholes.csv', 
  Key='potholes.csv', 
  ExtraArgs={'ACL':'public-read'})

Truy cập đối tượng công khai

Mẫu URL đối tượng S3

https://{bucket}.{key}

URL cho Key='2019/potholes.csv'

https://gid-requests.2019/potholes.csv

Tạo URL đối tượng công khai

Tạo chuỗi URL đối tượng

url = "https://{}.{}".format(
  "gid-requests", 
  "2019/potholes.csv")

'https://gid-requests.2019/potholes.csv'

# Đọc URL vào Pandas
df = pd.read_csv(url)

Cách quyết định truy cập

Thứ tự quyết định truy cập

Cách quyết định truy cập

Thứ tự quyết định truy cập

Ôn tập

IAM

Bucket Policy

ACL

URL có chữ ký trước

Ôn tập

Đặt ACL thành 'public-read'

s3.put_object_acl(
  Bucket='gid-requests', Key='potholes.csv', ACL='public-read')

Đặt ACL thành 'private'

s3.put_object_acl(
  Bucket='gid-requests', Key='potholes.csv', ACL='private')

Ôn tập

Tải tệp với ACL 'public-read'

s3.upload_file(
  Bucket='gid-requests', 
  Filename='potholes.csv', 
  Key='potholes2.csv', 
  ExtraArgs={'ACL':'public-read'})

Ôn tập

Tạo chuỗi URL đối tượng

url = "https://{}.{}".format(
  "gid-requests", 
  "2019/potholes.csv")

'https://gid-requests.2019/potholes.csv'

# Đọc URL vào Pandas
df = pd.read_csv(url)

Hãy thực hành!

Giới thiệu về AWS Boto trong Python