การอัปโหลดและดึงไฟล์

Python เบื้องต้นสำหรับ AWS Boto

Maksim Pecherskiy

Data engineer

Bucket และ object

Bucket

• Bucket มี ชื่อ
• ชื่อ เป็น string
• ชื่อ ไม่ซ้ำกัน ใน S3 ทั้งหมด
• เก็บ object ได้ หลายรายการ

Object

• Object มี key
• ชื่อ คือ path เต็มจาก root ของ bucket
• key ไม่ซ้ำกัน ใน bucket
• อยู่ใน parent bucket ได้ เพียงหนึ่ง เดียว

การสร้าง client

s3 = boto3.client(
  's3', 
  region_name='us-east-1', 
  aws_access_key_id=AWS_KEY_ID, 
  aws_secret_access_key=AWS_SECRET
)

การอัปโหลดไฟล์

s3.upload_file(
  Filename='gid_requests_2019_01_01.csv', 
  Bucket='gid-requests', 
  Key='gid_requests_2019_01_01.csv')

การอัปโหลดไฟล์

การอัปโหลด object เพิ่มเติม

การแสดงรายการ object ใน bucket

response = s3.list_objects(
  Bucket='gid-requests', 
  MaxKeys=2,
  Prefix='gid_requests_2019_')

print(response)

การแสดงรายการ object ใน bucket

การแสดงรายการ object ใน bucket

การแสดงรายการ object ใน bucket

การดึง metadata ของ object

response = s3.head_object(
  Bucket='gid-requests', 
  Key='gid_requests_2018_12_30.csv')

print(response)

การดึง metadata ของ object

การดาวน์โหลดไฟล์

s3.download_file(
  Filename='gid_requests_downed.csv',
  Bucket='gid-requests', 
  Key='gid_requests_2018_12_30.csv')

การลบ object

s3.delete_object(
  Bucket='gid-requests', 
  Key='gid_requests_2018_12_30.csv')

สรุป

• Bucket เปรียบได้กับโฟลเดอร์
• Object เปรียบได้กับไฟล์
• boto3.client()
• s3.upload_file()
• s3.list_objects()
• s3.head_object()
• s3.download_file()
• s3.delete_object()

มาฝึกกันเถอะ!

Python เบื้องต้นสำหรับ AWS Boto