Zawartość listy wiadra z boto3

Question

Jak mogę sprawdzić, co jest w środku wiadra w S3 z boto3? (tzn. czy "ls")?

wykonując następujące czynności:

import boto3 
s3 = boto3.resource('s3') 
my_bucket = s3.Bucket('some/path/') 

Powroty:

s3.Bucket(name='some/path/') 

Jak mogę zobaczyć jej zawartość?

Answer 1

Jednym ze sposobów, aby zobaczyć zawartość będzie:

for object in mybucket.objects.all(): 
    print(object) 

Answer 2

Jest to podobne do „ls”, ale to nie bierze pod uwagę konwencję folderu prefiks i będzie lista przedmiotów w wiadrze. Od czytnika zależy odfiltrowanie przedrostków, które są częścią nazwy klucza.

W Pythonie 2:

from boto.s3.connection import S3Connection 

conn = S3Connection() # assumes boto.cfg setup 
bucket = conn.get_bucket('bucket_name') 
for obj in bucket.get_all_keys(): 
    print(obj.key) 

W Pythonie 3:

from boto3 import client 

conn = client('s3') # again assumes boto.cfg setup, assume AWS S3 
for key in conn.list_objects(Bucket='bucket_name')['Contents']: 
    print(key['Key']) 

Answer 3

Jestem zakładając skonfigurowano uwierzytelnianie oddzielnie.

import boto3 
s3 = boto3.resource('s3') 

my_bucket = s3.Bucket('bucket_name') 

for file in my_bucket.objects.all(): 
    print file.key 

Answer 4

Jeśli chcesz przekazać dostępu i kluczy sekret:

from boto3.session import Session 

ACCESS_KEY='your_access_key' 
SECRET_KEY='your_secret_key' 

session = Session(aws_access_key_id=ACCESS_KEY, 
        aws_secret_access_key=SECRET_KEY) 
s3 = session.resource('s3') 
your_bucket = s3.Bucket('your_bucket') 

for s3_file in your_bucket.objects.all(): 
    print(s3_file.key) 

Answer 5

bardziej oszczędne drogę, zamiast iteracja poprzez pętli for można również po prostu wydrukować oryginalny obiekt zawierający wszystkie pliki wewnątrz Twój S3 wieloczynnościowy:

session = Session(aws_access_key_id=aws_access_key_id,aws_secret_access_key=aws_secret_access_key) 
s3 = session.resource('s3') 
bucket = s3.Bucket('bucket_name') 

files_in_s3 = bucket.objects.all() #could just print this "list" object 

Answer 6

list_objects vs objects.All() byłoby list_objects poprzecznych podfoldery, wiem objects.All będą przemierzać podfoldery oraz