Comment écrire un fichier ou des données sur un objet S3 en utilisant boto3
Dans boto 2, vous pouvez écrire à un S3 objet à l'aide de ces méthodes:
- Clé.set_contents_from_string ()
- Clé.set_contents_from_file ()
- Clé.set_contents_from_filename ()
- Clé.set_contents_from_stream ()
y a-t-il un équivalent de boto 3? Quelle est la méthode boto3 pour sauvegarder des données sur un objet stocké sur S3?
3 réponses
en boto 3, la clé.les méthodes set_contents_from_' ont été remplacées par
Par exemple:
import boto3
some_binary_data = b'Here we have some data'
more_binary_data = b'Here we have some more data'
# Method 1: Object.put()
s3 = boto3.resource('s3')
object = s3.Object('my_bucket_name', 'my/key/including/filename.txt')
object.put(Body=some_binary_data)
# Method 2: Client.put_object()
client = boto3.client('s3')
client.put_object(Body=more_binary_data, Bucket='my_bucket_name', Key='my/key/including/anotherfilename.txt')
alternativement, les données binaires peuvent provenir de la lecture d'un fichier, comme décrit dans les docs officielles comparant boto 2 et boto 3:
Stockage Des Données
Stockage les données d'un fichier, d'un flux ou d'une chaîne de caractères sont faciles:
# Boto 2.x from boto.s3.key import Key key = Key('hello.txt') key.set_contents_from_file('/tmp/hello.txt') # Boto 3 s3.Object('mybucket', 'hello.txt').put(Body=open('/tmp/hello.txt', 'rb'))
boto3 possède également une méthode pour télécharger un fichier directement:
s3.Bucket('bucketname').upload_file('/local/file/here.txt','mains3bucket/folder/s3key')
http://boto3.readthedocs.io/en/latest/reference/services/s3.html#S3.Bucket.upload_file
voici un bon truc pour lire JSON de s3:
import json, boto3
s3 = boto3.resource("s3").Bucket("bucket")
json.load_s3 = lambda f: json.load(s3.Object(key=f).get()["Body"])
json.dump_s3 = lambda obj, f: s3.Object(key=f).put(Body=json.dumps(obj))
Maintenant, vous pouvez utiliser json.load_s3 et json.dump_s3 avec la même API que load et dump