上传到 s3 时压缩文件
我正在使用 boto3.client 将“字节”写入 s3 远程上的文件。有没有办法在压缩数据的同时写入数据？ 例如。使用诸如 codec="snappy" 之类的选项或类似的选项？
代码：
s3 = boto3.client("s3")
bytesio = io.BytesIO()
bytesio.write(bytes_data)
bytesio.seek(0)
key = OUTPUT_REMOTE_DIR + test.avro
s3.put_object(Body=bytesio.getvalue(), Bucket=OUTPUT_BUCKET, Key=key)
I'm writing "bytes" to a file on s3 remote, using boto3.client. Is there a way to write data while compressing it simultaneously?
eg. using some option like codec="snappy" or something like that?
Code:
s3 = boto3.client("s3")
bytesio = io.BytesIO()
bytesio.write(bytes_data)
bytesio.seek(0)
key = OUTPUT_REMOTE_DIR + test.avro
s3.put_object(Body=bytesio.getvalue(), Bucket=OUTPUT_BUCKET, Key=key)
如果你对这篇内容有疑问，欢迎到本站社区发帖提问 参与讨论，获取更多帮助，或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱，如果其他用户或者作者回复了您的评论，将不能在第一时间通知您！
发布评论