29得票3回答
通过s3cmd (Amazon S3)创建文件夹

我正在使用s3cmd将文件上传到我的S3服务器。我的问题是,当服务器上的目录不存在时,上传会失败。我该如何告诉s3cmd在目录不存在时创建它?我正在使用PHP。

27得票4回答
在S3上压缩整个目录

如果我在S3上有一个包含约5000个小文件的目录,是否有一种简单的方法将整个目录压缩并在S3上留下生成的ZIP文件?我需要这样做而不必手动访问每个文件。 谢谢!

23得票2回答
从S3存储桶下载匹配模式的条目

我有一个S3存储桶,其中存储有几个格式为index.log.yyyy-mm-dd-01、index.log.yyyy-mm-dd-02等的日志文件。 其中yyyy代表年份,mm代表月份,dd代表日期。 现在我只想下载其中几个文件。我在Downloading an entire S3 buc...

17得票4回答
必要的 s3cmd S3 权限用于 PUT/Sync。

我将迁移到AWS EC2,出于良好的原因,我希望限制我的实例用户权限。其中一个需要做的事情是访问S3上的文件并在那里写入文件。然而,我找不到任何方法可以在不给该用户所有权限的情况下完成这一点。 s3cmd允许我对已授权的s3存储桶调用“ls”和“du”,但在尝试向其中一个文件夹PUT / s...

15得票1回答
试图使用s3cmd在Amazon S3文件上设置元数据

我有一个文件存在Amazon S3上,后缀名为".bin.gz"。我希望Web浏览器将其视为经过gzip压缩的HTML文件。因此,我可以进入Amazon S3 Web控制台(https://console.aws.amazon.com/s3/home)并导航到该文件,然后选择它。在那里,在属性...

15得票4回答
使用s3cmd并行上传文件到S3

我在服务器上有大量的文件,想要将它们上传到S3。这些文件以.data扩展名存储,但实际上它们只是一堆jpeg、png、zip或pdf文件。我已经编写了一个短脚本来查找mime类型并将它们上传到S3,虽然可以工作但速度很慢。有没有办法使用GNU Parallel来加速运行下面的脚本?#!/bin...

14得票6回答
如何在Amazon S3中查找零字节文件

有没有办法在Amazon S3中以编程方式找到零字节文件? 存储桶的总大小超过100G, 不太可能将所有文件同步回服务器再进行操作。find . -size 0 -type f

12得票1回答
S3同步不可写警告

我试图使用 s3cmd sync(远程到本地的原始命令),但每个文件都会收到“not writable: Operation not permitted”警告(见下文)。然而,这些文件似乎已经被正确下载,如果我对文件执行 "ls" 命令,它也确实存在。我尝试使用 "--disable-mult...

12得票6回答
授予“已验证用户”组对文件的读取权限

我该如何授予经过身份验证的用户组读取文件的权限?我正在使用s3cmd并希望在上传时进行更改acl。我应在http://acs.amazonaws.com/groups/global/AuthenticatedUsers中填写什么? 我已尝试了每种可能的AuthenticatedUsers组合。...

12得票2回答
S3cmd同步返回"killed"

我正在尝试同步亚马逊S3上的几个大桶。 当我运行我的S3cmd sync --recursive命令时,我会收到一个回复说“killed”。 这是什么意思?在S3中同步的文件数量是否有限制?