如何使用 Cron 选项卡每晚进行 MySQL 数据库备份并将其放入 Amazon s3 中？

Question

我在 Rackspace 中有一台服务器，并且我已经在每天晚上运行一个 cron 作业来处理一些东西......（一些与帐户相关的操作 - 每个午夜都会向我发送电子邮件）。我的应用程序是在 groovy on grails 中。现在我想在每个午夜备份 mysql 数据库（称为 myfleet）并将该文件放入 Amezon S3 中。我怎样才能做到这一点？我需要编写任何 java 或 groovy 文件来处理它吗？或者可以从 Linux 盒子本身完成吗？我已经在 Amezon S3 中拥有帐户（存储桶名称为fleetBucket）

Answer 1

AWS CLI 工具 将 mysqldump 的输出直接通过管道传送到 S3：

mysqldump -h [db_hostname] -u [db_user] -p[db_passwd] [databasename] | aws s3 cp - s3://[s3_bucketname]/[mysqldump_filename]

您还可以使用 STDOUT 和 示例：

mysqldump -h localhost -u db_user -ppassword test-database | aws s3 cp - s3://database-mysqldump-bucket/test-database-dump.sql

mysqldump 命令默认输出到 STDOUT。使用 - 作为 aws s3 cp 的输入参数告诉 AWS CLI 工具使用 STDIN 作为输入。

Answer 2

mysqldump --host=$HOST --user=$USER --password=$PASSWORD $DB_NAME --routines --single-transaction | gzip -9 | aws s3 cp - s3://bucket/database/filename.sql.gz

将直接将文件存储到s3。

Answer 3

应该非常简单：
- 使用 mysqldump 备份数据库

mysqldump -u [uname] -p[pass] myfleet | gzip -9 > myfleet.sql.gz  

- 使用命令行客户端将转储文件上传到 S3（例如 http://s3tools.org/s3cmd ：
s3cmd put myfleet.sql.gz s3:///myfleet.sql.gz

只需将其添加到您的 cron 作业中（您可能希望对转储文件使用某种编号方案，以防您想保留多个版本）。

Answer 4

如果源数据库位于 AWS 上并且类型为 Aurora.Mysql，您可以使用类似 See

SELECT * FROM employees INTO OUTFILE S3 's3-us-west-2://aurora-select-into-s3-pdx/sample_employee_data';

。 Integrating.SaveIntoS3.html" rel="nofollow noreferrer">https://docs.aws.amazon.com/AmazonRDS/latest/AuroraUserGuide/AuroraMySQL.Integrating.SaveIntoS3.html 了解详细信息。