存储全站用户活动的有效方法

Question

我尝试在 stackoverflow 上搜索以及进行大量搜索，但无法找到问题的答案（我想我正在搜索错误的关键字/术语）。

我们正在构建推荐引擎，虽然我们最初将所有用户活动记录在自定义日志中（我们使用 ruby​​/rails），但我们需要对该文件进行 EOD 扫描并根据用户进行排列。我们还有一些其他用户数据来自其他一些地方（他的 Facebook 活动、Twitter 时间线等），因此通过 EOD，我们希望将特定用户的所有数据保存在某处，然后在所有数据上运行我们的分析器代码。用户的数据来生成推荐。

问题是我们正在生成大量数据，虽然目前我们使用 mysql 表来存储所有这些数据，但我们不确定我们可以继续这样做多久，因为我们的用户群增长（我们仍在内部测试它，有大约 10 个活跃的用户）。另外，作为热心的开发人员，我们希望尝试一些新的东西来满足我们的需求。

任何朝这个方向的指示都会非常有帮助。

Answer 1

查看 Amazon Elastic Map Red。它就是为这种类型的事情而建造的。