我应该如何保留汇总多个表的准确记录？

发布于 2024-07-24 02:00:58 字数 406 浏览 5 评论 0原文

我有一个规范化的数据库，需要经常生成基于 Web 的报告，其中涉及跨多个表的联接。这些查询花费的时间太长，因此我想保留计算结果，以便可以快速加载页面。我总结的表格经常更新，我需要摘要来反映迄今为止的所有更新。

所有表都有自动增量主整数键，我几乎总是添加新行，并且可以安排在它们更改时清除计算结果。

我遇到了一个类似的问题，我需要通过安排迭代表中的每一行来总结单个表，并跟踪迭代器状态和所看到的最高主敏锐度（即“高水位”）。对于单个表来说这很好，但对于多个表我最终会为每个表保留一个高水位值，这感觉很复杂。或者，我可以非规范化为一个表（具有相当广泛的应用程序更改），这感觉是一种倒退，并且可能会将我的数据库大小从大约 5GB 更改为大约 20GB。

（我现在使用的是 sqlite3，但 MySQL 也是一个选项）。

原文

分享到QQ

分享到微博

如果你对这篇内容有疑问，欢迎到本站社区发帖提问参与讨论，获取更多帮助，或者扫码二维码加入 Web 技术交流群。

发布评论

需要登录才能够评论，你可以免费注册一个本站的账号。

草莓味的萝莉 2024-07-31 02:00:58

我看到两种方法：

将数据移动到单独的数据库中，进行非规范化，进行一些预先计算，以优化它以实现快速访问和报告（听起来像一个小型数据仓库）。这意味着您必须考虑一些将数据从源复制和转换到目标的作业（脚本、单独的应用程序等）。根据您希望完成复制的方式（完整/增量）、复制的频率以及数据模型的复杂性（源和目标），可能需要一段时间来实施并优化该过程。它的优点是使您的源数据库保持不变。
您保留当前数据库，但对其进行非规范化。正如您所说，这可能意味着应用程序逻辑的改变（但您可能会找到一种方法来最小化对使用数据库的逻辑的影响，您比我更了解情况:)）。

回复收藏 0 原文

会傲 2024-07-31 02:00:58

报表可以增量刷新，还是完全重新计算来返工报表？如果必须完全重新计算，那么您基本上只想缓存结果集，直到需要下一次刷新为止。您可以创建一些表来包含报告输出（以及元数据表来定义可用的报告输出版本），但大多数时候这有点过头了，您最好将查询结果保存到文件或其他缓存存储中。

如果是增量刷新，那么您无论如何都需要 PK 范围，因此您需要类似高水位线数据的数据（除非您可能想要存储最小/最大对）。

回复收藏 0 原文

萌酱 2024-07-31 02:00:58

您可以创建触发器。

一旦计算值之一发生更改，您可以执行以下操作之一：

更新计算字段（首选）
重新计算汇总表
存储需要重新计算的标志。下次需要计算值时，请先检查此标志，并在必要时重新计算

示例：

CREATE TRIGGER update_summary_table UPDATE OF order_value ON orders 
BEGIN
  UPDATE summary 
    SET total_order_value = total_order_value 
                          - old.order_value 
                          + new.order_value 
    // OR: Do a complete recalculation
    // OR: Store a flag
END;

有关 SQLite 触发器的更多信息：http://www.sqlite.org/lang_createtrigger.html

You can create triggers.

As soon as one of the calculated values changes, you can do one of the following:

Update the calculated field (Preferred)
Recalculate your summary table
Store a flag that a recalculation is necessary. The next time you need the calculated values check this flag first and do the recalculation if necessary

Example:

CREATE TRIGGER update_summary_table UPDATE OF order_value ON orders 
BEGIN
  UPDATE summary 
    SET total_order_value = total_order_value 
                          - old.order_value 
                          + new.order_value 
    // OR: Do a complete recalculation
    // OR: Store a flag
END;

More Information on SQLite triggers: http://www.sqlite.org/lang_createtrigger.html

回复收藏 0 原文