当前位置：文江博客话题详情

完整的数据库模式转换 - 如何测试重写的查询？

发布于 2024-11-25 08:32:59 字数 309 浏览 6 评论 0原文

我们的数据库设计得很糟糕（我们继承了它）。我已将架构重新设计为可用且可维护的东西。相当多的表和列已被删除，许多列已被移动，并且大多数表和列已被重命名。一些数据类型也已更改。

我已经从我们的网络应用程序中提取了所有查询，并开始重写它们。我们认为，我们的 DBA 能够将旧数据迁移到新模式。为了确保我们需要通过将旧结果与新结果进行比较来测试每个查询。

我们如何测试这样的大规模迁移？我需要能够指定参数，并将旧表/列映射到新表/列。由于有数百个查询，这是一项艰巨的任务。我可以自己写一些东西，但我已经对我的时间有很多要求，所以使用现有的工具是更好的选择。

谢谢！

原文

分享到QQ

分享到微博

如果你对这篇内容有疑问，欢迎到本站社区发帖提问参与讨论，获取更多帮助，或者扫码二维码加入 Web 技术交流群。

发布评论

需要登录才能够评论，你可以免费注册一个本站的账号。

反差帅 2024-12-02 08:32:59

我必须这样做......而且这很容易，因为我重写了整个应用程序；）

许多查询听起来像是基本操作，例如选择，插入，更新尚未在函数中抽象 - 也许这可以帮助清理适应之前一团糟。

现在进行测试：

您需要一个测试脚本
a) 运行所有查询
b) 存储所有选择的输出进行比较

备份您的测试数据库@状态0，清除常规查询日志
在您的应用程序中使用所有删除、选择和更新，
复制粘贴该日志，获取每个选择并在其前面加上“创建表 temptable_xyz”（或课程选择到 temptable_xyz .. 取决于可用的语法）
在两个数据库上运行，迁移脚本后 test db @ state 0 和 test db @ state 0
比较

如果您可以确保您使用了每个应用程序中的每个功能，那么这应该可以做到。

GL - 没有什么比让现有的东西变得更好更好的了；）

回复收藏 0 原文

辞别 2024-12-02 08:32:59

有时简单的解决方案就可以解决问题。

如果只是 SELECT，您可以将新旧查询放入文本文件中，使用脚本运行它们并比较输出。

cd newqueries
for queryfile in *; do
    psql -f $queryfile migrateddb > /tmp/newresult
    psql -f ../oldqueries/$queryfile olddb > /tmp/oldresult

    if ! diff /tmp/oldresult /tmp/newresult; then
        echo "Difference in $queryfile"
        exit 1
    fi
done

或者您可以编写基于结果比较的单元测试

Sometimes simple solutions do the job.

If it is just SELECTs, you could just put the new and old queries in text files, run them with a script and diff the output.

cd newqueries
for queryfile in *; do
    psql -f $queryfile migrateddb > /tmp/newresult
    psql -f ../oldqueries/$queryfile olddb > /tmp/oldresult

    if ! diff /tmp/oldresult /tmp/newresult; then
        echo "Difference in $queryfile"
        exit 1
    fi
done

Or you could write a unit test based result comparison

回复收藏 0 原文

罗罗贝儿 2024-12-02 08:32:59

这将是我的方法：

恢复具有数据的测试数据库，运行所有已知的查询。
恢复另一个测试数据库，运行所有新查询。
创建一个 SQL 脚本来连接每个数据库的表并比较结果。这可以通过 information_schema 或其他系统表来完成（取决于供应商）。
插入临时表
选择（从 db1..name 中选择 count(1)）
,（从 db2..name 中选择 count(1)）
，（在 t1.col1 = t2.col1 和 t1.colx = t2.colx 上从 db1.name t1 join db2.name t2 选择 count(1)）
, tablename

然后您可以运行查询中包含该表名的查询。它将为您提供查看位置的起点。