将数据与数据库中的表进行比较

Question

我接收 CSV 格式的原始数据，并将其上传到 MySQL 数据库中的表（我的网站在该数据库上运行）。我想将较新的 CSV 与从较旧的 CSV 上传的数据进行比较，并且我想查看两者之间的差异（基本上我想将原始数据与表格进行比较）。

我有 PHP、MySQL 和我的桌面应用程序（例如 Excel）可供我使用。解决这个问题的最佳方法是什么？我能想到的可能方法：

• 将较新的数据插入到 Table_Copy，然后以某种方式比较 mysql中有两个表。
• 以某种方式查询数据库 与没有的原始数据比较 必须上传它。
• 从下载数据 数据库转换为原始 CSV 格式，以及 然后使用桌面程序比较两个原始 CSV

Answer 1

为什么不使用 where 子句只提取新数据？例如，

select * from table where dateadded > '1-1-2011 18:18'

这取决于您的表具有添加日期列并用添加数据的日期和时间填充该列。

Answer 2

diff <(mysqldump test old_csv --skip-extended-insert) <(mysqldump test new_csv --skip-extended-insert) --side-by-side --suppress-common-lines --width=690 | more 

Answer 3

您可以使用以下方法

1) 数据库表比较 - 创建表的副本，然后比较数据。

您可以使用专有工具轻松完成此操作（例如：EMS 数据比较器）。

您还可以编写一些简单的查询来实现此目的（例如： select id from table_copy not in (select id in table) ）

2）使用文件比较器，例如 winmerge
用精确的方法转储两个表，然后进行比较。

我根据数据大小使用这两种方法。对于较小的数据，第二种方法很好。