将不同来源的数据合并到数据库

Question

我必须比较两个不同来源的数据。

从不同的来源，我需要获取 College_id、student_id、student_name &我想检查它们在我的数据库中是否是最新的。来源始终拥有准确的数据。

一所大学可能有多个记录。

每次登录时，我都需要在数据库中更新此信息。我该如何继续？

删除&我们的团队不推荐插入选项。那么，我该如何比较呢？

谁能提供一些有效的伪代码？我应该将源信息存储在Java中的二维数组中还是列表中或者如何存储？

如果该记录不存在于源中但存在于数据库中，那么我需要将其从数据库中删除。

如果记录存在于源&数据库中不存在，我需要将其插入到数据库中。

如果有人可以通过一些伪代码提供关于是否使用列表或二维数组的见解，我将不胜感激。

谢谢！

Answer 1

基本上，您需要

1. 从数据库加载所有记录
2. 从受信任源加载所有记录
3. 查找数据库中不再受信任源的所有记录。删除那些。
4. 查找可信来源中不在数据库中的所有记录。添加那些。
5. 查找所有变更记录。更新那些。

问题是，您没有为记录指定主键，因此#5 可能不相关。

对于所有其他人，您需要一个封装记录的类，实现 equals() 和 hashCode() 方法（正确！），以及几个集合，其中包含了解 removeAll() 和 retainAll() 方法。

希望有帮助。

附言。确实可以增量地执行此操作，例如，如果您没有足够的内存来填充整个数据集。在这种情况下，您需要能够读取有序的记录，并且排序与等价关系兼容。

Answer 2

您概述了问题中的大部分步骤。只要进行同步即可：

1. 从数据库中获取数据
2. 将其与规范源中的数据进行比较
3. 根据数据的比较，在数据库中采取适当的操作：
   • 如果没有记录，请插入一条新记录
   • 如果数据更新，请更新您的记录
   • 更新记录中的时间戳，以便您知道更新的时间
4. 最后一步，从数据库中删除所有未根据时间戳“最近”更新的记录