将 csv 文件内容加载到 mysql 表中并进行验证

发布于 2024-10-19 00:55:10 字数 324 浏览 2 评论 0原文

我想将一个大的 csv 文件（大约 12MO）导入到 mysql 表中，首先我尝试使用 LOAD DATA INFILE 它工作得很好，但就我而言，我想首先测试 csv 行以确定是否要更新数据或插入新记录所以解决方案是读取文件并将每一行的内容与表中已有的数据进行比较，并做出正确的操作这种方法也有效，但需要大量时间和资源，

现在我的问题是

1：我可以使用PHPMYADMIN（开源）的导入功能吗？我的项目是商业的

2：如果可以，你知道一些关于这个的教程吗（任何想法）

3：如果不，我不能，是否有这样的用于导出/导入的商业框架，

谢谢

原文

分享到QQ

分享到微博

如果你对这篇内容有疑问，欢迎到本站社区发帖提问参与讨论，获取更多帮助，或者扫码二维码加入 Web 技术交流群。

发布评论

需要登录才能够评论，你可以免费注册一个本站的账号。

几味少女 2024-10-26 00:55:10

这实际上是非常常见的 SQL：您要么想要插入，要么想要更新，是吗？因此，您需要两个语句（一个用于更新，一个用于插入）以及一种判断是否应该插入的方法。您真正需要的是一个永远不会为单个记录重复的唯一键（可以是复合键）和两个语句，如下所示：

UPDATE right SET
   right1 = left1,
   right2 = left2,
   etc
FROM the_import_table right
LEFT JOIN the_existing_data left ON left.key = right.key
WHERE right.key IS NOT NULL --note that I write in TSQL

INSERT INTO right (
   right1,
   right2,
   etc
) SELECT
   left1,
   left2,
   etc
FROM left
LEFT JOIN right on left.key = right.key
WHERE right.key IS NULL

请注意，您可以在 WHERE 中使用一组 AND 值来使用复合键，并注意您没有更新复合键，但您可能正在插入复合键。这应该很好地帮助您开始。在要求澄清之前，请用实际代码更新您的问题。

This is actually pretty common SQL: you either want to insert or update, yes? So you need two statements (one for update, one for insert) and a way to tell if it should be inserted. What you really need is a unique key that will never be duplicated for the individual record (can be a composite key) and two statements, like this:

UPDATE right SET
   right1 = left1,
   right2 = left2,
   etc
FROM the_import_table right
LEFT JOIN the_existing_data left ON left.key = right.key
WHERE right.key IS NOT NULL --note that I write in TSQL

INSERT INTO right (
   right1,
   right2,
   etc
) SELECT
   left1,
   left2,
   etc
FROM left
LEFT JOIN right on left.key = right.key
WHERE right.key IS NULL

Note that you can use composite keys using a set of ANDed values in the WHERE, and note that you're not updating the composite keys but you are probably inserting the composite keys. This should be good to get you a start. Before you ask for clarification update your question with actual code.

回复收藏 0 原文