LOAD DATA INFILE 不会导入 CSV 数据源中的所有行

Question

我正在尝试将 CSV 文件中的数据加载到 MySQL 数据库中，并注意到导入文件时似乎会跳过大量记录。

这些数据来自政府来源，并且格式非常奇怪，在不寻常的地方使用单引号等。以下是未插入记录的示例：

"'050441'","STANFORD HOSPITAL","CA","H_HSP_RATING_7_8","How do patients rate the hospital overall?","Patients who gave a rating of'7' or '8' (medium)","22","300 or more","37",""

但是，该记录确实被插入：

"'050441'","STANFORD HOSPITAL","CA","H_HSP_RATING_0_6","How do patients rate the hospital overall?","Patients who gave a rating of '6' or lower (low)","8","300 or more","37",""

我用来加载数据的 SQL 如下：

mysql> load data infile "c:\\HQI_HOSP_HCAHPS_MSR.csv" into table hospital_qualit
y_scores fields terminated by "," enclosed by '"' lines terminated by "\n" IGNOR
E 1 LINES;

我正在将数据加载到的表的格式如下：

delimiter $ $

CREATE TABLE `hospital_quality_scores` (
  `ProviderNumber` varchar(8) NOT NULL,
  `HospitalName` varchar(50) DEFAULT NULL,
  `State` varchar(2) DEFAULT NULL,
  `MeasureCode` varchar(25) NOT NULL,
  `Question` longtext,
  `AnswerDescription` longtext,
  `AnswerPercent` int(11) DEFAULT NULL,
  `NumberofCompletedSurveys` varchar(50) DEFAULT NULL,
  `SurveyResponseRatePercent` varchar(50) DEFAULT NULL,
  `Footnote` longtext,
  PRIMARY KEY (`ProviderNumber`,`MeasureCode`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8$$

有人知道为什么会发生这种情况吗？似乎只有部分记录实际上被正确插入。

Answer 1

难道是你的主键阻止了附加数据的插入？

查找已插入的 ProviderNumber 为“'050441'”且 MeasureCode 为“H_HSP_RATING_7_8”的记录，如果有其中之一，则为重复键问题。

您可能需要将“AnswerDescription”添加到主键来解决此问题。

问候，

戴夫

Answer 2

实际上我在想你的问题可能更多地与第一个值被双引号（即它在“'value'”中被引用两次）有关，这可能导致你试图插入的值是'050441' ，而不是应有的 050441 。

无论如何，如果没有特殊处理，您将插入额外的单引号，我认为您可能无意这样做。

祝你好运，愿你的所有代码都能完美运行！

罗德尼