MySQL CSV 导入 - 如果时间戳有毫秒，则日期输入为 0000-00-00 00:00:00？

Question

我目前有大量 CSV 需要导入到 MySQL 数据库中。这些文件包含每条记录的时间戳，其格式如下（例如）：

2011-10-13 09:36:02.297000000

我知道 MySQL 错误 #8523，这表明不支持在日期时间字段中存储毫秒。尽管如此，我还是希望日期时间字段在几秒后截断记录，而不是输入空白。

我已将问题范围缩小到毫秒（而不是 csv 的格式等）

2011-10-13 09:36:02

由于导入正确，

。谁能建议一种方法，让我可以导入没有零的数据？我有太多 CSV，无法手动进入每个 CSV 并调整时间戳的长度/格式。

我应该指出，虽然毫秒是一个很好的选择，但它们对于我的应用程序来说并不是必需的，因此我会很高兴有一个解决方案可以让我轻松截断数字并导入它们。

谢谢！

编辑：为了澄清，我使用以下命令导入 CSV：

mysqlimport --fields-enclosed-by="" --fields-terminated-by="," --lines-terminated-by="\n" --columns=id,@x,Pair,Time -p --local gain [file].csv

这对于导入记录来说非常快 - 我有大约 50m 需要导入，所以读取每一行并不是一个很好的选择。

Answer 1

我不知道你如何导入 CSV，但我要做的方法是编写一个脚本（php/perl）来读取每个文件，将时间戳四舍五入或修剪为秒，然后在数据库上执行 INSERT 语句。

一样，它应该可以完成工作

<?php
$file=fopen("your.csv","r");
mysql_connect ($ip, $user, $pass);

while(!feof($file))
{
   $line = explode(',',fgets($file));
   mysql_query("INSERT INTO TABLE1 (ID, DATE) values (".$line[0].", ".substr($line[1],0,19).")");
}
fclose($file);
?>

像从命令行执行这个

Answer 2

使用毫秒时它不会导入，但不使用毫秒时它会导入。所以你必须以一种或另一种方式进行子串。 MySQL 有各种字符串函数，例如 SUBSTRING - 您可以使用它，因为您每次都需要在完全相同的位置削减这些毫秒。

但是，您将在执行查询时使用它。如果您无法修改查询，因为它以某种方式自动化，您可以向流程添加一个步骤并首先更改数据，然后将其添加到数据库中。一个简单的脚本就能够读取 csv、更改它、再次写回它或直接执行查询。