我该如何处理刚刚从 dbpedia 下载的这个 csv 数据集？

Question

我刚刚从 dbpedia 下载了维基百科信息框的 csv。 但是我不知道如何使用它：-SI 想要将所有这些数据导入数据库，但不太确定如何从这里获取它。 从 http://wiki.dbpedia.org/Downloads32#infoboxes 下载它

我 使用 Php

---

仅供记录 - 此 csv 文件约为 1.8 GB。 实际上，我正在经历所有这些麻烦，只是为了从维基百科的一组选定的文章中获取一组选定的信息框。 我会手动执行此操作，除非我需要包含超过 10,000 个条目（其中包括国家和城市）的信息框。 我只是在寻找一种简单的方法来做到这一点，坦率地说，我一直在使用我所有的选择:(

Answer 1

要将 CSV 数据导入 MySQL，您可以使用 LOAD DATA INFILE< /a> 语句，例如

LOAD DATA LOCAL INFILE '/importfile.csv'
INTO TABLE test_table
FIELDS TERMINATED BY ','
LINES TERMINATED BY '\n'
(field1, filed2, field3); 

有时这样的数据可能需要一些处理，用 Perl 编写脚本或类似的脚本来逐行解析文件并吐出 SQL 语句并不困难。

Answer 2

如果您想在导入数据之前对数据进行处理，可以查看我的 CSV 流编辑器 CSVfix - 这是自由和开源软件。 如果由于某种原因您的数据库批量加载 CSV 数据不适合您，它还可以为您的数据库生成 SQL INSERT 语句。