如何使用 Perl 或 Python 将 EOF 附加到文件？

Question

我正在尝试将数据批量插入到 SQL Server Express 数据库。从 Windows XP 命令提示符执行 bcp 时，出现以下错误：

C:\temp>bcp  in  -T -f  -S 

Starting copy...
SQLState = S1000, NativeError = 0
Error = [Microsoft][SQL Native Client]Unexpected EOF encountered in BCP data-file

0 rows copied.
Network packet size (bytes): 4096
Clock Time (ms.) Total     : 4391

So, EOF 有问题。如何使用 Perl 或 Python 将正确的 EOF 字符附加到该文件？

Answer 1

EOF 是文件结束符。可能发生的情况是文件不完整；软件需要数据，但现在已经没有了。

这些情况会发生在以下情况：

• 复制转储文件时，导出中断（转储时退出转储软件）
• 转储期间中止复制
• 磁盘已满

此类情况。

顺便说一句，虽然 EOF 通常只是文件结束符，但确实存在 EOF 字符。使用此方法是因为终端（命令行）输入并不像文件那样真正结束，但有时需要将 EOF 传递给此类实用程序。我不认为它在真实文件中使用，至少不表示文件结束。文件系统非常清楚文件何时结束，它不需要指示器来找出这一点。

编辑 无耻地从 John Machin 提供的评论中复制

它可能会（无意中）发生在真实文件中。它所需要的只是 (1) 数据输入用户错误地键入 Ctrl-Z，在屏幕上看不到任何内容，然后键入预期的 Shift-Z，然后继续，以及 (2) 验证软件（由公司总裁的侄子等编写） ）它很乐意在文本字段中接受 Ctrl-anykey，并且您的数据库中有一个小炸弹，只是等待有人对平面文件生成查询。

Answer 2

意外的 EOF 意味着 bcp 读取器在期望更多数据时发现了 EOF。该 EOF 可以是：

(1) 实际的物理文件结尾（不再需要读取字节）。这意味着您的数据格式错误。检查文件末尾附近是否有不完整的记录。

或者

(2) 在 Windows 上，以文本模式读取文件的程序遵循通过 MS-DOS 从 CP/M 继承的关于 Ctrl-Z 的古老约定（又名 ^Z 又名 \'x1A' 又名 SUB 又名 SUBSTITUTE）作为从任何文件（而不仅仅是终端）读取时的文件结束标记。这包括 Python——行为由 C stdlib 决定。检查数据中是否有“\x1A”。

更新以清晰的方式响应评论：

在 Notepad++ 中，您可以通过执行“查看”/“显示符号”/“显示所有字符”来使其显示不寻常的字符。您可以通过执行 Ctrl-F、在“查找内容”框中键入 \x1a，然后在“搜索”面板中选择“扩展”单选按钮来进行搜索。

或者，您可以使用一点 Python 来获取第一个 Ctrl-Z 的行号：

bytes = open('bcp.dat', 'rb').read()
zpos = bytes.find('\x1a')
# if zpos is -1, no Ctrl-Z in file
print 1 + bytes[:zpos].count('\r\n')

您的 .dat 创建位置并不重要。无意的 Ctrl-Z 可能发生在任何操作系统上创建的文件中的任何位置。重要的是它被作为文本文件读取——Windows？砰!

Answer 3

这不是缺少 EOF 的问题，而是 EOF 存在且不是 bcp 所期望的问题。

我不是 bcp 工具专家，但看起来您的数据文件格式存在一些问题。