使用 pyinotify 监视文件创建，但等待它完全写入磁盘

Question

我正在使用 pyinotify 来监视文件夹中何时创建文件。当创建某些文件时，我想移动它们。问题是，一旦创建文件（显然），我的程序就会尝试移动它，甚至在它完全写入磁盘之前。

有没有办法让 pyinotify 等到文件完全写入磁盘后再通知我它已创建？或者有什么简单的方法可以在我收到通知后让 python 等待移动它直到它完成编写？

Answer 1

让 pyinotify 对 IN_CLOSE_WRITE 事件做出反应：

wm.add_watch(watched_dir, pyinotify.IN_CLOSE_WRITE, proc_fun=MyProcessEvent())

这是来自 man 5 incrontab，但它同样适用于 pyinotify：

   IN_ACCESS           File was accessed (read) (*)
   IN_ATTRIB           Metadata changed (permissions, timestamps, extended attributes, etc.) (*)
   IN_CLOSE_WRITE      File opened for writing was closed (*)
   IN_CLOSE_NOWRITE    File not opened for writing was closed (*)
   IN_CREATE           File/directory created in watched directory (*)
   IN_DELETE           File/directory deleted from watched directory (*)
   IN_DELETE_SELF           Watched file/directory was itself deleted
   IN_MODIFY           File was modified (*)
   IN_MOVE_SELF        Watched file/directory was itself moved
   IN_MOVED_FROM       File moved out of watched directory (*)
   IN_MOVED_TO         File moved into watched directory (*)
   IN_OPEN             File was opened (*)

Answer 2

在这个级别很难判断文件是否正在被写入。您可以做的就是测试文件是否被其他进程打开。

1) 从打开文件时使用的各种标志来看，O_EXLOCK 标志可能会有所帮助。
如果设置了 O_EXLOCK 标志，则文件描述符对该文件具有独占锁。
所以我的理解是，如果您可以使用 O_EXLOCK 标志执行 os.open() ，则它不会被其他进程打开。
这应该适用于所有 posix 兼容操作系统，但我还没有测试过。如果文件已打开，那么您可以关闭，等待并重试。

2）您还可以尝试 os.stat 并查看更改的时间戳并尝试安全地解释信息。尽管这并不是万无一失的。

3）
在 unix 系统上，您可以尝试“lsof”

4) 以下页面描述了如何使用 /proc/PID/fd 中的符号链接来测试打开的文件

• http://www.gossamer-threads.com/lists/python/python/639874

[编辑：链接已更新]

• https://launchpad.net/ubuntu/%2Bsource/lsof

Answer 3

如果您可以控制写入过程，则可以在写入文件时调用文件“foo.part”，并在关闭文件时将其重命名为“foo”。