Open3.popen3 函数打开 bz、gz 和 txt 文件时出现错误“没有这样的文件或目录”或者“未打开阅读”？

Question

我正在尝试编写一个实用程序函数来打开三种不同类型的文件：.bz2、.gz 和.txt。我不能只使用 File.read 因为它给我压缩文件带来了垃圾。我正在尝试使用 Open3.popen3 以便可以给它一个不同的命令，但我收到以下代码的“没有此类文件或目录”错误：

def file_info(file)
  cmd = ''
  if file.match("bz2") then
    cmd = "bzcat #{file}"# | head -20"
  elsif file.match("gz") then
    cmd = "gunzip -c #{file}"
  else
    cmd = "cat #{file}"
  end

  puts "opening file #{file}"
  Open3.popen3("#{cmd}", "r+") { |stdin, stdout, stderr|
    puts "stdin #{stdin.inspect}"
    stdin.read {|line|
      puts "line is #{line}"
      if line.match('^#') then
      else
        break
      end
    }
  }
end


> No such file or directory - cat /tmp/test.txt

该文件确实存在。我尝试使用 cmd 而不是 #{cmd} 在 popen3 cmd 中得到相同的结果。

我决定将其硬编码为 txt 文件，如下所示：

def file_info(file)
  puts "opening file #{file}"
  Open3.popen3("cat", file, "r+") { |stdin, stdout, stderr|
    puts "stdin #{stdin.inspect}"
    stdin.read {|line|
      puts "line is #{line}"
      if line.match('^#') then
      else
        break
      end
    }
  }
end

这让我回想起：

stdin #<IO:fd 6>
not opened for reading

我做错了什么？

当我这样做时：

Open3.popen3("cat",file) { |stdin, stdout, stderr|
  puts "stdout is #{stdout.inspect}"
  stdout.read {|line|
    puts "line is #{line}"
    if line.match('^#') then
      puts "found line #{line}"
    else
      break
    end
  }
}

我没有收到任何错误，并且打印了 STDOUT 行，但是没有一行语句打印出任何内容。

在尝试了几种不同的方法之后，我想出的解决方案是：

cmd = Array.new
if file.match(/\.bz2\z/) then
  cmd = [ 'bzcat', file ]
elsif file.match(/\.gz\z/) then
  cmd = [ 'gunzip', '-c', file ]
else
  cmd = [ 'cat', file ]
end

Open3.popen3(*cmd) do |stdin, stdout, stderr|
  puts "stdout is #{stdout}"
  stdout.each do |line|
    if line.match('^#') then
      puts "line is #{line}"
    else
      break
    end
  end
end

Answer 1

来自精细手册（写得相当混乱）：

*popen3(cmd, &block)
[...]
因此，可以接受命令行字符串和参数字符串列表，如下所示。

Open3.popen3("echo a") {|i, o, e, t| ... }
Open3.popen3("echo", "a") {|i, o, e, t| ... }
Open3.popen3(["echo", "argv0"], "a") {|i, o, e, t| ... }

因此，当您执行此操作时：

Open3.popen3("cat /tmp/test.txt", "r+")

popen3 认为命令名称是 cat /tmp/test.txt 并且 r+ 是该命令的参数，因此您看到的具体错误是：

没有这样的文件或目录 - cat /tmp/test.txt

Open3.popen3 不需要通常的模式标志 ("r+")，因为它会单独处理阅读、写作和错误；而且，正如您所看到的，尝试提供模式字符串只会导致错误和混乱。

第二种情况：

Open3.popen3("cat", file, "r+") { |stdin, stdout, stderr|
  stdin.each {|line|
    #...

不起作用，因为 stdin 是命令的标准输入，这就是您写入而不是从中读取的内容，您可以想要使用 stdout.read 来代替。

您应该将命令构建为数组，并且您的 match 调用应该更严格一些：

if file.match(/\.bz2\z/) then
  cmd = [ 'bzcat', file ]
elsif file.match(/\.gz\z/) then
  cmd = [ 'gunzip', '-c', file ]
else
  cmd = [ 'cat', file ]
end

然后将它们打出来：

Open3.popen3(*cmd) do |stdin, stdout, stderr|
  #...
end

这不仅有效，而且可以让您避免使用有趣的文件名。

您还可以通过在非压缩情况下跳过 Open3.popen3 并使用 File 来避免无用地使用 cat（有人可能会抱怨）。打开 来代替。您可能还需要考虑检查文件的字节以查看它包含的内容，而不是依赖扩展名（或使用 ruby-filemagic 为您检查）。

Answer 2

你最好使用 bzip2-ruby 和 GzipReader 用于读取相应的文件。为此开设一个单独的流程过于昂贵、复杂且脆弱。