计算 Feather 文件中的行数、grep、头部和尾部

Question

设置：我正在考虑从使用 csv 写入大型（~20GB）数据文件切换为 Feather 格式，因为我有足够的存储空间，而且额外的速度更重要。我喜欢 csv 文件的一件事是，在命令行中，

wc -l filename

即使对于大型数据文件，我也可以快速获取行数。另外，我可以使用 head 和 tail 命令快速搜索简单的字符串，

grep search_string filename

有时也非常有用。这些很简单，可以很好地处理 csv 文件，但不适用于 Feather。如果我在羽毛锉上尝试其中任何一个，我都不会得到有意义或有帮助的结果。

虽然我当然可以将 Feather 文件读取到 Python 或 R 中，然后对其进行分析，但我宁愿省去写出路径和导入必要库的麻烦。

我的问题：是否存在一个跨平台（至少 Mac 和 Linux）羽毛文件阅读器，我可以用它来快速读入和查看羽毛数据（这将是表格格式），并具有相应的功能行计数、grep、头和尾？或者我可以安装一些简单的 CLI 实用程序，使我能够执行相当于行计数、grep、head 和 tail 的操作吗？

我见过这个问题，但相对于我的问题来说它非常不完整。

Answer 1

使用feather 文件，您必须使用Python 或R 程序。

要使用 csv，您可以使用 Linxu/Unix 用户可用的任何常见文本操作实用程序。

Linux 文本操作工具

阅读器 less

搜索 grep

转换器 awk sed

提取器 split

编辑器 < code>vim

上述每个工具都需要一些学习和实践。

建议

如果您有编程技能，请创建一个程序来操作您的feather 文件。