有人可以提供使用 boost iostreams 查找、读取和写入大于 4GB 文件的示例吗

Question

我读到 boost iostreams 据说支持 64 位半便携式方式访问大文件。 他们的常见问题解答提到64 位偏移函数 ，但没有关于如何使用它们的示例。 有人使用这个库来处理大文件吗？ 打开两个文件、查找它们的中间部分并将一个文件复制到另一个文件的简单示例将非常有帮助。

谢谢。

Answer 1

简短回答

只需包含

#include <boost/iostreams/seek.hpp>

并使用 seek 函数，其中

boost::iostreams::seek(device, offset, whence);

• device 是文件、流、streambuf 或任何可转换为 seekable 的对象；
• offset 是 stream_offset;
• whence 是 BOOST_IOS::beg、BOOST_IOS::cur 或 BOOST_IOS::end。

seek 的返回值是 std::streampos 类型，并且可以使用 stream_offset ://www.boost.org/doc/libs/1_42_0/libs/iostreams/doc/functions/positioning.html#position_to_offset" rel="noreferrer">position_to_offset 函数。

示例

这是一个冗长、乏味且重复的示例，它展示了如何打开两个文件、寻找偏移量 >4GB 以及如何在它们之间复制数据。

警告：此代码将创建非常大的文件（几个 GB）。 在支持稀疏文件的操作系统/文件系统上尝试此示例。 Linux 还可以； 我没有在其他系统（例如Windows）上进行测试。

/*
 * WARNING: This creates very large files (several GB)
 * unless your OS/file system supports sparse files.
 */
#include <boost/iostreams/device/file.hpp>
#include <boost/iostreams/positioning.hpp>
#include <cstring>
#include <iostream>

using boost::iostreams::file_sink;
using boost::iostreams::file_source;
using boost::iostreams::position_to_offset;
using boost::iostreams::seek;
using boost::iostreams::stream_offset;

static const stream_offset GB = 1000*1000*1000;

void setup()
{
    file_sink out("file1", BOOST_IOS::binary);
    const char *greetings[] = {"Hello", "Boost", "World"};
    for (int i = 0; i < 3; i++) {
        out.write(greetings[i], 5);
        seek(out, 7*GB, BOOST_IOS::cur);
    }
}

void copy_file1_to_file2()
{
    file_source in("file1", BOOST_IOS::binary);
    file_sink out("file2", BOOST_IOS::binary);
    stream_offset off;

    off = position_to_offset(seek(in, -5, BOOST_IOS::end));
    std::cout << "in: seek " << off << std::endl;

    for (int i = 0; i < 3; i++) {
        char buf[6];
        std::memset(buf, '\0', sizeof buf);

        std::streamsize nr = in.read(buf, 5);
        std::streamsize nw = out.write(buf, 5);
        std::cout << "read: \"" << buf << "\"(" << nr << "), "
                  << "written: (" << nw << ")" << std::endl;

        off = position_to_offset(seek(in, -(7*GB + 10), BOOST_IOS::cur));
        std::cout << "in: seek " << off << std::endl;
        off = position_to_offset(seek(out, 7*GB, BOOST_IOS::cur));
        std::cout << "out: seek " << off << std::endl;
    }
}

int main()
{
    setup();
    copy_file1_to_file2();
}