为大于内存的数据生成哈希（不会被捕）

Question

溢出们下午好！ ;)

我想要做什么：

我对验证传输文件的完整性感兴趣。

我是如何处理它的：

我正在考虑为此使用哈希码，但有一个问题。这些文件可能非常大，因此我需要能够迭代生成哈希值。我无法将整个文件加载到内存中。

到目前为止我看到的内容：

我正在调查murmur3 和 skein 用于哈希函数。我相信我了解如何使其与 skein 一起使用，但我构建的版本未通过所有已知的结果单元测试。我不知道如何“链接”杂音以获得有效的结果。

有什么建议吗？

Answer 1

大多数哈希算法对固定大小的数据块进行操作 - 例如，您可以查找 SHA1 或 MD5 参考实现，它们使用“init/loop { update }/finalize”结构，允许您根据需要传递任意多或少的数据每次更新。

例如 Skein，他们在参考实现中使用相同的概念：

int  Skein_256_Init  (Skein_256_Ctxt_t *ctx, size_t hashBitLen);
int  Skein_256_Update(Skein_256_Ctxt_t *ctx, const u08b_t *msg, size_t msgByteCnt);
int  Skein_256_Final (Skein_256_Ctxt_t *ctx, u08b_t * hashVal);

为什么您认为需要将整个数据作为一个块传递？您正在寻找简化的包装函数吗？

Answer 2

您应该看看 Crypto++。这是我最喜欢的加密 C++ 库。

这里是如何使用它。