Avro

Avro

文章 2 浏览 175

在 Java 中,如何创建与 Apache Avro 容器文件等效的文件,而不必被迫使用文件作为介质?

如果任何精通 Apache Avro 的 Java 实现的人正在阅读本文,那么这有点盲目。 我的高级目标是有某种方式通过网络传输一系列 avro 数据(例如 HTTP,但…

望笑 2024-12-06 09:59:43 1 0

如何生成 C++带有 Apache Avro 的标头(python 脚本)

我有兴趣使用 Apache Avro 的代码生成工具(即 python 脚本)生成 C++ 标头。 根据文档应该相当容易做,但我通常不使用 python,所以事情对我来说看起…

蓝眸 2024-11-28 04:12:29 3 0

Python 实现 avro 慢?

我正在使用 avro 库从 avro 文件读取一些数据。从文件加载 33K 对象大约需要一分钟。这对我来说似乎很慢,特别是 Java 版本在大约 1 秒内读取相同的文…

逐鹿 2024-11-05 12:07:17 4 0

使用 thrift/avro 进行 hadoop 作业以在 Java 和 C++ 之间进行通信;

现在我们有一个 Java Hadoop 作业正在处理一些 C++ 二进制文件。我们将文件写入 NFS 和 C++,然后 Java 读取它们,这就是我们的通信形式,这阻碍了我…

还在原地等你 2024-11-02 10:51:04 5 0

写入 Avro 数据文件

以下代码只是将数据写入 avro 格式,并从写入的 avro 文件中读取并显示相同的数据。我只是在尝试 Hadoop 权威指南书中的示例。我第一次能够执行此操作…

吻安 2024-10-30 16:48:03 4 0

如何使用 GenericRecord 在 Avro 中填充嵌套的嵌套记录

假设我有以下架构: { "name" : "Profile", "type" : "record", "fields" : [ { "name" : "firstName", "type" : "string" }, { "name" : "address", …

萌辣 2024-10-28 17:46:07 8 0

Cassandra 的惯用客户端库 + PHP?

在这段视频(29:00)中,Rackspace 的 Eric Evans 告诉观众使用 Thrift 和 Avro 是一个坏主意。相反,他提倡使用惯用的客户端库。 http://video.disru…

意中人 2024-10-21 22:12:56 6 0

Apache Thrift、Google Protocol Buffers、MessagePack、ASN.1 和 Apache Avro 之间的主要区别是什么?

所有这些都提供二进制序列化、RPC 框架和 IDL。我对它们之间的主要区别和特征(性能、易用性、编程语言支持)感兴趣。 如果您知道任何其他类似的技术…

岁月流歌 2024-10-11 10:36:09 8 0

关于数据仓库相关基础术语概念的理解

图片摘自《Hive编程指南》术语表部分 问题1:序列化格式 就是 结构化格式? 是结构化数据的格式?问题2:什么是快速的二进制格式?都有哪些?问题3:…

或十年 2022-09-01 16:47:49 24 0
更多

推荐作者

已经忘了多久

文章 0 评论 0

15867725375

文章 0 评论 0

LonelySnow

文章 0 评论 0

走过海棠暮

文章 0 评论 0

轻许诺言

文章 0 评论 0

信馬由缰

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文