Flume 代理 - 我可以指定 gzip 或 bz2 等压缩吗?

发布于 2024-10-19 10:44:33 字数 91 浏览 7 评论 0原文

是否可以在 Flume 代理上指定压缩选项,以便数据以压缩格式传输到收集器?我知道收集器级别有压缩选项,但是能够从代理传输压缩数据也非常有用。

谢谢你!

Is it possible to specify a compression option on a Flume agent so that the data is transferred to the collector in a compressed format? I know there are compression options on the collector level, but it would be also extremely useful to be able to transfer compressed data from the agent, too.

Thank you!

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(1

煮酒 2024-10-26 10:44:33

Flume 具有您可以使用的 gzipgunzip 接收器装饰器。将 gzip 装饰器放在代理接收器上,将 gunzip 装饰器放在收集器接收器上,并且在代理和收集器之间传输压缩数据应该可以正常工作。

Flume has the gzip and gunzip sink decorators that you can use. Put the gzip decorator on your agent sink and the gunzip decorator on your collector sink, and transferring compressed data between the agent and collector should Just Work.

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文