返回介绍

使用非 JVM 语言开发

发布于 2024-10-06 22:12:04 字数 3669 浏览 0 评论 0 收藏 0

  • 两个部分:创建拓扑,以及使用其他语言实现 spouts 与 bolts
  • 由于 Storm 的拓扑都是基于 thrift 结构的,所以使用其他语言创建拓扑也是一件很容易的事情
  • 使用其他语言实现的 spouts 与 bolts 称为“多语言组件”(multilang components)或者“脱壳”(shelling)
    • 这是具体的实现协议:多语言接口协议
    • thrift 结构允许你定义以一个程序和脚本的方式定义多语言组件(例如,可以使用 python 程序和文件实现 bolt)
    • 在 Java 中,需要覆写 ShellBolt 或者 ShellSpout 来创建多语言组件
      • 注意,输出域是在 thrift 结构中声明的,所以在 Java 中你需要这样创建多语言组件:
        • 在 Java 中声明域,并通过在 shellbolt 的构造器中指定输出域来处理其他语言的代码
    • 多语言组件在 STDIN/STDOUT 中使用 JSON 消息来和子进程通信
    • 已经实现了 Ruby,Python 等语言的相关协议,例如,python 支持 emit、anchor、ack 与 log等操作
  • “storm shell” 命令简化了构造 jar 包与向 nimbus 上传文件的过程
    • 构建 jar 文件并将其上传
    • 使用 nimbus 的 host/port 以及 jar 文件的 id 来调用你的程序

以非 JVM 语言实现 DSL 的相关说明

译者注:由于本文部分内容与另一篇文档定义 Storm 的非 JVM 语言 DSL重复,这里不再罗列,详情请参阅该文档。

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。
列表为空,暂无数据
    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文