如何实时获取hive提交的hql的运行状态?
有这么一个需求:
hive 通过hive jdbc提交一个查询作业到hive,现在想实时获取此查询作业的进度、状态。请问各位大牛,hive有没有提供对外的接口监控查询作业状态?
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
有这么一个需求:
hive 通过hive jdbc提交一个查询作业到hive,现在想实时获取此查询作业的进度、状态。请问各位大牛,hive有没有提供对外的接口监控查询作业状态?
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
接受
或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
发布评论
评论(10)
http://blog.csdn.net/supperman_009/article/details/77508354
按这个帖子的实现。获取进度就可以了
hive没有的,只能自己捕获输出来获取
引用来自“huan”的评论
通过hive 自带的 server2 的 thrift 模式提交的sql 可以获得 状态进度,jdbc方式没有试过。
获取状态主要是给前端用户看的,这样用户提交一个作业,能实时看到作业运行的百分比,计算量较大时,能看到作业进度心里不会那么着急。Hadoop的管理界面太多信息,用户看不懂。
hive 貌似没有!hadoop的运行管理界面不是能看到么。
hadoop的jobtracker可以取到,query可以从xml里取得
请问thrift模式提交的sql如何获得进度状态,请给与指点,非常感谢
回复
我自己写的找不到了,但你可以参考这篇文章 http://blog.csdn.net/taoxinwan/article/details/38404313 进度无法得知,但是状态能知道. 注意,hive必须使用 server2 模式。
回复
非常感谢!
通过hive 自带的 server2 的 thrift 模式提交的sql 可以获得 状态进度,jdbc方式没有试过。