spark sql和hive的问题?
看到spark sql兼容hive,并有一个hive on spark的项目
那完全使用spark sql自己的解析,和hive on spark 让hive借助spark运行有什么不同?
哪个更高效?
hive是否能提供比spark sql原生更好的sql支持,是否需要学习hive语法?
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
发布评论
评论(1)
总体上差不太多,hive on spark只是相当于给hive提供了一个新的计算引擎,将hive的sql解析成spark的DAG去计算。spark sql也差不多。不过,hive在sql上的优势是可以直接利用 hive cli 来进行交互操作,比起spark sql要方便不少。