为何我的spark集群运行如此之慢?
spark standalone集群相关配置如下:
在该集群上跑计算pi的例子
运行:
./spark-submit --master spark://tdlabnode4:7077 --class org.apache.spark.examples.SparkPi --executor-memory 3g ../lib/spark-examples-1.6.0-hadoop2.6.0.jar 1000
控制台部分输出如下
但是一直没有完成任务,在spark web上查看任务进度
一直是这样
请问是我集群配置的问题吗?该从哪里下手解决问题。
求各位大牛指明一个解决的方向。
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
发布评论
评论(1)
已解决,我在32位的系统上开了3g内存
Executor一直报错