我正试着通过mesos做一个有Spark的工作
它抛出了一个异常
warn mesosexternalshuffleclient:无法注册应用程序6c1b7274-960f-47ef-9fa7-1dd06b05d4f1-0010
与外部洗牌服务。
请在驱动程序退出后手动删除随机播放数据
error:java.lang.runtimeexception:java.lang.unsupportedoperationexception:意外消息:org.apache.spark.network.shuffle.protocol.mesos。registerdriver@88d86a24 "
stderr中的日志
错误:接收到信号项信息diskblockmanager:关闭挂钩调用e0911 05:32:34.711486 6619进程。cpp:951]无法接受套接字:已丢弃**
在spark-defaults.conf中
spark.mesos.coarse true
spark.network.timeout 3600s
spark.shuffle.io.connectionTimeout 3600s
谁在扼杀我的申请。。?
暂无答案!
目前还没有任何答案,快来回答吧!