问题描述
我正在通过Google数据融合管道处理文件,但是随着管道的发展,我得到了以下警告和错误:
09/25/2020 12:31:31警告任务6的org.apache.spark.storage.memory.MemoryStore#66-Executor任务启动工作器没有足够的空间来将rdd_10_6缓存在内存中! (到目前为止已计算为238.5 MB)
09/25/2020 12:45:05错误org.apache.spark.scheduler.cluster.YarnClusterScheduler#70-dispatcher-event-loop-1
cdap-soco-crea-99b67b97-fefb-11ea-8ee6-daceb18eb3cf-w-0.c.datalake-dev-rotw-36b8上的执行器2丢失。内部:容器标记为失败:主机上的container_1601016787667_0001_01_000003:主机:cdap-soco-crea -99b67b97-fefb-11ea-8ee6-daceb18eb3cf-w-0.c.datalake-dev-rotw-36b8。内部。退出状态:3。诊断程序:[2020-09-25 07:15:05.226]容器启动时发生异常。容器编号:container_1601016787667_0001_01_000003退出代码:3
请帮助!
解决方法
暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!
如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。
小编邮箱:dio#foxmail.com (将#修改为@)