特牛网址导航

spark 2.X 疑难问题汇总_caused by: java.lang.illegalargumentexception: siz-CSDN博客

网友收藏
文章浏览阅读3.1w次,点赞16次,收藏65次。当前spark任务都是运行在yarn上,所以不用启动长进程worker,也没有master的HA问题,所以主要的问题在任务执行层面。作业故障分类故障主要分为版本,内存和权限三方面。 - 各种版本不一致 - 各种内存溢出 - 其他问题版本不一致1)java版本不一致报错:java.lang.UnsupportedClassVersionError: com/im_caused by: java.lang.illegalargumentexception: size exceeds integer.max_valu