特牛网址导航

spark thriftserver进程fullgc导致卡死和计算getsplit时间很长问题_thriftserver资源不足,gc-CSDN博客

网友收藏
文章浏览阅读2.4k次。背景参考饿了么经验:https://zhuanlan.zhihu.com/p/28574213饿了么经验中谈到:“hive.exec.orc.split.strategy为ETL”,但是这样可能导致spark thriftserver的内存压力很大,面对大作业会导致full gc从而进程卡死或退出。原因先看看split的strategy类别,它有BI,ETL和HYBRID三种,..._thriftserver资源不足,gc