hive on spark 报错GC overhead limit exceeded
时间: 2023-10-12 14:05:31 浏览: 175
hive on spark mr 数据开发常见问题解决
这个错误是由于内存溢出导致的,具体是java.lang.OutOfMemoryError: GC overhead limit exceeded。这种类型的内存溢出是指在进行多次垃圾回收后,仍然无法有效释放内存,导致内存不足。当经过几次垃圾回收后,只有少于2%的内存被释放,并且空闲内存很少,可能会再次被快速填充,从而触发更多的垃圾回收操作。这样的循环会导致CPU大部分的时间都在进行垃圾回收,无法完成具体的业务操作,导致应用程序无法正常运行。<span class="em">1</span><span class="em">2</span><span class="em">3</span>
#### 引用[.reference_title]
- *1* *2* *3* [spark程序运行异常:java.lang.OutOfMemoryError: GC overhead limit exceeded](https://blog.csdn.net/sigurwang/article/details/107362066)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 100%"]
[ .reference_list ]
阅读全文