分享

hdfs问题-删除,遍历某个目录时显示GC overhead limit exceeded

pig2 发表于 2020-10-22 15:12:50 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 0 927


hdfs问题-删除,遍历某个目录时显示GC overhead limit exceeded

之前碰到一个问题,使用hdfs ls或者find命令时,会报GC问题,如下图

Exception in thread "main" java.lang.OutOfMemoryError: GC overhead limit exceeded



于是我dfs客户端的heap大小调大,再次运行则成功
HADOOP_CLIENT_OPTS="-Xmx10240m" hdfs dfs -rm <path>





没找到任何评论,期待你打破沉寂

关闭

推荐上一条 /2 下一条