分享

Hive如何解决小文件问题

阿飞 发表于 2021-8-16 12:59:05 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 0 696
hive中发现有一些小文件,之前有些数据有问题会往已有的分区中插入迟到的数据导致小文件有点多,这种问题怎么能处理下,或者是避免一下,有啥思路能给点指引吗?

回答:
可以使用insert overwrite table a partition(...)
select
from a
解决

以上我呢提总结之About云VIP群
dual与Kang

没找到任何评论,期待你打破沉寂

关闭

推荐上一条 /2 下一条