hive跑到最后卡在一个reduce上过不去

不知道什么原因

估计是数据倾斜问题。。那个reduce上堆了很多数据在跑

如果是内存不足挂掉了，有个不是方法的方法
1.增加reduce的缓存
2.调整内存数据吐到硬盘上的比例

我也出现过这种问题，语句编写的不合理，发生数据倾斜了