hive命令执行速度

请问下有谁遇到过安装hive后执行速度慢,案例中执行select * from student 只需要0.6S 我执行需要10S,查看日志。这一块别人只用了0.4S

img

img


问题解决了。 机子死机被迫重启。重启就好了

可能性很多,比如当前服务器资源紧张,不管执行什么命令都很慢,或者是这张表字段太多,数据量太大,直接select *容易慢,同时也没有加limit限制,直接获取所有数据,也是会慢的,针对上面三种情况,分别有以下应对方式:
1.换个时间在执行,避开资源使用的高峰期
2.只选择需要的列,而不是select *
3.添加一个limit 10,进行查询数量限制

你想要更快可以换执行引擎 不跑mapreduce跑hive on spark

调整下参数,MR APPLICATION MASTER大小,加大内存就可以了

问题中的环境是:单台2T,6台总共12T。目前测试了单台50G,3台。单台400G,3台。都没有遇到这种情况

数据位置有区别吗