首页 > 代码库 > Hive一些参数设置
Hive一些参数设置
在使用union all的时候，系统资源足够的情况下，为了加快hive处理速度，可以设置如下参数实现并发执行
set mapred.job.priority=VERY_HIGH;set hive.exec.parallel=true;
设置map reduce个数
-- 设置map capacityset mapred.job.map.capacity=2000;set mapred.job.reduce.capacity=2000;
-- 设置每个reduce的大小set hive.exec.reducers.bytes.per.reducer=500000000; -- 直接设置个数set mapred.reduce.tasks = 15;
设置任务名称
-- 设置名称set mapred.job.name=my_job_{DATE};
声明：以上内容来自用户投稿及互联网公开渠道收集整理发布，本网站不拥有所有权，未作人工编辑处理，也不承担相关法律责任，若内容有误或涉及侵权可进行投诉： 投诉/举报 工作人员会在5个工作日内联系你，一经查实，本站将立刻删除涉嫌侵权内容。