第十章 Hive调优 【任务并行设置】

1. 任务并行设置
    说明 :
        hive会将sql 转化成DAG,阶段类型有 fetch阶段、MapReduce阶段、merge阶段、limit阶段
        默认情况下,hive一次只会执行一个阶段,但某些阶段可以并行执行,完全相互依赖

    参数设置:

        -- 开启任务并行执行
        set hive.exec.parallel=true;
        -- 设置 同一个SQL,运行的最大并行度(默认为8)
        set hive.exec.parallel.thread.number=16;