Hive：使用多插入查询：失败：SemanticException不应该发生

Question

我使用多插入查询来优化目的，它肯定会帮助我很多，但是每天运行，我可以找到3到4个id 10万）花费太多时间在减速机上。要解决这个问题我已经skewjoin优化特性实现的，但它抛出里面我是用

set hive.exec.compress.output=true; 
set mapreduce.output.fileoutputformat.compress=true; 
set mapreduce.output.fileoutputformat.compress.codec=org.apache.hadoop.io.compress.SnappyCodec; 
set mapreduce.output.fileoutputformat.compress.type=BLOCK; 
SET hive.optimize.skewjoin=true; 
set hive.exec.compress.intermediate=true; 
set hive.intermediate.compression.codec=org.apache.hadoop.io.compress.SnappyCodec; 
set hive.intermediate.compression.type=BLOCK; 
set hive.optimize.skewjoin=true; 
set hive.skewjoin.key=100000; 
set hive.skewjoin.mapjoin.map.tasks=10000; 
set hive.skewjoin.mapjoin.min.split=33554432; 

请建议我如何能优化这个偏斜数据

"FAILED: SemanticException Should not happened" 

属性。（每个新运行ID的会有所不同）

Answer 1

set hive.optimize.skewjoin=true; ---> set hive.optimize.skewjoin=false;