偶小梦
发布于

分区特别多的表insert时过载报错

➢ 解答
HDFS 在加载时打开过多文件过载,INSERT INTO XXX SELECT * FROM YYY WHERE partition-condition 过滤掉部分 partition 数据,也就是说一批一批 partition 加载,防止 hdfs 在加载时打开过多文件过载。

评论
    test