提升数据加载的速度
➢ 分析&&解答
在 POC 测试中比较数据加载的速度时,可采用如下一些方式提升性能:
- 关闭自动 analyze,set gp_autostats_mode = 'NONE';
- 建表时不使用压缩。
- 更改表格式,可从 orc 表改为 row 表。
- set optimizer = on;该项需根据实际测试情况确认是否开启。
- 将文件分割成跟节点数量一致的多文件,并在每个节点启动 gpfdist 服务进行并行加载。提高并行度参数:alter vcluster vc_default with(max_nvseg_perquery_perseg=’32’)。实际并行度根据节点数据酌情增加。