xiaokissoo
发布于

提升数据加载的速度

➢ 分析&&解答
在 POC 测试中比较数据加载的速度时,可采用如下一些方式提升性能:

  1. 关闭自动 analyze,set gp_autostats_mode = 'NONE';
  2. 建表时不使用压缩。
  3. 更改表格式,可从 orc 表改为 row 表。
  4. set optimizer = on;该项需根据实际测试情况确认是否开启。
  5. 将文件分割成跟节点数量一致的多文件,并在每个节点启动 gpfdist 服务进行并行加载。提高并行度参数:alter vcluster vc_default with(max_nvseg_perquery_perseg=’32’)。实际并行度根据节点数据酌情增加。
评论
    test