clickhouse 基于centos6.9 测试结果
发布于 10 天前 作者 super_sponge 89 次浏览 来自 实战经验

详细测试结果: http://note.youdao.com/noteshare?id=611e86c9290fb11fd6afd73b4a5d9af0&sub=20DA90BC8B774A3C8E25598F1E1FF6A1

测试目的: 明确感知clickhouse的速度 测试总结: 1. 导入速度不理想(估计是导入方法不对,采用cat 加管道进行导入) 2. 测试中对24亿条数据的查询7s完成,速度快

测试环境 作系统版本: centos6.9 主机配置; 主机 CPU型号 内存(G) node1  8  Intel® Xeon® CPU E7- 8837  @ 2.67GHz 128 node2  8  Intel® Xeon® CPU E7- 8837  @ 2.67GHz 64 node3  8  Intel® Xeon® CPU E7- 8837  @ 2.67GHz 64 node4  8  Intel® Xeon® CPU E7- 8837  @ 2.67GHz 64 node5  8  Intel® Xeon® CPU E7- 8837  @ 2.67GHz 32

clickhouse版本: 18.14.15 clickhouse 配置文件: 除了数据文件路径更改,其他采用默认配置

本次测试***上面有其他服务运行,只能作为参考

测试数据结果记录 查询语句请看附录 测试结果: 导入速度 导入270G数据需要50分钟(仅仅记录最大表lineorderd的导入时间) 记录条数 表名称 记录条数 lineorderd 2400012138 customerd 12000000 partd 1800000 supplierd 800000 dwdated 2556 查询语句及执行速度 语句 条数 大小 第一次 第二次 第三次 1 2.40 billion 14.40 GB 7.239 2.239 3.147 2 364.08 million 1.29 GB 1.938 0.662 0.778 3 2.42 billion 19.45 GB 7.025 5.668 5.709 4 2.41 billion 10.18 GB 2.876 3.117 3.512 5 436.08 million 3.25 GB 8.249 8.11 7.051 6 2.43 billion 33.88 GB 26.453 23.9 23.24 结果分析

  1. 对于单表查询第二次和第三次查询明显有提升
  2. 导入时间缓慢
1 回复

是否有更快的导入方式?

回到顶部