各位技术同仁好！我们团队基于鲲鹏 920 服务器 + openEuler 24.03，部署 ClickHouse 24.3 集群，支撑工业物联网时序数据存储（日均写入超 10 亿条，高基数维度标签超 10 万个）。已启用 MergeTree 引擎与分区表优化，但仍遇核心瓶颈：高基数维度 GROUP BY 查询时延超 10 秒、批量写入时磁盘 IO 利用率达 95% 导致写入阻塞、副本同步时 ZooKeeper 会话频繁超时。
具体疑问：1. 如何结合鲲鹏 SVE 指令集与向量化执行引擎，优化 ClickHouse 高基数维度的聚合计算性能？是否需要修改表引擎参数或启用特定优化开关？2. 针对批量写入的 IO 瓶颈，如何通过鲲鹏 KAE 硬件加速与文件系统优化，提升数据写入吞吐并降低 IO 利用率？3. 如何优化 ClickHouse 副本同步的 ZooKeeper 交互策略，结合鲲鹏 NUMA 架构减少跨节点通信损耗？
点赞
收藏
回复
分享
举报
已解决
各位技术同仁好！我们团队基于鲲鹏 920 服务器 + openEuler 24.03，部署 ClickHouse 24.3 集群，支撑工业物联网时序数据存储（日均写入超 10 亿条，高基数维度标签超 10 万个）。已启用 MergeTree 引擎与分区表优化，但仍遇核心瓶颈：高基数维度 GROUP BY 查询时延超 10 秒、批量写入时磁盘 IO 利用率达 95% 导致写入阻塞、副本同步时 ZooKeeper 会话频繁超时。
具体疑问：1. 如何结合鲲鹏 SVE 指令集与向量化执行引擎，优化 ClickHouse 高基数维度的聚合计算性能？是否需要修改表引擎参数或启用特定优化开关？2. 针对批量写入的 IO 瓶颈，如何通过鲲鹏 KAE 硬件加速与文件系统优化，提升数据写入吞吐并降低 IO 利用率？3. 如何优化 ClickHouse 副本同步的 ZooKeeper 交互策略，结合鲲鹏 NUMA 架构减少跨节点通信损耗？