汇总本月的鲲鹏开发者一指禅、常见问题、BoostKit文档、DevKit版本等内容更新。
鲲鹏开发一指禅内容更新
随鲲鹏BoostKit 24.0.RC2版本、鲲鹏DevKit 24.0.RC2版本发布内容更新《鲲鹏开发者一指禅》对应内容。
点击~链接~查看详情。
鲲鹏常见问题上新
- 新增鲲鹏BoostKit加速特性2个常见问题。
- 新增鲲鹏硬件8个常见问题。
- 新增其他技术 > 软件相关1个常见问题。
点击~链接~获取详情。
鲲鹏BoostKit文档更新
鲲鹏BoostKit大数据
(1)发布OmniRuntime1.4.0版本
- OmniOperator算子加速特性1.6.0版本发布,算子/表达式性能增强,同等算力下性能领先Velox 20%。
- OmniShuffle Shuffle加速特性1.6.0版本发布,通信组件优化,性能对比Celeborn提升10%。
- OmniShield大数据机密计算1.0.0版本发布,提供数据源加解密的功能。
点击~链接~获取详情。
(2)优化Doris向量化指令
Doris的BitShuffle新增NEON向量化指令优化,性能提升15%。
点击~链接~获取详情。
(3)发布Kafka LZ4加速特性
Kafka支持使能鲲鹏LZ4加速库,性能提升3%。
点击~链接~获取详情。
(4)新增ClickHouse移植&部署&调优指南
ClickHouse支持线性扩展,简单方便,具有高可靠性。新增ClickHouse 移植&部署&调优指南。
点击~链接~获取详情。
(5)下线大数据存算分离加速、HBase索引优化特性
因产品特性整体规划策略调整,不再推广应用某些使用量较少的特性,因此下线存算分离加速、HBase索引优化特性。
鲲鹏BoostKit加速库
(1)优化压缩库LZ4
加速库LZ4压缩库优化1.0.0版本,支持大数据Kafka性能加速。
点击~链接~获取详情。
(2)新增毕昇JDK加速库
毕昇JDK加速库适配鲲鹏处理器,目前提供堆转储增强和JBooster特性。
点击~链接~获取详情。
鲲鹏BoostKit分布式存储
(1)新增RDMA网络加速
Ceph RDMA网络加速特性首发,通过在Ceph中适配UCX RDMA网络框架,实现Ceph全闪场景支持RDMA能力,提升Ceph全闪性能。
点击~链接~获取详情。
(2)新增BoostIO缓存加速
首发BoostIO特性,利用计算侧的内存和磁盘资源构建分布式多级缓存,写缓存提升业务写性能,提高数据可靠性;读缓存提高读缓存命中率,从而提升业务读性能。
点击~链接~获取详情。
(3)新增KAE使能SPDK版本发布
SPDK的BDEV设备作为虚拟设备层对接底层多种设备类型(虚拟设备、物理设备),通过在BDEV设备中使能KAE压缩和加解密能够支持所有SPDK设备。
点击~链接~获取详情。
(4)优化存储算法加速库
KSAL存储算法加速库EC算法补充新增支持K+1、K+2、K+3、K+4(2≤K≤25)、28+3配比、条带为64Byte和4096Byte粒度的编解码。
点击~链接~获取详情。
(5)优化存储维护工具库
KSML存储维护工具库新增SSD故障预测&慢盘检测能力。
点击~链接~获取详情。
鲲鹏BoostKit数据库
(1)优化Gazelle网络
Gazelle支持Docker、KVM场景下Redis和MySQL数据面和管理面网卡归一功能。
点击~链接~获取详情。
(2)优化鲲鹏GCC CFGO反馈
反馈编译优化泛化性,适配TP/AP场景,8U32G场景sysbench综合性能(最优性能)提升30%,TPC-C/TPC-H性能(最优性能)不下降。
点击~链接~获取详情。
(3)优化MySQL可插拔线程池兼容性
支持一份patch适配MySQL 8.0.25、8.0.30、8.0.35三个版本,提升易用性,线程池优化效果不受影响。
点击~链接~获取详情。
(4)更新数据库开源使能文档Redis调优指南
新增调优手段:使用libc内存分配器优化和使用GCC PGO优化。
点击~链接~获取详情。
(5)新增开源使能文档MySQL迁移最佳实践
新增MySQL数据库的数据迁移和同步方案的最佳实践。
点击~链接~获取详情。
(6)更新开源使能文档MySQL调优指南
新增调优手段:调整内核pagesize为64KB和编译调优。
点击~链接~获取详情。
(7)新增开源使能文档PostgreSQL迁移最佳实践
新增PostgreSQL数据库的数据迁移和同步方案的最佳实践。
点击~链接~获取详情。
(8)更新开源使能文档OceanBase部署指南和OceanBase调优指南
- 《OceanBase 部署指南》新增OceanBase 3.1.5的部署操作指导。
- 《OceanBase 调优指南》新增调优手段:调整内核pagesize为64KB和编译调优。
点击~链接~获取详情。
鲲鹏DevKit版本24.0.RC3候选版本发布
应用迁移工具
提供自动分析x86架构迁移源的软件成分信息,将选择的操作系统、数据库、中间件、应用自动部署和迁移到鲲鹏服务器的能力。
亲和分析工具
- 字节对齐、矩阵化、构建亲和后端校验命令长度放开到1024。
- 向量化检查工具适配增加鲲鹏绑定功能,仅支持鲲鹏920平台。
应用开发工具
- 提供数据IO SDK。
- 编译调试工具。
- 支持部署 BiSheng Compiler 4.0.0、GCC for openEuler 2.3.7、BiSheng JDK 17.0.11。
系统性能分析工具
- AI调优支持海量数据库自动调优,支持版本G10。
- AI调优支持rocksdb数据库自动调优,rocksdb支持版本7.0.4、7.1.1、7.1.2、7.2.0、7.2.2、7.3.1、7.4.3、7.4.4、7.4.5、7.5.3、7.6.0、7.7.2、7.7.3、7.7.8、7.8.3、7.9.2。
- AI调优增加调优提升效果趋势图。
- 左树调优助手和系统性能分析目录结构调整。
- 实现agent节点用户隔离。
- 访存分析去除现有的伪共享分析功能。
Java 性能分析工具
Java性能分析左树拆分
系统诊断工具
- 任务加载进度条补充显示具体进度,包括提示文字和百分比。
- 新增系统诊断命令行工具,支持内存使用、内存越界检查、JAVA源码非国密算法使用检测和敏感信息扫描。
鲲鹏DevKit毕昇JDK版本发布
提供OpenJDK 8基本功能,完成毕昇JDK 8u422基线升级,修复若干稳定性问题。
点击~链接~查看详情。
鲲鹏DevKit毕昇编译器4.1.0版本发布
此版本在 BiSheng Compiler 4.0.0 版本的基础上,对性能和功能都做了一定增强。性能方面新增数据预取增强等优化,可有效提升应用性能。 功能方面新增问题场景告警增强等。同时修复了若干问题。
点击~链接~查看详情。
汇总本月的鲲鹏开发者一指禅、常见问题、BoostKit文档、DevKit版本等内容更新。
鲲鹏开发一指禅内容更新
随鲲鹏BoostKit 24.0.RC2版本、鲲鹏DevKit 24.0.RC2版本发布内容更新《鲲鹏开发者一指禅》对应内容。
点击~链接~查看详情。
鲲鹏常见问题上新
点击~链接~获取详情。
鲲鹏BoostKit文档更新
鲲鹏BoostKit大数据
(1)发布OmniRuntime1.4.0版本
点击~链接~获取详情。
(2)优化Doris向量化指令
Doris的BitShuffle新增NEON向量化指令优化,性能提升15%。
点击~链接~获取详情。
(3)发布Kafka LZ4加速特性
Kafka支持使能鲲鹏LZ4加速库,性能提升3%。
点击~链接~获取详情。
(4)新增ClickHouse移植&部署&调优指南
ClickHouse支持线性扩展,简单方便,具有高可靠性。新增ClickHouse 移植&部署&调优指南。
点击~链接~获取详情。
(5)下线大数据存算分离加速、HBase索引优化特性
因产品特性整体规划策略调整,不再推广应用某些使用量较少的特性,因此下线存算分离加速、HBase索引优化特性。
鲲鹏BoostKit加速库
(1)优化压缩库LZ4
加速库LZ4压缩库优化1.0.0版本,支持大数据Kafka性能加速。
点击~链接~获取详情。
(2)新增毕昇JDK加速库
毕昇JDK加速库适配鲲鹏处理器,目前提供堆转储增强和JBooster特性。
点击~链接~获取详情。
鲲鹏BoostKit分布式存储
(1)新增RDMA网络加速
Ceph RDMA网络加速特性首发,通过在Ceph中适配UCX RDMA网络框架,实现Ceph全闪场景支持RDMA能力,提升Ceph全闪性能。
点击~链接~获取详情。
(2)新增BoostIO缓存加速
首发BoostIO特性,利用计算侧的内存和磁盘资源构建分布式多级缓存,写缓存提升业务写性能,提高数据可靠性;读缓存提高读缓存命中率,从而提升业务读性能。
点击~链接~获取详情。
(3)新增KAE使能SPDK版本发布
SPDK的BDEV设备作为虚拟设备层对接底层多种设备类型(虚拟设备、物理设备),通过在BDEV设备中使能KAE压缩和加解密能够支持所有SPDK设备。
点击~链接~获取详情。
(4)优化存储算法加速库
KSAL存储算法加速库EC算法补充新增支持K+1、K+2、K+3、K+4(2≤K≤25)、28+3配比、条带为64Byte和4096Byte粒度的编解码。
点击~链接~获取详情。
(5)优化存储维护工具库
KSML存储维护工具库新增SSD故障预测&慢盘检测能力。
点击~链接~获取详情。
鲲鹏BoostKit数据库
(1)优化Gazelle网络
Gazelle支持Docker、KVM场景下Redis和MySQL数据面和管理面网卡归一功能。
点击~链接~获取详情。
(2)优化鲲鹏GCC CFGO反馈
反馈编译优化泛化性,适配TP/AP场景,8U32G场景sysbench综合性能(最优性能)提升30%,TPC-C/TPC-H性能(最优性能)不下降。
点击~链接~获取详情。
(3)优化MySQL可插拔线程池兼容性
支持一份patch适配MySQL 8.0.25、8.0.30、8.0.35三个版本,提升易用性,线程池优化效果不受影响。
点击~链接~获取详情。
(4)更新数据库开源使能文档Redis调优指南
新增调优手段:使用libc内存分配器优化和使用GCC PGO优化。
点击~链接~获取详情。
(5)新增开源使能文档MySQL迁移最佳实践
新增MySQL数据库的数据迁移和同步方案的最佳实践。
点击~链接~获取详情。
(6)更新开源使能文档MySQL调优指南
新增调优手段:调整内核pagesize为64KB和编译调优。
点击~链接~获取详情。
(7)新增开源使能文档PostgreSQL迁移最佳实践
新增PostgreSQL数据库的数据迁移和同步方案的最佳实践。
点击~链接~获取详情。
(8)更新开源使能文档OceanBase部署指南和OceanBase调优指南
点击~链接~获取详情。
鲲鹏DevKit版本24.0.RC3候选版本发布
应用迁移工具
提供自动分析x86架构迁移源的软件成分信息,将选择的操作系统、数据库、中间件、应用自动部署和迁移到鲲鹏服务器的能力。
亲和分析工具
应用开发工具
系统性能分析工具
Java 性能分析工具
Java性能分析左树拆分
系统诊断工具
鲲鹏DevKit毕昇JDK版本发布
提供OpenJDK 8基本功能,完成毕昇JDK 8u422基线升级,修复若干稳定性问题。
点击~链接~查看详情。
鲲鹏DevKit毕昇编译器4.1.0版本发布
此版本在 BiSheng Compiler 4.0.0 版本的基础上,对性能和功能都做了一定增强。性能方面新增数据预取增强等优化,可有效提升应用性能。 功能方面新增问题场景告警增强等。同时修复了若干问题。
点击~链接~查看详情。