【资料月刊】鲲鹏开发者资料2024年9月刊
收藏回复举报
【资料月刊】鲲鹏开发者资料2024年9月刊
发表于2024-10-12 16:19:36
0 查看

汇总本月的鲲鹏开发者一指禅、常见问题、BoostKit文档、DevKit版本等内容更新。

鲲鹏开发一指禅内容更新


随鲲鹏BoostKit 24.0.RC2版本、鲲鹏DevKit 24.0.RC2版本发布内容更新《鲲鹏开发者一指禅》对应内容。

点击~链接~查看详情。

鲲鹏常见问题上新


  • 新增鲲鹏BoostKit加速特性2个常见问题。
  • 新增鲲鹏硬件8个常见问题。
  • 新增其他技术 > 软件相关1个常见问题。

点击~链接~获取详情。

鲲鹏BoostKit文档更新


鲲鹏BoostKit大数据

(1)发布OmniRuntime1.4.0版本

  • OmniOperator算子加速特性1.6.0版本发布,算子/表达式性能增强,同等算力下性能领先Velox 20%
  • OmniShuffle Shuffle加速特性1.6.0版本发布,通信组件优化,性能对比Celeborn提升10%
  • OmniShield大数据机密计算1.0.0版本发布,提供数据源加解密的功能。

点击~链接~获取详情。

(2)优化Doris向量化指令

Doris的BitShuffle新增NEON向量化指令优化,性能提升15%。

点击~链接~获取详情。

(3)发布Kafka LZ4加速特性

Kafka支持使能鲲鹏LZ4加速库,性能提升3%。

点击~链接~获取详情。

(4)新增ClickHouse移植&部署&调优指南

ClickHouse支持线性扩展,简单方便,具有高可靠性。新增ClickHouse 移植&部署&调优指南。

点击~链接~获取详情。

(5)下线大数据存算分离加速、HBase索引优化特性

因产品特性整体规划策略调整,不再推广应用某些使用量较少的特性,因此下线存算分离加速、HBase索引优化特性。

鲲鹏BoostKit加速库

(1)优化压缩库LZ4

加速库LZ4压缩库优化1.0.0版本,支持大数据Kafka性能加速。

点击~链接~获取详情。

(2)新增毕昇JDK加速库

毕昇JDK加速库适配鲲鹏处理器,目前提供堆转储增强和JBooster特性。

点击~链接~获取详情。

鲲鹏BoostKit分布式存储

(1)新增RDMA网络加速

Ceph RDMA网络加速特性首发,通过在Ceph中适配UCX RDMA网络框架,实现Ceph全闪场景支持RDMA能力,提升Ceph全闪性能。

点击~链接~获取详情。

(2)新增BoostIO缓存加速

首发BoostIO特性,利用计算侧的内存和磁盘资源构建分布式多级缓存,写缓存提升业务写性能,提高数据可靠性;读缓存提高读缓存命中率,从而提升业务读性能。

点击~链接~获取详情。

(3)新增KAE使能SPDK版本发布

SPDK的BDEV设备作为虚拟设备层对接底层多种设备类型(虚拟设备、物理设备),通过在BDEV设备中使能KAE压缩和加解密能够支持所有SPDK设备。

点击~链接~获取详情。

(4)优化存储算法加速库

KSAL存储算法加速库EC算法补充新增支持K+1、K+2、K+3、K+4(2≤K≤25)、28+3配比、条带为64Byte和4096Byte粒度的编解码。

​​​​​​​点击~链接~获取详情。

(5)优化存储维护工具库

KSML存储维护工具库新增SSD故障预测&慢盘检测能力。

点击~链接~获取详情。

鲲鹏BoostKit数据库

(1)优化Gazelle网络

Gazelle支持Docker、KVM场景下Redis和MySQL数据面和管理面网卡归一功能。

点击~链接~获取详情。

(2)优化鲲鹏GCC CFGO反馈

反馈编译优化泛化性,适配TP/AP场景,8U32G场景sysbench综合性能(最优性能)提升30%,TPC-C/TPC-H性能(最优性能)不下降。

点击~链接~获取详情。

(3)优化MySQL可插拔线程池兼容性

支持一份patch适配MySQL 8.0.25、8.0.30、8.0.35三个版本,提升易用性,线程池优化效果不受影响。

点击~链接~获取详情。

(4)更新数据库开源使能文档Redis调优指南

新增调优手段:使用libc内存分配器优化和使用GCC PGO优化。

点击~链接~获取详情。

(5)新增开源使能文档MySQL迁移最佳实践

新增MySQL数据库的数据迁移和同步方案的最佳实践。

点击~链接~获取详情。

(6)更新开源使能文档MySQL调优指南

新增调优手段:调整内核pagesize为64KB和编译调优。

点击~链接~获取详情。

(7)新增开源使能文档PostgreSQL迁移最佳实践

新增PostgreSQL数据库的数据迁移和同步方案的最佳实践。

点击~链接~获取详情。

(8)更新开源使能文档OceanBase部署指南和OceanBase调优指南

  • OceanBase 部署指南》新增OceanBase 3.1.5的部署操作指导。
  • OceanBase 调优指南》新增调优手段:调整内核pagesize64KB和编译调优。

点击~链接~获取详情。

鲲鹏DevKit版本24.0.RC3候选版本发布


应用迁移工具

提供自动分析x86架构迁移源的软件成分信息,将选择的操作系统、数据库、中间件、应用自动部署和迁移到鲲鹏服务器的能力。

亲和分析工具

  • 字节对齐、矩阵化、构建亲和后端校验命令长度放开到1024。
  • 向量化检查工具适配增加鲲鹏绑定功能,仅支持鲲鹏920平台。

应用开发工具

  • 提供数据IO SDK。
  • 编译调试工具。
  • 支持部署 BiSheng Compiler 4.0.0GCC for openEuler 2.3.7BiSheng JDK 17.0.11。

系统性能分析工具

  • AI调优支持海量数据库自动调优,支持版本G10。
  • AI调优支持rocksdb数据库自动调优,rocksdb支持版本7.0.47.1.17.1.27.2.07.2.27.3.17.4.37.4.47.4.57.5.37.6.07.7.27.7.37.7.87.8.37.9.2。
  • AI调优增加调优提升效果趋势图。
  • 左树调优助手和系统性能分析目录结构调整。
  • 实现agent节点用户隔离。
  • 访存分析去除现有的伪共享分析功能。

Java 性能分析工具

Java性能分析左树拆分

系统诊断工具

  • 任务加载进度条补充显示具体进度,包括提示文字和百分比。
  • 新增系统诊断命令行工具,支持内存使用、内存越界检查、JAVA源码非国密算法使用检测和敏感信息扫描。

鲲鹏DevKit毕昇JDK版本发布


提供OpenJDK 8基本功能,完成毕昇JDK 8u422基线升级,修复若干稳定性问题。

点击~链接~查看详情。

鲲鹏DevKit毕昇编译器4.1.0版本发布


此版本在 BiSheng Compiler 4.0.0 版本的基础上,对性能和功能都做了一定增强。性能方面新增数据预取增强等优化,可有效提升应用性能。 功能方面新增问题场景告警增强等。同时修复了若干问题。

点击~链接~查看详情。

本帖最后由 匿名用户2024/10/18 11:46:06 编辑

我要发帖子