最新动态

2

更新OmniRuntime特性。

发布OmniAdvisor参数调优2.0特性。

OmniRuntime特性指南

1

下架图分析算法加速库文档。

特性老旧，后续不再迭代与维护，下架相关文档。

图分析算法 特性指南

1

更新OmniRuntime特性。

• OmniOperator算子加速组件Spark 3.3.1新增Parquet格式支持列式写入。
• OmniOperator算子加速新增支持操作系统CentOS 7.9。
• 新增StateStore加速特性。
• 新增OmniStream Flink Native化。

OmniRuntime特性指南

1

下线《Hive&Spark组件数据生成工具TPC-DS 使用指导》。

因TPCDS_Tools工具闭源，导致数据集生成工具无法获取，故下线《Hive&Spark组件数据生成工具TPC-DS 使用指导》。

-

1

更新&新增OmniRuntime特性。

• OmniOperator算子加速适配Spark 3.4.3、Spark 3.5.2。
• OmniMV物化视图适配Spark 3.4.3。
• 新增OmniScheduler Yarn负载调度算法特性，在Hadoop集群节点间负载不均衡场景，利用Yarn负载调度算法实现集群资源的均衡配置和高效利用。

OmniRuntime 特性指南

1

下线混合部署介绍

FusionInsight平台已支持x86/Arm混合部署，下线技术白皮书和特性清单中的FusionInsight混合部署方案。

鲲鹏BoostKit大数据使能套件 技术白皮书

1

更新OmniRuntime特性。

• OmniOperator算子加速适配Hive引擎，新增支持算子、表达式详情。
• OmniShuffle Shuffle加速内存套件Memory fabric最低可支持配置到1G内存。 ESS/RSS模式支持防呆部署。对ESS（External Shuffle Service）模式下的通信库进行了优化，使用了多线程性能更优的通信库。
• OmniShield机密大数据支持远程证明。
• 新增OmniRuntime 公网地址声明文档。
• 新增OmniRuntime 开源软件声明文档。

OmniRuntime 特性指南

2

Kafka调优新增使能鲲鹏加速库CRC32加速算法

Kafka结合加速库KSAL软件包进行性能优化，使Kafka的生产者吞吐量提升。

Kafka 调优指南（CentOS&openEuler）

1

下线存算分离加速、HBase索引优化特性

因产品特性整体规划策略调整，不再推广应用某些使用量较少的特性，因此下线存算分离加速、HBase索引优化特性。

-

2

新增OmniRuntime OmniShield机密大数据特性。

OmniShield机密大数据基于TEE硬件环境，提供Spark数据、网络、磁盘加解密和应用级远程证明能力，保障数据在存储、传输、计算全生命周期的安全性。

OmniRuntime 特性指南

3

Kafka调优新增使能鲲鹏加速库LZ4压缩算法

通过鲲鹏加速库使LZ4压缩解压缩算法性能提升。

Kafka 调优指南（CentOS&openEuler）

4

新增Doris指令优化 部署&特性指南

Doris指令优化通过使用Neon指令集优化Bitshuffle在Arm架构上运行的逻辑，进一步提升LZ4/ZSTD压缩的效率，实现提升Doris在鲲鹏服务器上的数据写入和查询性能。

Doris指令优化 部署&特性指南

5

新增ClickHouse 移植&部署&调优指南

ClickHouse支持线性扩展，简单方便，具有高可靠性。

ClickHouse 移植&部署&调优指南

1

大数据开源使能文档新增适配openEuler 22.03 LTS

大数据开源使能文档新增适配openEuler 22.03 LTS操作系统，移植部署详情请参见鲲鹏社区文档。

移植指南

1

更新OmniRuntime特性。

• OmniRuntime算子加速支持Hive 3.1.0，性能提升20%。
• OmniRuntime算子加速内存优化支持大宽表查询，在TPC-DS 3TB数据集下性能提升30%。
• OmniShuffle Shuffle加速支持RSS模式，性能相比Celeborn提升10%。

OmniRuntime 特性指南

1

新增鲲鹏BoostKit与openEuler深度集成详情页。

鲲鹏BoostKit加速特性软件包已集成到的openEuler镜像源中，实现开箱即用，极大的简化了安装使用流程，更多信息请在详情页中查阅。

鲲鹏BoostKit与openEuler深度集成详情页

2

新增文档大数据特性与openEuler集成一键安装指南。

新增大数据特性与openEuler集成一键安装、使用、卸载指南。

大数据特性与openEuler集成一键安装指南

1

通用加速特性和HBase加速特性移至应用加速特性。

通用加速特性和HBase加速特性由基础加速特性移至应用加速特性。

通用加速特性指南

HBase 加速特性指南

2

更新OmniRuntime特性。

• OmniOperator支持Spark 3.3.1，性能提升。
• OmniShuffle Shuffle加速支持NEON指令优化，主要针对关键内存读写访问操作流程进行优化。
• OmniAdvisor功能增强，支持Spark App应用，性能提升。

OmniRuntime 特性指南

1

新增OmniRuntime视频帮助页面

新增科普视频《鲲鹏BoostKit大数据OmniRuntime特性大揭秘》，提供OmniRuntime特性介绍，实现全链路加速，提升大数据性价比。

鲲鹏BoostKit大数据OmniRuntime特性大揭秘

2

更新文档

OmniRuntime特性新增OmniAdvisor参数调优、OmniHBaseGSI全局二级索引特性，随23.0.0版本发布。

OmniRuntime 特性指南

3

更新文档

算法库新增适配Spark 3.3.1的算法，随23.0.0版本发布。

机器学习算法 特性指南

图分析算法 特性指南