相关概念
- OmniData算子下推特性:是一种将大数据引擎的算子下推到存储节点或卸载节点的服务,从而实现近数据计算,减少网络带宽占用,提升查询引擎的查询性能。
- OmniOperator算子加速特性:一种采用Native Code(C/C++)实现大数据SQL算子来提高查询性能的特性,通过列式存储和向量化执行技术,同时利用鲲鹏加速库,提升算子的执行效率,从而提升查询引擎的查询性能。
- 同构加速框架:HAF(Homogeneous Acceleration Framework)提供用户友好的编程方式和API,快速、有效、安全地使能用户业务程序指定加速片段卸载推送至卸载节点执行,带来用户预期的卸载优化效果。
- OmniShuffle Shuffle加速特性:是一个大数据引擎Spark的性能加速组件,运行在客户数据中心的大数据集群内,通过内存池统一编址、数据内存语义交换及融合Shuffle等关键特性,减少数据磁盘I/O开销,提高数据分析的时效性和集群资源利用率。
- OmniData算子下推叠加OmniOperator算子加速:通过OmniData算子下推特性优化数据加载流程,同时使用OmniOperator算子加速特性提升算子执行效率,从而提升端到端引擎查询性能。
- OmniShuffle Shuffle加速速叠加OmniOperator算子加速:通过OmniOperator算子加速特性提升算子执行效率,同时使用OmniShuffle Shuffle加速特性优化数据交互过程,实现端到端提升引擎查询性能。