在SparkExtension上使能
- 简介
在Spark引擎中应用OmniOperator算子加速特性时,可以选择在SparkExtension或Gluten中使能该特性。根据具体场景和需求,选择合适的使能方式,可最大化加速效果。 - 算子和表达式支持情况
介绍Spark引擎在SparkExtension上使用OmniOperator算子加速特性时,该特性对SQL算子及表达式(含数据类型)的支持范围、限制条件与使用规则。 - 安装SparkExtension
OmniOperator算子加速特性支持Spark引擎,需在管理节点和所有计算节点安装Spark引擎,并配置openEuler操作系统的SparkExtension依赖。 - 配置Spark配置文件
安装完Spark引擎后,还需在OmniOperator算子加速的配置文件中添加相应的Spark参数,才能正常执行业务。 - 执行Spark引擎业务
验证SparkExtension的生效情况,并通过测试示例展示其带来的性能优化效果,确保能够顺利执行Spark引擎业务。
父主题: 在Spark引擎上的应用