OmniOperator算子加速、OmniMV物化视图、OmniShuffle Shuffle加速、OmniAdvisor参数调优和OmniHBaseGSI全局二级索引组网规划
建议采用存算一体组网,即存储节点和计算节点共用,充分发挥OmniRuntime子特性在大数据场景的计算加速效果。如果OmniData算子下推和OmniOperator算子加速两个特性叠加使用,则建议采用存算分离组网进行规划。如果OmniShuffle Shuffle加速和OmniOperator算子加速特性叠加使用,则建议参考本节组网要求进行规划。
OmniOperator算子加速、OmniMV物化视图、OmniShuffle Shuffle加速、OmniAdvisor参数调优和OmniHBaseGSI全局二级索引组网规划的环境由4台服务器组成,使用存算一体的组网,分别是管理节点(1台)、计算节点(3台)。以存储节点为HDFS进行举例说明,其中:
- 管理节点为server1,用于管理任务。
- 计算节点为agent1、agent2和agent3,用于运行OmniOperator算子加速、OmniMV物化视图和OmniShuffle Shuffle加速查询引擎服务以及存储数据集。
一台服务器可以同时充当管理节点、计算节点(如果是单机安装模式,后续文章中提到的在管理节点/计算节点上执行的操作,均需要在一个节点上执行),组网规划如图1所示。
父主题: 组网规划