软件架构

OmniData算子下推特性支持Hive/Spark组件下推Filter、Aggregation、Limit算子到存储节点CPU,支持对ORC/Parquet/TXT等主流数据类型的访问,实现近数据计算,减少无效数据在网络上的传输,提升大数据计算性能。OmniData算子下推特性,实现对接同构加速框架HAF和分布式存储系统Ceph/HDFS。OmniData算子下推特性主要包含四个部分内容,如图1所示。

图1 OmniData算子下推特性软件架构