集群软件配置
使用到的相关软件版本如表1所示。
软件环境 |
版本 |
管理节点 Server |
计算节点 Agent |
存储节点 HDFS/Ceph |
|---|---|---|---|---|
OS |
openEuler 20.03 LTS SP1 |
✓ |
✓ |
✓ |
JDK |
毕昇JDK 8u262 |
✓ |
✓ |
✓ |
ZooKeeper |
3.6.2 |
- |
✓ |
- |
Hadoop |
3.2.0 |
✓ |
- |
✓ |
Spark |
3.0.0 |
✓ |
✓ |
- |
Hive |
3.1.0 |
✓ |
✓ |
- |
Ceph |
14.2.8 |
- |
- |
✓ |
Python |
Python3 |
- |
✓ |
✓ |
- 用户可根据需要安装对应的大数据引擎（Spark）。
- 存储服务可选择HDFS或者Ceph，若存储部署模式为HDFS，则建议在管理节点上安装Kerberos服务，确保集群安全。
父主题： 集群规划