获取软件
机器学习算法加速库软件包的获取方式如表1所示。
软件包 |
描述 |
获取方式 |
---|---|---|
BoostKit-ml_3.0.0.zip |
压缩包内含算法包boostkit-ml-kernel-2.12-3.0.0-spark3.3.1-aarch64.jar |
|
boostkit-ml-acc_2.12-3.0.0-spark3.3.1.jar |
运行算法需要的算法适配包,其中boostkit-ml-kernel-client_2.12-3.0.0-spark3.3.1.jar包是应用开发时的依赖库,不需要部署在Spark集群,仅在开发阶段编译时使用。 |
编译获得,详情请参见编译代码。 |
boostkit-ml-core_2.12-3.0.0-spark3.3.1.jar |
||
boostkit-ml-kernel-client_2.12-3.0.0-spark3.3.1.jar |
软件安装包完整性校验
从鲲鹏社区获取的软件安装包,下载软件安装包后需要校验软件安装包,确保与网站上的原始软件安装包一致。
校验方法:
- 获取软件数字证书和软件安装包。
- 在如下链接中获取校验工具和校验方法:
- 参见上述链接下载的《OpenPGP签名验证指南》进行软件安装包完整性检查。
获取机器学习算法加速库的核心JAR包
机器学习算法加速库核心JAR包的压缩包BoostKit-ml_3.0.0.zip可在support上获得,获取途径可见获取软件,解压得到boostkit-ml-kernel-2.12-3.0.0-spark3.3.1-aarch64.jar,并放在“/opt/”目录下。
- 在客户端节点上,以大数据组件的授权用户登录服务器,将机器学习算法加速库核心JAR包的压缩包放置“/opt/”目录下,解压压缩包BoostKit-ml_3.0.0.zip。
1 2
cd /opt/ unzip BoostKit-ml_3.0.0.zip
- 查询机器学习算法加速库核心JAR包版本。
1
cat version.txt
- 创建“lib”目录。
1
mkdir -p /home/test/boostkit/lib
- 复制boostkit-ml-kernel-2.12-3.0.0-spark3.3.1-aarch64.jar并放入“/home/test/boostkit/lib/”目录下
1 2
cd BoostKit-ml_3.0.0 cp boostkit-ml-kernel-2.12-3.0.0-spark3.3.1-aarch64.jar /home/test/boostkit/lib
父主题: Spark鲲鹏集群部署