CDH集群中,安装的spark

 时间:2025-01-05 10:54:08

1、安装前的准备所需软件:

CDH集群中,安装的spark

2、Parcels 包地址

CDH集群中,安装的spark

3、安装过程1)创建csd目录

CDH集群中,安装的spark

4、2)上传文件SPARK2_ON_YARN-2.1.0.cloudera1.jar 到 /opt/cloudera/csd/下面

5、3)上传文件SPARK2-2.1.0.cloudera1-1.cdh5.7.0.p0.120904-el6.parcel和SPARK2-2.1.0.cloudera1-1.cdh5.7.0.p0.120904-el6.parcel.sha1 到/opt/cloudera/parcel-repo/

6、4)修改所属用户及用户组:

CDH集群中,安装的spark

7、5)将SPARK2-2.1.0.cloudera1-1.cdh5.7.0.p0.120904-el6.parcel.sha1重命名为SPARK2-2.1.0.cloudera1-1.cdh5.7.0.p0.120904-el6.parcel.sha

CDH集群中,安装的spark

8、页面操作1)在cm首页点击Parcel,再点击检查新Parcel

CDH集群中,安装的spark

9、2)点击分配

CDH集群中,安装的spark

10、3)点击激活

CDH集群中,安装的spark

11、4)回到首页点击添加服务

CDH集群中,安装的spark

12、5)点击spark2继续

CDH集群中,安装的spark

13、6)选择一组依赖关系

CDH集群中,安装的spark

14、7)角色分配

CDH集群中,安装的spark

15、8 )部署并启动

CDH集群中,安装的spark

16、9 错误解决如果报错:客户端配置 (id=12) 已使用 1 退出,而预期值为 0因为cm安装spark不会去环境变量去找java,需要将java路径添加到cm配置文件解决方法:

CDH集群中,安装的spark

17、10)命令行查看命令

CDH集群中,安装的spark
  • 使用Excel怎么生成批量删除、新增数据库语句
  • weblogic增加线程
  • DB2的安装方法与步骤
  • Apache Http Server 反向代理配置
  • 表格制作软件FineReport教程:[22]插入删除行
  • 热门搜索
    银耳莲子汤怎么做 怎么快速瘦大腿 工资流水账单怎么打 怎么样才能生儿子 剑圣怎么玩 丰田怎么样 观致汽车怎么样 大众1.4t发动机怎么样 尿蛋白高怎么办 怎么刷黄钻永久免费