Cloudera CDH新增节点到集群参考步骤
2016-09-20 17:20
204 查看
1、新加机器环境配置
首先得在新的主机环境中安装JDK,关闭防火墙、修改selinux、NTP时钟与主机同步、修改hosts、与主机配置ssh免密码登录、保证安装好了perl和python。
2、上传cloudera-manager文件到/opt目录,修改agent配置文件:
vi /opt/cm-5.7.0/etc/cloudera-scm-agent/config.ini
server_host = Master
vim etc/cloudera-scm-agent/config.ini 设置server_host为scm机器
最好从已经运行的slave机器上scp对应的文件夹,不用修改server_host了,但是需要把对应的[/opt/cm-5.7.0/lib/cloudera-scm-agent]下的文件全部删除;同时删除[/opt/cm-5.7.0/log/cloudera-scm-agent]目录下的所有内容。
3、在代理节点添加scm管理用户
useradd --system --home=/opt/cm-5.7.0/run/cloudera-scm-server/ --no-create-home --shell=/bin/false --comment "Cloudera SCM User" cloudera-scm
home为scm安装路径
4、启动代理服务
/opt/cm-5.0.0/etc/init.d/cloudera-scm-agent start
如启动错误,请查看scm安装路径下log文件夹下cloudera-scm-agent/cloudera-scm-agent.out
5、在主机节点CM管理页面,进行主机添加,服务添加
这时打开scm web管理页面,点击最上面导航 主机 选项即可看到新增加的节点
点击上面的向集群添加新主机即可添加,共5步
5.1、由于已经将cm agent拷贝到各机器并启动了,此处不是通过IP或hostname查找的(即使查出来也无法选择),而是已存在的主机里面选择,选择新加的agent,点继续
5.2、出现下载parcel的界面
此处多多注意不同linux版本要不同的parcel包
5.3、检查主机正确性
5.4、选择主机模板-此处可选择要安装的组件
这一步一定要选择,否则要重新分配角色。
5.5、向集群中添加主机
6、其他调优相关,参照集群首次安装时的情况,如: echo 0> /proc/sys/vm/swappiness
首先得在新的主机环境中安装JDK,关闭防火墙、修改selinux、NTP时钟与主机同步、修改hosts、与主机配置ssh免密码登录、保证安装好了perl和python。
2、上传cloudera-manager文件到/opt目录,修改agent配置文件:
vi /opt/cm-5.7.0/etc/cloudera-scm-agent/config.ini
server_host = Master
vim etc/cloudera-scm-agent/config.ini 设置server_host为scm机器
最好从已经运行的slave机器上scp对应的文件夹,不用修改server_host了,但是需要把对应的[/opt/cm-5.7.0/lib/cloudera-scm-agent]下的文件全部删除;同时删除[/opt/cm-5.7.0/log/cloudera-scm-agent]目录下的所有内容。
3、在代理节点添加scm管理用户
useradd --system --home=/opt/cm-5.7.0/run/cloudera-scm-server/ --no-create-home --shell=/bin/false --comment "Cloudera SCM User" cloudera-scm
home为scm安装路径
4、启动代理服务
/opt/cm-5.0.0/etc/init.d/cloudera-scm-agent start
如启动错误,请查看scm安装路径下log文件夹下cloudera-scm-agent/cloudera-scm-agent.out
5、在主机节点CM管理页面,进行主机添加,服务添加
这时打开scm web管理页面,点击最上面导航 主机 选项即可看到新增加的节点
点击上面的向集群添加新主机即可添加,共5步
5.1、由于已经将cm agent拷贝到各机器并启动了,此处不是通过IP或hostname查找的(即使查出来也无法选择),而是已存在的主机里面选择,选择新加的agent,点继续
5.2、出现下载parcel的界面
此处多多注意不同linux版本要不同的parcel包
5.3、检查主机正确性
5.4、选择主机模板-此处可选择要安装的组件
这一步一定要选择,否则要重新分配角色。
5.5、向集群中添加主机
6、其他调优相关,参照集群首次安装时的情况,如: echo 0> /proc/sys/vm/swappiness
相关文章推荐
- Cloudera CDH新增节点到集群参考步骤
- Cloudera CDH增加节点到集群
- Oozie的详细启动步骤(CDH版本的3节点集群)
- (八)Redis集群常用命令、集群节点新增删除
- (八)Redis集群常用命令、集群节点新增删除
- CDH 集群环境Master节点IP变更
- Cloudera 5.7集群部署(二)--CM、CDH安装
- 安装Cloudera Manager 5和,CDH-5.7.1的详细步骤
- (八)Redis集群常用命令、集群节点新增删除
- (八)Redis集群常用命令、集群节点新增删除
- Cloudera 5.7集群部署(二)--CM、CDH安装
- (八)Redis集群常用命令、集群节点新增删除
- (八)Redis集群常用命令、集群节点新增删除
- redis集群之新增节点
- Cloudera 5.7集群部署(二)--CM、CDH安装
- redis集群新增节点并设置集群密码
- Cloudera CDH 5集群搭建(yum 方式)
- Zookeeper的多节点集群详细启动步骤(3或5节点)
- (八)Redis集群常用命令、集群节点新增删除
- 离线部署 Cloudera Manager 5 和 CDH 5.12.1 及使用 CDH 部署 Hadoop 集群服务