云帆大数据培训lesson11笔记

发布时间:2016-06-30 14:45:56   来源:文档文库   
字号:

启动集群

cent01

start-dfs.sh

mr-jobhistory-daemon.sh start historyserver

cent02

start-yarn.sh

cent03

yarn-daemon.sh start proxyserver

也就是说,要在启动dfs以后,等待一会,再启动yarn

Proxyserver部署到了130,我们的是cent03

因为运行了climinicuster导致系统的namespace不对了,需要重新格式化

1. 删除三台机器上的data目录,重新建立目录结构

rm -rf data

mkdir -p data/tmp

mkdir -p data/dfs/nn/edits

mkdir -p data/dfs/nn/name

mkdir -p data/dfs/snn/edits

mkdir -p data/dfs/snn/name

2. 格式化namenode

hdfs namenode format

Hdfs-site.xml, 卸载和增加节点

dfs.hosts

dfs.hosts.exclude

cent01上面生成dfs-hosts.exclude文件

cent03加入到该文件中

hdfs dfsadmin -refreshNodes

yarn.resourcemanager.nodes.include-path

yarn.resourcemanager.nodes.exclude-path

resourcemanagernodecent02)上面修改yarn-site.xml文件

yarn.resourcemanager.nodes.exclude-path

/home/grid/hadoop/etc/hadoop/rm-hosts.exclude

增加exclude文件

刷新node


还需要在NameNodeserver上刷新Node

hdfs dfsadmin refreshNodes

需要在resourceManagerserver上修改yarn-site xml文件,去掉exclude内容

cent03上重启nodemanager之后

需要在resourceManagerserver上刷新nodes

yarn rmadmin refreshNodes

ZKFC: ZooKeeper FailoverController

本文来源:https://www.2haoxitong.net/k/doc/ae682eed76c66137ef061978.html

《云帆大数据培训lesson11笔记.doc》
将本文的Word文档下载到电脑,方便收藏和打印
推荐度:
点击下载文档

文档为doc格式