首页 » NoSQL » HBase+ZooKeeper+Hadoop2.6.0的ResourceManager HA集群高可用配置

HBase+ZooKeeper+Hadoop2.6.0的ResourceManager HA集群高可用配置

原文 http://blog.csdn.net/qq_35956539/article/details/79045449

2018-01-13 02:01:45阅读(243)


问题导读:
        0、了解常规JDK安装以及Linux系统配置
        1、了解集群规划以及集群场景
        2、熟悉HBase的集群搭建
        3、熟悉ZooKeeper集群搭建
        4、熟悉HAdoop2.6.0版本HA集群搭建
        5、验证HBase、ZooKeeper、Hadoop等集群运行情况
HBase+ZooKeeper+Hadoop2.6.0的ResourceManager HA集群高可用配置


参考 :Hadoop2.4的ResourceManager HA高可用配置
hadoop2.0已经发布了稳定版本了,增加了很多特性,比如HDFS HA、YARN等。最新的hadoop-2.6.0又增加了YARN HA


注意:apache提供的hadoop-2.6.0的安装包是在32位操作系统编译的,因为hadoop依赖一些C++的本地库,
所以如果在64位的操作上安装hadoop-2.6.0就需要重新在64操作系统上重新编译
(64位系统hadoop2.6.0编译前准备工作,请参考:Hadoop-2.6.0在Centos6.5 64位系统编译前准备工作 )



1.修改Linux主机名
2.修改IP
3.修改主机名和IP的映射关系
######注意######如果你们公司是租用的服务器或是使用的云主机(如华为用主机、阿里云主机等)
/etc/hosts里面要配置的是内网IP地址和主机名的映射关系
4.关闭防火墙
5.ssh免登陆
6.安装JDK,配置环境变量等


集群规划:
主机名        IP        安装的软件        运行的进程
Master        192.168.1.201        jdk、hadoop        NameNode、DFSZKFailoverController(zkfc)
Slave1        192.168.1.202        jdk、hadoop        NameNode、DFSZKFailoverController(zkfc)
Slave2        192.168.1.203        jdk、hadoop        ResourceManager
Slave3        192.168.1.204        jdk、hadoop        ResourceManager
Slave4        192.168.1.205        jdk、hadoop、zookeeper        DataNode、NodeManager、JournalNode、QuorumPeerMain
Slave5        192.168.1.206        jdk、hadoop、zookeeper        DataNode、NodeManager、JournalNode、QuorumPeerMain
Slave6        192.168.1.207        jdk、hadoop、zookeeper        DataNode、NodeManager、JournalNode、QuorumPeerMain

最新发布

CentOS专题

关于本站

5ibc.net旗下博客站精品博文小部分原创、大部分从互联网收集整理。尊重作者版权、传播精品博文,让更多编程爱好者知晓!

小提示

按 Ctrl+D 键,
把本文加入收藏夹