Apache Hadoop开启HA

要在Apache Hadoop上启用高可用性（HA），需要进行以下步骤：

1. 安装和配置ZooKeeper：HA依赖于ZooKeeper来进行协调和领导选举。首先需要安装和配置ZooKeeper集群。确保ZooKeeper集群正常运行并可用。

2. 配置HDFS：在hdfs-site.xml文件中，设置以下属性来启用HA：

dfs.nameservices
mycluster


dfs.ha.namenodes.mycluster
namenode1,namenode2


dfs.namenode.rpc-address.mycluster.namenode1
namenode1:8020


dfs.namenode.rpc-address.mycluster.namenode2
namenode2:8020


dfs.namenode.http-address.mycluster.namenode1
namenode1:50070


dfs.namenode.http-address.mycluster.namenode2
namenode2:50070

请确保将namenode1和namenode2替换为实际的主机名或IP地址。

3. 配置HDFS故障转移：在hdfs-site.xml文件中，设置以下属性来配置故障转移：

dfs.client.failover.proxy.provider.mycluster
org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider

4. 配置自动故障转移控制器：在hdfs-site.xml文件中，设置以下属性来配置自动故障转移控制器（在其中一个节点上运行）：

dfs.ha.automatic-failover.enabled
true


dfs.ha.automatic-failover.zkfc.port
8019

5. 启动NameNode：在两个NameNode节点上启动NameNode进程。

6. 启动自动故障转移控制器：在其中一个NameNode节点上启动自动故障转移控制器进程。

现在，您已经成功地启用了Apache Hadoop的高可用性。您可以通过访问http://namenode1:50070和http://namenode2:50070来访问HDFS Web界面，并通过hdfs://mycluster/来访问HDFS文件系统。