(十二)大数据实战——hadoop集群之HDFS高可用自动故障转移
本节内容主要介绍一下hadoop集群下实现HDFS高可用的自动故障转移,HDFS高可用的自动故障转移主要通过zookeeper实现故障的监控和主节点的切换。自动故障转移为 HDFS 部署增加了两个新组件:ZooKeeper 和 ZKFailoverController (ZKFC)进程。ZooKeeper 是维护少量协调数据,通知客户端这些数据的改变和监视客户端故障的高可用服务。
前言
本节内容主要介绍一下hadoop集群下实现hdfs高可用的自动故障转移,hdfs高可用的自动故障转移主要通过zookeeper实现故障的监控和主节点的切换。自动故障转移为 hdfs 部署增加了两个新组件:zookeeper 和 zkfailovercontroller (zkfc)进程。zookeeper 是维护少量协调数据,通知客户端这些数据的改变和监视客户端故障的高可用服务。在开始本节内容之前,我们需要提前安装好zookeeper集群,可参考作者往期博客内容。

正文
- 在core-site.xml文件中增加zkfc要连接的zkserver地址
- 启动 zookeeper集群后,然后再初始化ha在zookeeper集群中状态
- 关闭hadoop102的active的节点,查看故障是否会转移
结语
关于hadoop集群之hdfs高可用自动故障转移的内容到这里就结束了,我们下期见。。。。。。
相关文章:
-
SpringMVC获取请求参数
可以在控制器方法的形参位置设置一个实体类类型的形参,此时若浏览器传输的请求参数的参数名和实体类中的属性名一致,那么请求参数就会为此属性赋值。若请求所传输的请求参...
[阅读全文]
-
-
说明:在SpringAMQP的发送方法中,接收消息的类型是Object,也就是说我们可以发送任意对象类型的消息,SpringAMQP会帮我们序列化为字节后发送。同步通讯是指通信双方…
-
上一篇博客竟然用了不到半小时就写完了,那就继续吧,如果对此系列感兴趣,可以点击系列【Linux服务器Java环境搭建】进行查看哈,这一篇主要是安装和配置消息队列RabbitMQ。至…
-
-
版权声明:本文内容由互联网用户贡献,该文观点仅代表作者本人。本站仅提供信息存储服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 2386932994@qq.com 举报,一经查实将立刻删除。
发表评论