hadoop-zookeeper框架
2023-04-18 12:32:15 时间
zookeeper
协调机制
选举leader 多个flower
客户端 服务器
特点
半数以上
数据一致性
在有限时间范围内,执行顺序同步于发送顺序
文件结构类unix 树状每一个结点既是文件夹也可以是值。记为znode
?
本质上zookeeper 是文件系统+通知机制
启动zookeeper集群过程
选举策略
在没有历史数据的情况下
leader标准看 myid即为server.id
在有数据的条件下,
leader要给拥有最新数据的server 参考czxid
znode参数说明:{czxid version time num}
任务:搭建zookeeper集群 启动失败的坑 配置文件中写出服务器名单。不同启动顺序 含有历史数据 下的 leader选择 通过增/删/改/查/ zookeeper通知机制
写数据流程
前提:有leader
时机:半数以上通过
票数
监听机制
同步 数据传输可靠
异步 回调函数(定义时机,执行时机)
HDFS-HA
[========]
nn和2nn无法实现数据高度的一致性。主要原因是nn和2nn协作数据同步有间隔。
组织结构:???namenode 3
qjm+namenode 代替2nn?作用
``
相关文章
- 【技术种草】cdn+轻量服务器+hugo=让博客“云原生”一下
- CLB运维&运营最佳实践 ---访问日志大洞察
- vnc方式登陆服务器
- 轻松学排序算法:眼睛直观感受几种常用排序算法
- 十二个经典的大数据项目
- 为什么使用 CDN 内容分发网络?
- 大数据——大数据默认端口号列表
- Weld 1.1.5.Final,JSR-299 的框架
- JavaFX 2012:彻底开源
- 提升as3程序性能的十大要点
- 通过凸面几何学进行独立于边际的在线多类学习
- 利用行动影响的规律性和部分已知的模型进行离线强化学习
- ModelLight:基于模型的交通信号控制的元强化学习
- 浅谈Visual Source Safe项目分支
- 基于先验知识的递归卡尔曼滤波的代理人联合状态和输入估计
- 结合网络结构和非线性恢复来提高声誉评估的性能
- 最佳实践丨云开发CloudBase多环境管理实践
- TimeVAE:用于生成多变量时间序列的变异自动编码器
- 具有线性阈值激活的神经网络:结构和算法
- 内网渗透之横向移动 -- 从域外向域内进行密码喷洒攻击