Ceph修改mon ip地址
2023-06-13 09:15:40 时间
背景
最近公司服务器搬迁至外地机房,服务器中包含ceph存储集群,迁移到新机房需要整体修改服务器ip,因此mon节点的ip也将被修改,发现官网有修改ip的文档,正好参考官网记录一下。官网提供了只更改同一网络里的mon节点ip以及ceph集群更改到不同网络的情况下修改所有mon ip的方法。
修改同一网络里的mon ip
这被官网称为是一种正确的方法。仅更改mon的 IP 地址不足以确保集群中的其他mon收到更新。要更改mon的 IP 地址,必须添加一个具有要使用的 IP 地址的新mon节点(如添加mon(手动)中所述),确保新mon成功加入仲裁;然后移除旧 IP 地址的mon。最后更新ceph.conf文件以确保客户端和其他守护程序知道新mon的 IP 地址。
手动添加mon节点
- 在目标节点上,新建 mon 的数据目录。{mon-id} 名称自己定义 。
mkdir /var/lib/ceph/mon/ceph-{mon-id}
- 获取 mon 的 keyring 文件,保存在临时目录下。
ceph auth get mon. -o /tmp/ceph.mon.keyring
- 获取集群的 mon map 并保存到临时目录下。
ceph mon getmap -o /tmp/monmap
- 格式化mon的数据目录并指定上面两步创建的monmap和ceph.mon.keyring文件路径
ceph-mon -i {mon-id} --mkfs --monmap /tmp/monmap --keyring /tmp/ceph.mon.keyring
- 启动节点上的 mon 进程,它会自动加入集群。守护进程需要知道绑定到哪个 IP 地址,可以通过 --public-addr {ip:port} 选择指定
systemctl start ceph-mon@{mon-id}
ceph-mon -i {mon-id} --public-addr {ip:port}
删除mon节点
- 停止mon节点
systemctl stop ceph-mon@{mon-id}
- 从ceph集群移除mon节点
ceph mon remove {mon-id}
- 在ceph.conf配置文件中移除mon部分
修改所有mon节点ip
如背景所说,我们刚迁移了ceph集群的服务器到其他地市的机房。这需要改变mon节点的所有网络。在这种情况下,解决方案是为集群中的所有mon生成具有更新 IP 地址的新 monmap,并将新映射注入每个单独的mon。我这里是将192.168.28.0/24网段变更为192.168.244.0/24网段。
- 获取monmap,如果此时已经连接不上集群了可以在mon节点上使用第二条命令,并指定{mon-id}
ceph mon getmap -o /tmp/monmap
ceph-mon -i node3 --extract-monmap /tmp/monmap
- monmap内容如下
# monmaptool --print /tmp/monmap
monmaptool: monmap file /tmp/monmap
epoch 7
fsid 9c079a1f-6fc2-4c59-bd4d-e8bc232d33a4
last_changed 2022-10-08T10:00:04.055141+0000
created 2022-10-08T03:45:47.301186+0000
min_mon_release 16 (pacific)
election_strategy: 1
0: [v2:192.168.28.159:3300/0,v1:192.168.28.159:6789/0] mon.node1
1: [v2:192.168.248.160:3300/0,v1:192.168.28.160:6789/0] mon.node2
2: [v2:192.168.28.161:3300/0,v1:192.168.28.161:6789/0] mon.node3
- 删除现有的mon
# monmaptool --rm node1 --rm node2 --rm node3 /tmp/monmap
monmaptool: monmap file /tmp/monmap
monmaptool: removing node1
monmaptool: removing node2
monmaptool: removing node3
monmaptool: writing epoch 1 to /tmp/monmap (0 monitors)
- 添加新的mon
# monmaptool --add node1 192.168.244.44 --add node2 192.168.244.45 --add node3 192.168.244.46 /tmp/monmap
monmaptool: monmap file /tmp/monmap
monmaptool: writing epoch 1 to /tmp/monmap (3 monitors)
- 停止所有mon服务并注入monmap,,每个mon节点都要执行
ceph-mon -i {mon-id} --inject-monmap /tmp/monmap
- 执行完成后需要重启mon
systemctl start ceph-mon@{mon-id}
按照官网文档执行上述操作后,发现客户端不能连接ceph集群,查看mon服务都能正常监听,且端口通信正常,查看mon选举状态也是正常的。
ceph daemon mon.cloudmap mon_status
后来查看了ceph.conf配置文件,发现mon的配置还是用的以前的mon配置,所有节点更新后并重启mon后,客户端正常连接ceph集群。
官网链接:https://docs.ceph.com/en/latest/rados/operations/add-or-rm-mons/
相关文章
- 第三章 TCP/IP ip地址概念与应用
- IP数据云教你网站ip地址查询的方法
- 三种方法告诉你项目超过255个摄像机怎么设置IP?什么是公网ip?什么又是内网ip?为什么ip地址通常以192.168开头?
- wx.chooseAddress() 获取用户收货地址
- docker自定义ip地址(自定义网桥)
- Linux网络中浮动IP配置指南(linux浮动ip配置)
- Linux下如何修改IP地址(linux如何修改ip地址)
- Linux绑定IP地址:简单而快速的设置方法(linux绑定ip地址)
- Linux 查看 IP 地址方法汇总(linux怎么查ip)
- 为 Linux 机器配置双 IP 地址(linux设置两个ip)
- 大杀器:快速修改Linux IP脚本(linux修改ip脚本)
- Linux下修改虚拟机IP的方法(linux修改虚拟机ip)
- 地址Linux系统下增加IP地址的简易指南(linux增加ip)
- 如何在 Linux 中找到你的 IP 地址
- 如何在 Ubuntu 18.04 LTS 中配置 IP 地址
- “学会使用 Linux 命令,轻松管理 IP 地址”(linux命令ip)
- 如何在Linux系统下修改IP地址(linux下修改ip地址)
- 在Linux中快速修改IP地址(linux中修改ip地址)
- 使用Oracle虚拟IP:提高网络可用性和容错性(oracle虚拟ip)
- Linux下基于IP地址的设置修改(linux的ip地址修改)
- Linux 下 IP 地址配置实践(ip地址配置linux)
- 一键搜索:Linux探索IP地址之旅(linux搜索ip地址)
- 和端口SQL Server IP 地址与端口号设置说明(sqlserver的ip)
- 修改Redis主机IP提升可靠性与安全性(修改redis主机ip)
- 修改Redis服务器IP打开新的使用可能性(修改redis ip)
- Oracle数据库修改主机IP实践指南(oracle修改主机ip)
- Oracle4个IP实现无缝联网(oracle4个ip)