Ceph最佳实践：OSD权重管理和Chef配置

"版最佳实践-自动控制原理考研大串讲" 在Ceph分布式存储系统中，最佳实践涉及到了OSD（Object Storage Daemon）的管理，包括如何优雅地添加OSD到CRUSH映射中以及如何处理OSD故障，以最大限度地减少对用户I/O性能的影响。CRUSH（Controlled Replication Under Scalable Hashing）是Ceph中的一个分布式算法，用于确定数据在OSD之间的分布。 首先，当新增OSD时，为了避免立即增加I/O负担，应将其初始权重设置为0。这样，OSD不会立即参与数据存储，而是逐步增加其CRUSH权重。例如，通过以下命令每次增加0.2的权重： ```bash ceph osd crush reweight {osd-id} .2 ``` 在权重调整至期望值之前，需要等待数据迁移完成。例如，可以在权重达到0.4、0.6等之后再进行调整，直至目标权重。 为了减轻OSD失败造成的影响，可以设置`mon osd down out interval = 0`，防止自动将下线的OSD标记为“out”。然后，可以手动降低这些OSD的权重，例如： ```bash ceph osd reweight {osd-num} .8 ``` 等待数据迁移完成后，逐渐将权重减至0。然而，这种方式会阻止集群在故障后自动重新复制数据，因此需要确保有充分的监控，以便管理员能及时介入。 对于较新版本的Ceph（如Bobtail及后续版本），可能不再需要这种逐步增加权重的策略。新增OSD时，应考虑其在CRUSH映射中的权重，因为硬盘容量每年增长约40%，较新的OSD主机可能拥有更大容量的硬盘，因此可能需要更高的权重。 在部署OSD时，如果是使用Chef自动化工具，可以按照以下步骤操作： 1. 执行`chef-client`以注册新OSD作为Chef节点。 2. 编辑节点配置，将环境改为Chef环境，并将"role[ceph-osd]"添加到运行列表。 3. 对每个数据驱动器执行“Prepare OSD Drives”步骤。 4. 再次运行`chef-client`以执行运行列表。 Ceph官方文档提供了详细的操作指南，涵盖了从基础安装到快速入门的各个场景，包括Debian/Ubuntu系统的安装、软件包管理、配置文件编写、密钥管理以及对象存储、块设备和CEPHFS的使用等。了解并遵循这些最佳实践，能够帮助构建和管理更稳定、高效的Ceph集群。