22 群集逻辑卷管理器（群集 LVM） #

以 root 用户身份启动外壳并登录。

检查群集资源的当前配置：

root # crm configure show

如果已经配置 DLM 资源（及相应的基本组和基本克隆），则继续过程 22.2 “创建 lvmlockd 资源”。

否则，如过程 18.1 “配置 DLM 的基础组”中所述配置 DLM 资源和相应的基本组和基本克隆。

以 root 用户身份启动外壳并登录。

运行以下命令以查看此资源的使用情况：

root # crm configure ra info lvmlockd

按如下所示配置 lvmlockd 资源：

root # crm configure primitive lvmlockd lvmlockd \
  op start timeout="90" \
  op stop timeout="100" \
  op monitor interval="30" timeout="90"

为了确保在每个节点上启动 lvmlockd 资源，请将原始资源添加到您在过程 22.1 “创建 DLM 资源”中为储存创建的基本组：

root # crm configure modgroup g-storage add lvmlockd

查看所做的更改：

root # crm configure show

检查资源是否运行正常：

root # crm status full

以 root 用户身份启动外壳并登录。

假设您已有两个共享磁盘，并使用它们创建共享 VG：

root # vgcreate --shared vg1 /dev/sda /dev/sdb

创建 LV，但一开始不激活它：

root # lvcreate -an -L10G -n lv1 vg1

以 root 用户身份启动外壳并登录。

运行以下命令以查看此资源的使用情况：

root # crm configure ra info LVM-activate

此资源负责管理 VG 的激活。在共享 VG 中，有两种不同的 LV 激活模式：排它模式和共享模式。排它模式是默认模式，通常应在 ext4 等本地文件系统使用 LV 时使用。共享模式仅应用于 OCFS2 等群集文件系统。

配置资源以管理 VG 的激活。根据您的方案，选择下列其中一个选项：

检查资源是否运行正常：

root # crm status full

运行 YaST，然后单击 网络服务 ›  iSCSI LIO 目标 启动 iSCSI 服务器模块。

如果要在计算机引导时启动 iSCSI 目标，请选择引导时，否则请选择手动。

如果正在运行防火墙，请启用打开防火墙中的端口。

切换到全局选项卡。如果需要身份验证，请启用传入及/或传出身份验证。在本例中，我们选择无身份验证。

添加新的 iSCSI 目标：

1. 切换到目标选项卡。

2. 单击添加。

3. 输入目标名称。名称需要采用如下所示的格式：

   iqn.DATE.DOMAIN

   有关格式的更多信息，请参见 3.2.6.3.1. Type "iqn."(iSCSI Qualified Name)（3.2.6.3.1.“iqn.”（iSCSI 限定名称）类型）一节，网址：http://www.ietf.org/rfc/rfc3720.txt。

4. 如果需要描述性更强的名称，可以进行更改，但要确保不同目标之间的标识符是唯一的。

5. 单击添加。

6. 在路径中输入设备名，并使用 Scsiid。

7. 单击下一步两次。

出现警告框时单击是进行确认。

打开配置文件 /etc/iscsi/iscsid.conf，将参数 node.startup 更改为 automatic。

运行 YaST，然后单击 网络服务 ›  iSCSI 发起端 。

如果要在计算机引导时启动 iSCSI 发起端，请选择引导时，否则请将其设置为手动。

切换到发现选项卡并单击发现按钮。

添加 iSCSI 目标的 IP 地址和端口（请参见过程 22.5 “配置 iSCSI 目标 (SAN)”）。通常，可以保留端口并使用其默认值。

如果使用身份验证，请插入进来的和出去的用户名和口令，否则请激活无身份验证。

选择下一步。找到的连接随即显示在列表中。

单击完成继续。

打开外壳，并以 root 用户身份登录。

测试 iSCSI 发起端是否已成功启动：

root # iscsiadm -m discovery -t st -p 192.168.3.100
192.168.3.100:3260,1 iqn.2010-03.de.jupiter:san1

建立会话：

root # iscsiadm -m node -l -p 192.168.3.100 -T iqn.2010-03.de.jupiter:san1
Logging in to [iface: default, target: iqn.2010-03.de.jupiter:san1, portal: 192.168.3.100,3260]
Login to [iface: default, target: iqn.2010-03.de.jupiter:san1, portal: 192.168.3.100,3260]: successful

使用 lsscsi 查看设备名：

...
[4:0:0:2]    disk    IET      ...     0     /dev/sdd
[5:0:0:1]    disk    IET      ...     0     /dev/sde

查找第三列中有 IET 的项。在本例中，设备为 /dev/sdd 和 /dev/sde。

打开已按过程 22.6 “配置 iSCSI 发起端”运行 iSCSI 发起端的一个节点上的 root 外壳。

在磁盘 /dev/sdd 和 /dev/sde 上创建共享卷组：

root # vgcreate --shared testvg /dev/sdd /dev/sde

根据需要创建逻辑卷：

root # lvcreate --name lv1 --size 500M testvg

使用 vgdisplay 检查卷组：

  --- Volume group ---
      VG Name               testvg
      System ID
      Format                lvm2
      Metadata Areas        2
      Metadata Sequence No  1
      VG Access             read/write
      VG Status             resizable
      MAX LV                0
      Cur LV                0
      Open LV               0
      Max PV                0
      Cur PV                2
      Act PV                2
      VG Size               1016,00 MB
      PE Size               4,00 MB
      Total PE              254
      Alloc PE / Size       0 / 0
      Free  PE / Size       254 / 1016,00 MB
      VG UUID               UCyWw8-2jqV-enuT-KH4d-NXQI-JhH3-J24anD

使用 vgs 命令检查卷组的共享状态：

root # vgs
  VG       #PV #LV #SN Attr   VSize     VFree  
  vgshared   1   1   0 wz--ns 1016.00m  1016.00m

属性列会显示卷属性：在此示例中，卷组可写入 (w)、可调整大小 (z)，分配策略为普通 (n)，并且其为共享资源 (s)。有关细节，请参见 vgs 的手册页。

创建主/主 DRBD 资源：

1. 首先，按过程 21.1 “手动配置 DRBD”中所述将 DRBD 设备设置为主/从模式。确保两个节点上的磁盘状态均为 up-to-date。使用 drbdadm status 确认是否如此。

2. 将以下选项添加到配置文件（通常类似 /etc/drbd.d/r0.res）：

   resource r0 {
     net {
        allow-two-primaries;
     }
     ...
   }

3. 将更改的配置文件复制到另一个节点，例如：

   root # scp /etc/drbd.d/r0.res venus:/etc/drbd.d/

4. 在两个节点上运行以下命令：

   root # drbdadm disconnect r0
   root # drbdadm connect r0
   root # drbdadm primary r0

5. 检查节点的状态：

   root # drbdadm status r0

将 lvmlockd 资源作为克隆包含在 Pacemaker 配置中，并使它依赖于 DLM 克隆资源。有关详细指示信息，请参见过程 22.1 “创建 DLM 资源”。继续之前，请确认这些资源已在群集上成功启动。可以使用 crm status 或 Web 界面检查正在运行的服务。

使用命令 pvcreate 准备 LVM 的物理卷。例如，在设备 /dev/drbd_r0 上，命令应类似于：

root # pvcreate /dev/drbd_r0

创建共享卷组：

root # vgcreate --shared testvg /dev/drbd_r0

根据需要创建逻辑卷。您有时可能想要更改逻辑卷的大小。例如，使用以下命令创建 4 GB 的逻辑卷：

root # lvcreate --name lv1 -L 4G testvg

现在 VG 内的逻辑卷可作为文件系统挂载或原始用法提供。确保使用逻辑卷的服务具备适当的依赖项，以便在激活 VG 后对它们进行共置和排序。

在节点 alice 上执行以下步骤：

1. 将镜像逻辑卷 test-lv 转换为线性逻辑卷：

   root # lvconvert -m0 cluster-vg2/test-lv /dev/vdc

2. 从卷组 cluster-vg2 中去除物理卷 /dev/vdc：

   root # vgreduce cluster-vg2 /dev/vdc

3. 从 LVM 中去除以下物理卷：

   root # pvremove /dev/vdc

   如果现在就运行 lsblk，您将会看到：

   NAME                                  MAJ:MIN RM  SIZE RO TYPE MOUNTPOINT
   vda                     253:0    0   40G  0 disk
   ├─vda1                  253:1    0    4G  0 part [SWAP]
   └─vda2                  253:2    0   36G  0 part /
   vdb                     253:16   0   20G  0 disk
   └─cluster--vg2-test--lv 254:5    0   12G  0 lvm
   vdc                     253:32   0   20G  0 disk

4. 使用磁盘 /dev/vdc 创建群集 MD 设备 /dev/md0：

   root # mdadm --create /dev/md0 --bitmap=clustered \
   --metadata=1.2 --raid-devices=1 --force --level=mirror \
   /dev/vdc --data-offset=128

   有关为何要使用 data-offset 选项的细节，请参见重要：避免迁移失败。

在节点 bob 上组装以下 MD 设备：

root # mdadm --assemble md0 /dev/vdc

如果您的群集由两个以上的节点组成，请在该群集中的所有剩余节点上执行此步骤。

返回到节点 alice：

1. 将 MD 设备 /dev/md0 初始化为与 LVM 搭配使用的物理卷：

   root # pvcreate /dev/md0

2. 将 MD 设备 /dev/md0 添加到卷组 cluster-vg2：

   root # vgextend cluster-vg2 /dev/md0

3. 将磁盘 /dev/vdb 中的数据移到 /dev/md0 设备：

   root # pvmove /dev/vdb /dev/md0

4. 从卷组 cluster-vg2 中去除物理卷 /dev/vdb：

   root # vgreduce cluster-vg2 /dev/vdb

5. 从设备中去除标签，使 LVM 不再将该设备识别为物理卷：

   root # pvremove /dev/vdb

6. 将 /dev/vdb 添加到 MD 设备 /dev/md0：

   root # mdadm --grow /dev/md0 --raid-devices=2 --add /dev/vdb