22 叢集邏輯磁碟區管理員 (叢集 LVM) #

啟動外圍程序並以 root 身分登入。

檢查叢集資源的目前組態：

root # crm configure show

如果您已設定 DLM 資源 (以及對應的基礎群組和基礎複製品)，請繼續程序 22.2 「建立 lvmlockd 資源」。

若非如此，請依照程序 18.1 「設定 DLM 的基礎群組」 所述設定 DLM 資源以及對應的基礎群組和基礎複製品。

啟動外圍程序並以 root 身分登入。

執行以下指令以查看此資源的使用情況：

root # crm configure ra info lvmlockd

依如下所示設定 lvmlockd 資源：

root # crm configure primitive lvmlockd ocf:heartbeat:lvmlockd \
  op start timeout="90" \
  op stop timeout="100" \
  op monitor interval="30" timeout="90"

為了確定在每個節點上都啟動 lvmlockd 資源，請將基本資源新增至您在程序 22.1 「建立 DLM 資源」中為儲存建立的基礎群組：

root # crm configure modgroup g-storage add lvmlockd

複查所做的變更：

root # crm configure show

檢查資源是否正常執行：

root # crm status full

啟動外圍程序並以 root 身分登入。

假設您已有兩個共用磁碟，並使用它們建立共用 VG：

root # vgcreate --shared vg1 /dev/sda /dev/sdb

建立 LV 但一開始不啟用它：

root # lvcreate -an -L10G -n lv1 vg1

啟動外圍程序並以 root 身分登入。

執行以下指令以查看此資源的使用情況：

root # crm configure ra info LVM-activate

此資源負責管理 VG 的啟用。在共用 VG 中，有兩種不同的 LV 啟用模式：獨佔模式和共用模式。獨佔模式是預設模式，通常應在 ext4 等本地檔案系統使用 LV 時使用。共用模式僅應用於 OCFS2 等叢集檔案系統。

設定資源以管理您 VG 的啟用。根據您的案例，選擇下列其中一個選項：

檢查資源是否正常執行：

root # crm status full

執行 YaST，然後按一下 網路服務 ›  iSCSI LIO 目標 ，啟動 iSCSI 伺服器模組。

如果您希望電腦每次開機時啟動 iSCSI 目標，請選擇「開機時」，否則請選擇「手動」。

如果有防火牆在執行，則啟用「在防火牆中開啟埠」。

切換至「全域」索引標籤。如果需要驗證，請啟用內送及/或外送驗證。在本例中，我們選取的是「無驗證」。

新增新的 iSCSI 目標：

1. 切換至「目標」索引標籤。

2. 按一下「新增」。

3. 輸入目標名稱。名稱需要採用以下格式：

   iqn.DATE.DOMAIN

   如需該格式的詳細資訊，請參閱第 3.2.6.3.1 節「Type "iqn."(iSCSI Qualified Name)」(「iqn.」(iSCSI 合格名稱) 類型)，網址為：http://www.ietf.org/rfc/rfc3720.txt。

4. 如果您想使用更具描述性的名稱，可以變更名稱，只要確保每個目標的識別碼都是唯一的即可。

5. 按一下「新增」。

6. 在「路徑」中輸入裝置名稱，並使用「Scsiid」。

7. 按兩次「下一步」。

出現警告對話方塊時，按一下「是」加以確認。

開啟組態檔案 /etc/iscsi/iscsid.conf，並將參數 node.startup 變更為 automatic。

執行 YaST，然後按一下網路服務 ›  iSCSI 啟動器。

如果您要在電腦開機時啟動 iSCSI 啟動器，請選擇「開機時」，否則請設定「手動」。

切換至「探查」索引標籤，然後按一下「探查」按鈕。

新增 iSCSI 目標的 IP 位址和連接埠 (請參閱程序 22.5 「設定 iSCSI 目標 (SAN)」)。一般不用變更連接埠，使用其預設值即可。

如果使用驗證，請插入內送及外送的使用者名稱和密碼，否則請啟用無驗證。

選取「下一步」。清單中會顯示找到的連線。

按一下「完成」繼續。

開啟外圍程序，以 root 身分登入。

測試 iSCSI 啟動器是否已正常啟動：

root # iscsiadm -m discovery -t st -p 192.168.3.100
192.168.3.100:3260,1 iqn.2010-03.de.jupiter:san1

建立工作階段：

root # iscsiadm -m node -l -p 192.168.3.100 -T iqn.2010-03.de.jupiter:san1
Logging in to [iface: default, target: iqn.2010-03.de.jupiter:san1, portal: 192.168.3.100,3260]
Login to [iface: default, target: iqn.2010-03.de.jupiter:san1, portal: 192.168.3.100,3260]: successful

使用 lsscsi 查看裝置名稱：

...
[4:0:0:2]    disk    IET      ...     0     /dev/sdd
[5:0:0:1]    disk    IET      ...     0     /dev/sde

尋找第三欄中含有 IET 的項目。在本例中，裝置分別是 /dev/sdd 和 /dev/sde。

在其中一個您於 程序 22.6 「設定 iSCSI 啟動器」 中執行了 iSCSI 啟動器的節點上開啟 root 外圍程序。

在磁碟 /dev/sdd 和 /dev/sde 上建立共用磁碟區群組：

root # vgcreate --shared testvg /dev/sdd /dev/sde

根據需要建立邏輯磁碟區：

root # lvcreate --name lv1 --size 500M testvg

使用 vgdisplay 檢查磁碟區群組：

  --- Volume group ---
      VG Name               testvg
      System ID
      Format                lvm2
      Metadata Areas        2
      Metadata Sequence No  1
      VG Access             read/write
      VG Status             resizable
      MAX LV                0
      Cur LV                0
      Open LV               0
      Max PV                0
      Cur PV                2
      Act PV                2
      VG Size               1016,00 MB
      PE Size               4,00 MB
      Total PE              254
      Alloc PE / Size       0 / 0
      Free  PE / Size       254 / 1016,00 MB
      VG UUID               UCyWw8-2jqV-enuT-KH4d-NXQI-JhH3-J24anD

使用 vgs 指令檢查磁碟區群組的共用狀態：

root # vgs
  VG       #PV #LV #SN Attr   VSize     VFree  
  vgshared   1   1   0 wz--ns 1016.00m  1016.00m

Attr 欄顯示磁碟區屬性：在此範例中，磁碟區群組可寫入 (w)、可調整大小 (z)，配置規則為一般 (n)，並且其為共用資源 (s)。如需詳細資料，請參閱 vgs 的 man 頁面。

建立主要/次要 DRBD 資源：

1. 首先，如程序 21.1 「手動設定 DRBD」 中所述將一部 DRBD 裝置設定成主要或次要裝置。確定兩個節點上的磁碟狀態均為最新。使用 drbdadm status 確認是否如此。

2. 在組態檔案 (通常類似於 /etc/drbd.d/r0.res) 中新增以下選項：

   resource r0 {
     net {
        allow-two-primaries;
     }
     ...
   }

3. 將變更後的組態檔案複製到另一個節點，例如：

   root # scp /etc/drbd.d/r0.res venus:/etc/drbd.d/

4. 在兩個節點上執行以下指令：

   root # drbdadm disconnect r0
   root # drbdadm connect r0
   root # drbdadm primary r0

5. 檢查節點的狀態：

   root # drbdadm status r0

將 lvmlockd 資源做為複製品包含在 Pacemaker 組態中，並使它依賴於 DLM 複製品。如需詳細指示，請參閱程序 22.1 「建立 DLM 資源」。繼續之前，請先確定已在叢集中成功啟動這些資源。您可以使用 crm status 或 Web 介面檢查執行中的服務。

使用 pvcreate 指令為 LVM 備妥實體磁碟區。例如，在 /dev/drbd_r0 裝置上使用如下指令：

root # pvcreate /dev/drbd_r0

建立共用磁碟區群組：

root # vgcreate --shared testvg /dev/drbd_r0

根據需要建立邏輯磁碟區。您有時可能想要變更邏輯磁碟區的大小。例如，使用以下指令建立一個 4 GB 的邏輯磁碟區：

root # lvcreate --name lv1 -L 4G testvg

現在，VG 中的邏輯磁碟區便可做為掛接的檔案系統或原始用途使用。請確保使用它們的服務具有正確的相依性，這樣才能在啟動 VG 後對它們進行並存和排序處理。

在節點 alice 上執行以下步驟：

1. 將鏡像邏輯磁碟區 test-lv 轉換為線性邏輯磁碟區：

   root # lvconvert -m0 cluster-vg2/test-lv /dev/vdc

2. 從磁碟區群組 cluster-vg2 中移除實體磁碟區 /dev/vdc：

   root # vgreduce cluster-vg2 /dev/vdc

3. 從 LVM 中移除以下實體磁碟區：

   root # pvremove /dev/vdc

   如果現在就執行 lsblk，您將會看到：

   NAME                                  MAJ:MIN RM  SIZE RO TYPE MOUNTPOINT
   vda                     253:0    0   40G  0 disk
   ├─vda1                  253:1    0    4G  0 part [SWAP]
   └─vda2                  253:2    0   36G  0 part /
   vdb                     253:16   0   20G  0 disk
   └─cluster--vg2-test--lv 254:5    0   12G  0 lvm
   vdc                     253:32   0   20G  0 disk

4. 使用磁碟 /dev/vdc 建立叢集 MD 裝置 /dev/md0：

   root # mdadm --create /dev/md0 --bitmap=clustered \
   --metadata=1.2 --raid-devices=1 --force --level=mirror \
   /dev/vdc --data-offset=128

   如需為何要使用 data-offset 選項的詳細資料，請參閱重要：避免移轉失敗。

在節點 bob 上組合以下 MD 裝置：

root # mdadm --assemble md0 /dev/vdc

如果您的叢集由兩個以上的節點組成，請在該叢集中的所有剩餘節點上執行此步驟。

回到節點 alice：

1. 將 MD 裝置 /dev/md0 啟始化為可與 LVM 搭配使用的實體磁碟區：

   root # pvcreate /dev/md0

2. 將 MD 裝置 /dev/md0 新增至磁碟區群組 cluster-vg2：

   root # vgextend cluster-vg2 /dev/md0

3. 將磁碟 /dev/vdb 中的資料移至 /dev/md0 裝置：

   root # pvmove /dev/vdb /dev/md0

4. 從磁碟區群組 group cluster-vg2 中移除實體磁碟區 /dev/vdb：

   root # vgreduce cluster-vg2 /dev/vdb

5. 從裝置中移除標籤，使 LVM 不再將該裝置識別為實體磁碟區：

   root # pvremove /dev/vdb

6. 將 /dev/vdb 新增至 MD 裝置 /dev/md0：

   root # mdadm --grow /dev/md0 --raid-devices=2 --add /dev/vdb