DRBD+OCFS2构建的共享存储方案(2)

3、配置drbd
 
drbd的主配置文件为/etc/drbd.conf；为了管理的便捷性，目前通常会将些配置文件分成多个部分，且都保存至/etc/drbd.d目录中，主配置文件中仅使用"include"指令将这些配置文件片断整合起来。通常，/etc/drbd.d目录中的配置文件为global_common.conf和所有以.res结尾的文件。其中global_common.conf中主要定义global段和common段，而每一个.res的文件用于定义一个资源。
 
在配置文件中，global段仅能出现一次，且如果所有的配置信息都保存至同一个配置文件中而不分开为多个文件的话，global段必须位于配置文件的最开始处。目前global段中可以定义的参数仅有minor-count, dialog-refresh, disable-ip-verification和usage-count。
 
common段则用于定义被每一个资源默认继承的参数，可以在资源定义中使用的参数都可以在common段中定义。实际应用中，common段并非必须，但建议将多个资源共享的参数定义为common段中的参数以降低配置文件的复杂度。
 
resource段则用于定义drbd资源，每个资源通常定义在一个单独的位于/etc/drbd.d目录中的以.res结尾的文件中。资源在定义时必须为其命名，名字可以由非空白的ASCII字符组成。每一个资源段的定义中至少要包含两个host子段，以定义此资源关联至的节点，其它参数均可以从common段或drbd的默认中进行继承而无须定义。
 
下面的操作在node1.magedu.com上完成
1）复制样例配置文件为即将使用的配置文件：
# cp /usr/share/doc/drbd83-8.3.8/drbd.conf  /etc
 
2）配置/etc/drbd.d/global-common.conf，添加启用这些向，#号为注释：
global {
        usage-count no;
        # minor-count dialog-refresh disable-ip-verification
}
 
common {
        protocol C;
 
        handlers {
                pri-on-incon-degr "/usr/lib/drbd/notify-pri-on-incon-degr.sh; /usr/lib/drbd/notify-emergency-reboot.sh; echo b > /proc/sysrq-trigger ; reboot -f";
                pri-lost-after-sb "/usr/lib/drbd/notify-pri-lost-after-sb.sh; /usr/lib/drbd/notify-emergency-reboot.sh; echo b > /proc/sysrq-trigger ; reboot -f";
                local-io-error "/usr/lib/drbd/notify-io-error.sh; /usr/lib/drbd/notify-emergency-shutdown.sh; echo o > /proc/sysrq-trigger ; halt -f";
                # fence-peer "/usr/lib/drbd/crm-fence-peer.sh";
                # split-brain "/usr/lib/drbd/notify-split-brain.sh root";
                # out-of-sync "/usr/lib/drbd/notify-out-of-sync.sh root";
                # before-resync-target "/usr/lib/drbd/snapshot-resync-target-lvm.sh -p 15 -- -c 16k";
                # after-resync-target /usr/lib/drbd/unsnapshot-resync-target-lvm.sh;
        }
 
        startup {
                #wfc-timeout 120;
                #degr-wfc-timeout 120;
        }
 
        disk {
                #on-io-error detach;
        #fencing resource-only;
        #fencing dont-care;
        }
 
        net {
        cram-hmac-alg "sha1";
         shared-secret "mydrbdlab";
         allow-two-primaries;  这个的意思就是允许两台主节点，很重要
         #after-sb-0pri discard-zero-changes;
          #after-sb-1pri discard-secondary;
          #after-sb-2pri disconnect;
        }
 
        syncer {
                rate 1000M;
        }
}
 
以上文件在两个节点上必须相同，因此，可以基于ssh将刚才配置的文件全部同步至另外一个节点。
# scp /etc/drbd.conf node2:/etc/
# scp  /etc/drbd.d/*  node2:/etc/drbd.d
 
4、在两个节点上初始化已定义的资源并启动服务：
 
1）初始化资源，在Node1和Node2上分别执行：
# drbdadm create-md web
 
2）启动服务，在Node1和Node2上同时执行：
/etc/init.d/drbd start
 
3）查看启动状态：
# cat /proc/drbd
version: 8.3.8 (api:88/proto:86-94)
GIT-hash: d78846e52224fd00562f7c225bcc25b2d422321d build by mockbuild@builder10.CentOS.org, 2010-06-04 08:04:16
 0: cs:Connected ro:Secondary/Secondary ds:Inconsistent/Inconsistent C r----
    ns:0 nr:0 dw:0 dr:0 al:0 bm:0 lo:0 pe:0 ua:0 ap:0 ep:1 wo:b oos:505964
 
也可以使用drbd-overview命令来查看：
# drbd-overview
  0:web  Connected Secondary/Secondary Inconsistent/Inconsistent C r----
 
从上面的信息中可以看出此时两个节点均处于Secondary状态。于是，我们接下来需要将其中一个节点设置为Primary。在要设置为Primary的节点上执行如下命令：
# drbdsetup /dev/drbd0 primary –o
 
而后再次查看状态，可以发现数据同步过程已经开始：
# drbd-overview
  0:web  SyncSource Primary/Secondary UpToDate/Inconsistent C r----
 [============>.......] sync'ed: 66.2% (172140/505964)K delay_probe: 35
 
等数据同步完成以后再次查看状态，可以发现节点已经牌实时状态，且节点已经有了主次：
# drbd-overview
  0:web  Connected Primary/Secondary UpToDate/UpToDate C r----
 
我们把node2也设为主节点：
#　drbdsetup /dev/drbd0 primary –o
# drbd-overview
  0:web  Connected Primary/Primary UpToDate/UpToDate C r----
到这里我们的drbd就是双主模型了！
虽然，现在的双主模型建立好了，并且都可以网drbd设备写文件，但是一旦两个节点同时向一个文件写入，drbd文件系统就会崩溃，这时候我们就用到了集群文件系统，下面我们介绍ocfs2集群文件系统