windowsServer/wsfc

VMwareESXi5.1にてwindows server2012R2 Standard Editionなマシンを２台を用意して
フェールオーバークラスタを作ってみた。
windows server2008R2まではEnterprise Editionでないとクラスターを作れなかったが、
2012からはStandard EditionでもOKになったみたい。

フェールオーバークラスタにはwindows ActiveDirectoryが必須なのだが、ここではsamba4で用意してみた。

結論であるが、samba4ADを使ってフェールオーバークラスタは構築できました。
quorum等の共有ディスクはQNAPのiSCSIなら使えます。
*NAS4FreeとかFreeNAS由来のiSCSIだと「SCSI-3 永続的な予約の検証」でエラーが発生

マシン名	IP	備考
c.cerius.local	192.168.0.3	samba4ADドメインコントローラ
wsfc1.cerius.local	192.168.0.31, 10.64.0.1	node1(1cpu,4GB,40GBHDD)
wsfc2.cerius.local	192.168.0.32, 10.64.0.2	node2(1cpu,4GB,40GBHDD)
cl.cerius.local	192.168.0.34	クラスター管理用アクセスポイント
nas.cerius.local	192.168.0.30	共有ドライブ(quorum, share)

ハートビート用のネットワーク†

２台のwindowsマシンを相互監視するハートビート用のネットワークをvSphereClientで作る。
vSphereClientの「構成」タブで、左上欄ハードウエアから「ネットワーク」項目を選択して、右上部の「ネットワークの追加...」をクリックする。

新たに表示された「ネットワークの追加ウィザード」画面で、

接続タイプ選択画面で、「仮想マシン」を選択
ネットワークアクセス選択画面で、「vSphere標準スイッチの作成」を選択
ポートグループのプロパティー画面で、
　ネットワークラベルは「wsfc向けハートビート」
　VLAN ID(任意)はなし(0)
を選択して新しいネットワークを作成する

ESXi内のwindowsマシンに２枚目のNICを追加させ、その２枚目にこの「wsfc向けハートビート」を割り当てる。

↑

windows server 2012R2†

ESXiにて構築するwindows server2012R2は、2core、4GB mem、40GB HDDとして、samba4ADDCに繋がるネットワーク回線(service lan)の他にクラスタ内のnode同士で通信する回線(heartbeat)も用意した。
service lanに付与した要件は
　Microsoftネットワーク用クライアント
　Microsoftネットワーク用ファイルとプリンター共有
　インターネットプロトコルバージョン４（ＴＣＰ／ＩＰｖ４）[DNSへの登録有効、NetBIOS over TCP/IPは無効]
　
の２項目とした。一方heartbeat側は
　インターネットプロトコルバージョン４（ＴＣＰ／ＩＰｖ４）[DNSへの登録無効、NetBIOS over TCP/IPは無効]
　
のみ有効にした。

この状態でsamba4AD(cerius.local)にドメイン参加を行い、再起動後ドメインのadministratorでログインを行う

↑

共有ドライブ†

FreeNASでiSCSIターゲットとなるquorum領域とshare領域の２つのドライブを用意した。
windows server 2012R2に付随しているiSCSIイニシエーターを使ってこれらのドライブと接続する。
まず、サーバーマネージャの上部メニュー欄[ツール]から[iSCSIイニシエーター]を起動

*初回起動時だと、iSCSIのサービスが動いていないぞと言われ、再起動後も有効にするなら「はい」を選択せよと掲示が出される。ここは「はい」を選択する

表示された「iSCSIイニシエーターのプロパティ」画面の「ターゲット」タブでiSCSIターゲットを提供するサーバの検索を行う。

提示されたiSCSIターゲットから目的のiSCSIターゲットを選択して、「接続」ボタンをクリックする。

目的のiSCSIターゲットに接続が完了したら、サーバーマネージャの上部メニュー欄[ツール]から[コンピュータの管理]を起動する。
表示させた「コンピュータの管理」画面の左メニューツリーを展開させ、「コンピュータの管理(ローカル)」->「記憶域」->「ディスクの管理」を選択する。iSCSI由来のデバイスをオンラインにする。

quorum領域は1GBと定義した。これに該当するHDDをNTFSでフォーマットして、Ｑドライブに相当させる
share領域は20GBと定義した。これに該当するHDDをNTFSでフォーマットして、Ｓドライブに相当させる

定義が完了したら、これら２つの領域はオフラインにする。

次に、もう片方のクラスターノードを立ち上げて、同様に[iSCSIイニシエーター]でFreeNASのiSCSIターゲットを接続します。
そこではNTFSへのフォーマットは行わず、単に[オンライン]にして、Ｑドライブ、Ｓドライブへの割り当てのみを行います。

windows2012R2はESXiで作り、共有ドライブらを提供するiSCSIターゲットは別途用意した。
*初め、iSCSIターゲットをFreeNASでESXiで用意したら失敗した。qnapによるiSCSIターゲットでは成功済み

↑

フェールオーバークラスターマネージャのインストール†

クラスターを構成するwindowsマシンにそれぞれインストールします。
サーバーマネージャの上部メニュー欄[管理]から[役割と機能の追加]を起動する。
「機能」を選択する画面で「フェイルオーバークラスタリング」を選択します。

選択すると関連する管理ツールのインストールも伺われるがこれらもインストールします。

↑

samba4ADの調整†

wsfc構築途中に「構成の検証...」を行う場面がある。
特に処置を施していないと「IP 構成の検証」項目にて下記のようなテストの実行中にエラーが発生しました。と表示され、これ以上進めなくなる。

ネットワーク テストを初期化中にエラーが発生しました。
サーバー側のエージェントを作成中にエラーが発生しました (CPrepSrv)。
CLSID {E1568352-586D-43E4-933F-8E6DC4DE317A} を含む COM コンポーネントのインスタンスを 
IClassFactory から作成中に、次のエラーが発生しました: 80070721。

解決方法は下記URLに提示されていて、
http://www.curriegrad2004.ca/2013/05/samba-4-active-directory-domain-controller-for-a-microsoft-failover-cluster/
msfcの検証、msfcの構築ユーザにservicePrincipalNameを持たせる必要があるみたい。
ここではmsfc検証をcerius\administratorで行いたかったので、このユーザにspnを追加した。spnは何でもいいみたく、HOSTのPrincipalとして HOST/msfc.cerius.local を追加した。DNSに存在するマシンでも架空のマシンでもいいみたい。

[root@c ~]# /opt/samba/bin/samba-tool spn list administrator
administrator
User CN=Administrator,CN=Users,DC=cerius,DC=local has no servicePrincipalName
[root@c ~]#
[root@c ~]# /opt/samba/bin/samba-tool spn add HOST/msfc.cerius.local administrator
[root@c ~]# /opt/samba/bin/samba-tool spn list administrator
administrator
User CN=Administrator,CN=Users,DC=cerius,DC=local has the following servicePrincipalName:
         HOST/msfc.cerius.local
[root@c ~]#

とHOST/msfc.cerius.localなservicePrincipalNameをcerius\administratorに追加した。
*msfcを構成するホストがservicePrincipalNameを持つのではなく、msfc検証やmsfc構築のユーザに持たせることが必須みたい
windowsのADSIエディッタ―で見ると
　が、となる。

*過去、これが解決できなくてずっと停滞していた。。。

↑

フェールオーバークラスターマネージャ（クラスタ検証）†

どちらか一方のマシンのフェールオーバークラスターマネージャを立ち上げます。
サーバーマネージャの上部メニュー欄[ツール]から[フェールオーバークラスターマネージャ]を起動。
表示された「フェールオーバークラスターマネージャ」画面の右側に「操作」として「構成の検証（Ｌ）．．．」がある。

これを使ってクラスタの検証を行います。
クリックすると、新たに「構成の検証ウィザード」画面が開いて、「開始する前に」項目では「次へ」ボタンをクリックして、「サーバまたはクラスタの選択」項目で構築した2台の仮想マシンを指定して「次へ」ボタンをクリックします。

テスト項目を選べるが、ここではすべてのテスト項目を実行させます。

「確認」項目でテスト内容を確認して「次へ」ボタンをクリックします。
これでクラスター構築に向けての検証が始まります。

共有フォルダにFreeNAS 9.2.1.5のiSCSIターゲットを利用したらエラーが発生した
「SCSI-3 永続的な予約の検証」でエラーが発生
現象として、検証が完了するとiSCSIターゲット由来のHDDがRAWファイルシステムに代わってしまった

共有フォルダにNAS4Free 9.2.0.1のiSCSIターゲットを利用してもエラーが発生した
こちらも「SCSI-3 永続的な予約の検証」でエラーが発生

qnapのiSCSIターゲットを利用するとエラーは発生しない。成功する

検証に成功すると「構成はクラスタリングに適しています」と表記される。

↑

フェールオーバークラスターマネージャ（クラスタ構築）†

検証に成功したので、次は実際にクラスターを構築します。
「フェールオーバークラスターマネージャ」画面の右側に「操作」内にある「クラスターの作成（Ｃ）．．．」をクリックする。

「クラスターの作成ウィザード」画面が新たに開いて、「開始する前に」項目では「次へ」ボタンをクリックする。
「サーバの選択」項目で、２台のクラスターノードを入力して「次へ」ボタンをクリックします。

「クラスター管理用アクセスポイント」項目で、クラスター名は「cl」として、そのIPアドレスは「192.168.0.34」として、「次へ」ボタンをクリックする

「確認」項目でクラスター構成を確認する
クラスタ：cl
ノード：wsfc2.cerius.local
ノード：wsfc1.cerius.local
IPアドレス：192.168.0.34
そして、「使用可能な記憶域を全てクラスターに追加する」を有効にして「次へ」ボタンをクリックする。
クラスターの構築が完了すると、「概要」項目で

と明記される。
これでクラスターの構築は完了。

「フェールオーバークラスターマネージャ」画面は下記のようになる。

↑

フェールオーバークラスターマネージャ（クラスタ削除）†

作ったクラスターを削除、元に戻してみます。
サーバーマネージャの上部メニュー欄[ツール]から[フェールオーバークラスターマネージャ]を起動
表示された「フェールオーバークラスターマネージャ」画面の右側のツリーを展開して、構築したクラスター「cl.cerius.local」を選択します。

選択後、「フェールオーバークラスターマネージャ」画面の左側「操作」欄の項目に「他のアクション」が見えるようになる。
この「他のアクション」をクリックすると、評されるサブ項目に「クラスターの破棄...」がある。

これを選択すると下記のような画面が表示される。「はい」ボタンをクリックします。

これでＯＫみたいだけど、サーバーマネージャの「すべてのサーバ」にクラスター構成時の自分以外のマシンが残留しているとエラーが発生する。そこらを取り除けばいいだけみたい。