Ubuntu 12.04上のGlusterFS 3.2.xによる高可用性ストレージ - 2つのストレージサーバー間の自動ファイルレプリケーション

Ubuntu 12.04上のGlusterFS 3.2.xによる高可用性ストレージ - 2つのストレージサーバー間の自動ファイルレプリケーション（ミラー）

バージョン 1.0
著者: Falko Timme
Twitterでフォローしてください

このチュートリアルでは、GlusterFSを使用した2つのストレージサーバー（Ubuntu 12.04）で高可用性ストレージを設定する方法を示します。各ストレージサーバーは他のストレージサーバーのミラーとなり、ファイルは両方のストレージサーバー間で自動的にレプリケートされます。クライアントシステム（Ubuntu 12.04も）は、ストレージをローカルファイルシステムのようにアクセスできます。GlusterFSは、数ペタバイトにスケール可能なクラスター型ファイルシステムです。さまざまなストレージブリックをInfiniband RDMAまたはTCP/IPインターコネクトを介して1つの大規模な並列ネットワークファイルシステムに集約します。ストレージブリックは、SATA-II RAIDおよびInfiniband HBAを備えたx86_64サーバーなどの一般的なハードウェアで構成できます。

これがあなたにとって機能するという保証はありません！

1 前提条件

このチュートリアルでは、3つのシステム、2つのサーバーと1つのクライアントを使用します：

server1.example.com: IPアドレス 192.168.0.100 (サーバー)
server2.example.com: IPアドレス 192.168.0.101 (サーバー)
client1.example.com: IPアドレス 192.168.0.102 (クライアント)

このチュートリアルのすべての手順をroot権限で実行するため、すべてのコマンドの前に文字列sudoを追加するか、次のように入力して今すぐrootになります。

sudo su

3つのシステムすべてが他のシステムのホスト名を解決できる必要があります。これがDNSを介して行えない場合は、/etc/hostsファイルを編集して、すべての3つのシステムで次のようになるようにします：

vi /etc/hosts

| 127.0.0.1 localhost.localdomain localhost 192.168.0.100 server1.example.com server1 192.168.0.101 server2.example.com server2 192.168.0.102 client1.example.com client1 # 以下の行はIPv6対応ホストにとって望ましい ::1 localhost ip6-localhost ip6-loopback fe00::0 ip6-localnet ff00::0 ip6-mcastprefix ff02::1 ip6-allnodes ff02::2 ip6-allrouters ff02::3 ip6-allhosts |

（次のセットアップでホスト名の代わりにIPアドレスを使用することも可能です。IPアドレスを使用することを好む場合は、ホスト名が解決できるかどうかを気にする必要はありません。）

2 GlusterFSサーバーの設定

server1.example.com/server2.example.com:

GlusterFSはUbuntu 12.04用のパッケージとして利用可能であるため、次のようにインストールできます：

apt-get install glusterfs-server

コマンド

glusterfsd --version

は、あなたがちょうどインストールしたGlusterFSのバージョンを表示するはずです（この場合は3.2.5）：

root@server1:~# glusterfsd --version  
glusterfs 3.2.5 built on Jan 31 2012 07:39:58  
Repository revision: git://git.gluster.com/glusterfs.git  
Copyright (c) 2006-2011 Gluster Inc.   
GlusterFSには全く保証がありません。  
GNU一般公衆ライセンスの条件の下でGlusterFSのコピーを再配布できます。  
root@server1:~#

ファイアウォールを使用している場合は、TCPポート111、24007、24008、24009-(すべてのボリュームにわたるブリックの数)がserver1.example.comおよびserver2.example.comで開いていることを確認してください。

次に、server2.example.comを信頼されたストレージプールに追加する必要があります（すべてのGlusterFS設定コマンドをserver1.example.comから実行していますが、server2.example.comから実行することもできます。構成はGlusterFSノード間で複製されるため、正しいホスト名またはIPアドレスを使用することを確認してください）：

server1.example.com:

server1.example.comで、次のコマンドを実行します。

gluster peer probe server2.example.com

root@server1:~# gluster peer probe server2.example.com  
Probe successful  
root@server1:~#

信頼されたストレージプールの状態は、次のようになります：

gluster peer status

root@server1:~# gluster peer status  
Number of Peers: 1

Hostname: server2.example.com  
Uuid: 7cd93007-fccb-4fcb-8063-133e6ba81cd9  
State: Peer in Cluster (Connected)  
root@server1:~#

次に、/dataディレクトリにserver1.example.comおよびserver2.example.comで2つのレプリカを持つtestvolという名前の共有を作成します（この場合、レプリカの数はサーバーの数と等しいことに注意してください。ミラーリングを設定したいからです）：

gluster volume create testvol replica 2 transport tcp server1.example.com:/data server2.example.com:/data

root@server1:~# gluster volume create testvol replica 2 transport tcp server1.example.com:/data server2.example.com:/data  
Creation of volume testvol has been successful. Please start the volume to access data.  
root@server1:~#

ボリュームを開始します：

gluster volume start testvol

上記のコマンドが成功しなかったと通知される可能性があります：

root@server1:~# gluster volume start testvol  
Starting volume testvol has been unsuccessful  
root@server1:~#

この場合、次の出力を確認する必要があります…

server1.example.com/server2.example.com:

netstat -tap | grep glusterfsd

両方のサーバーで。

このような出力が得られた場合…

root@server1:~# netstat -tap | grep glusterfsd  
tcp        0      0 *:24009                 *:*                     LISTEN      1548/glusterfsd  
tcp        0      0 localhost.localdom:1019 localhost.localdo:24007 ESTABLISHED 1548/glusterfsd  
root@server1:~#

…すべては正常ですが、出力が得られない場合…

root@server2:~# netstat -tap | grep glusterfsd  
root@server2:~#

…該当するサーバー（この場合はserver2.example.com）でGlusterFSデーモンを再起動します：

server2.example.com:

/etc/init.d/glusterfs-server restart

その後、再度…

netstat -tap | grep glusterfsd

…そのサーバーで出力を確認します - それは今、次のようになるはずです：

root@server2:~# netstat -tap | grep glusterfsd  
tcp        0      0 *:24010                 *:*                     LISTEN      1458/glusterfsd  
tcp        0      0 localhost.localdom:1021 localhost.localdo:24007 ESTABLISHED 1458/glusterfsd  
root@server2:~#

次にserver1.example.comに戻ります：

server1.example.com:

ボリュームの状態を確認するには、次のコマンドを使用します。

gluster volume info

root@server1:~# gluster volume info

Volume Name: testvol  
Type: Replicate  
Status: Started  
Number of Bricks: 2  
Transport-type: tcp  
Bricks:  
Brick1: server1.example.com:/data  
Brick2: server2.example.com:/data  
root@server1:~#

デフォルトでは、すべてのクライアントがボリュームに接続できます。client1.example.com（= 192.168.0.102）のみへのアクセスを許可したい場合は、次のコマンドを実行します：

gluster volume set testvol auth.allow 192.168.0.102

IPアドレスにワイルドカード（192.168.*のような）を使用することが可能であり、カンマで区切って複数のIPアドレスを指定できることに注意してください（例：192.168.0.102,192.168.0.103）。

ボリューム情報は、更新された状態を表示するはずです：

gluster volume info

root@server1:~# gluster volume info

Volume Name: testvol  
Type: Replicate  
Status: Started  
Number of Bricks: 2  
Transport-type: tcp  
Bricks:  
Brick1: server1.example.com:/data  
Brick2: server2.example.com:/data  
Options Reconfigured:  
auth.allow: 192.168.0.102  
root@server1:~#