Ubuntu 11.10上のGlusterFS 3.2.xによる高可用性ストレージ - 2つのストレージサーバー間の自動ファイル複製

Ubuntu 11.10上のGlusterFS 3.2.xによる高可用性ストレージ - 2つのストレージサーバー間の自動ファイル複製 (ミラー)

バージョン 1.0
著者: Falko Timme
私をTwitterでフォローしてください

このチュートリアルでは、GlusterFSを使用する2つのストレージサーバー（Ubuntu 11.10）で高可用性ストレージを設定する方法を示します。各ストレージサーバーは他のストレージサーバーのミラーとなり、ファイルは両方のストレージサーバー間で自動的に複製されます。クライアントシステム（こちらもUbuntu 11.10）は、ストレージをローカルファイルシステムのようにアクセスできます。GlusterFSは、数ペタバイトにスケール可能なクラスターファイルシステムです。さまざまなストレージブリックをInfiniband RDMAまたはTCP/IPインターコネクトを介して1つの大規模な並列ネットワークファイルシステムに集約します。ストレージブリックは、SATA-II RAIDおよびInfiniband HBAを備えたx86_64サーバーなどの一般的なハードウェアで構成できます。

この設定があなたにとって機能するという保証はありません！

1 前提条件

このチュートリアルでは、3つのシステム、2つのサーバーと1つのクライアントを使用します：

server1.example.com: IPアドレス 192.168.0.100 (サーバー)
server2.example.com: IPアドレス 192.168.0.101 (サーバー)
client1.example.com: IPアドレス 192.168.0.102 (クライアント)

このチュートリアルのすべてのステップをroot権限で実行するため、すべてのコマンドの前に文字列sudoを付けるか、次のように入力して今すぐrootになります。

sudo su

すべての3つのシステムは、他のシステムのホスト名を解決できる必要があります。これがDNSを介してできない場合は、/etc/hostsファイルを編集して、すべての3つのシステムで次のように見えるようにします：

vi /etc/hosts

| 127.0.0.1 localhost.localdomain localhost 192.168.0.100 server1.example.com server1 192.168.0.101 server2.example.com server2 192.168.0.102 client1.example.com client1 # 以下の行はIPv6対応ホストにとって望ましい ::1 localhost ip6-localhost ip6-loopback fe00::0 ip6-localnet ff00::0 ip6-mcastprefix ff02::1 ip6-allnodes ff02::2 ip6-allrouters ff02::3 ip6-allhosts |

(次の設定でホスト名の代わりにIPアドレスを使用することも可能です。IPアドレスを使用することを好む場合は、ホスト名が解決できるかどうかを気にする必要はありません。)

2 GlusterFSサーバーの設定

server1.example.com/server2.example.com:

GlusterFSはUbuntu 11.10用のパッケージとして利用可能なので、次のようにインストールできます：

apt-get install glusterfs-server

コマンド

glusterfsd --version

は、今インストールしたGlusterFSのバージョン（この場合は3.2.1）を表示するはずです：

root@server1:~# glusterfsd --version  
glusterfs 3.2.1 built on Jun 28 2011 07:43:56  
Repository revision: v3.2.1  
Copyright (c) 2006-2010 Gluster Inc.   
GlusterFSは完全に無保証です。  
GNU Affero General Public Licenseの条件の下でGlusterFSのコピーを再配布できます。  
root@server1:~#

ファイアウォールを使用している場合は、TCPポート111、24007、24008、24009-(すべてのボリュームのブリック数)がserver1.example.comおよびserver2.example.comで開いていることを確認してください。

次に、server2.example.comを信頼されたストレージプールに追加する必要があります（すべてのGlusterFS構成コマンドをserver1.example.comから実行していますが、server2.example.comから実行することもできます。構成はGlusterFSノード間で複製されるため、正しいホスト名またはIPアドレスを使用することを確認してください）：

server1.example.com:

server1.example.comで、次のコマンドを実行します。

gluster peer probe server2.example.com

root@server1:~# gluster peer probe server2.example.com  
Probe successful  
root@server1:~#

信頼されたストレージプールの状態は次のようになります：

gluster peer status

root@server1:~# gluster peer status  
Number of Peers: 1

Hostname: server2.example.com  
Uuid: 7cd93007-fccb-4fcb-8063-133e6ba81cd9  
State: Peer in Cluster (Connected)  
root@server1:~#

次に、server1.example.comおよびserver2.example.comの/dataディレクトリに2つのレプリカを持つtestvolという名前の共有を作成します（この場合、レプリカの数はサーバーの数と等しいことに注意してください。ミラーリングを設定したいからです）：

gluster volume create testvol replica 2 transport tcp server1.example.com:/data server2.example.com:/data

root@server1:~# gluster volume create testvol replica 2 transport tcp server1.example.com:/data server2.example.com:/data  
Creation of volume testvol has been successful. Please start the volume to access data.  
root@server1:~#

ボリュームを開始します：

gluster volume start testvol

上記のコマンドが成功しなかったと表示される可能性があります：

root@server1:~# gluster volume start testvol  
Starting volume testvol has been unsuccessful  
root@server1:~#

この場合、次の出力を確認する必要があります…

server1.example.com/server2.example.com:

netstat -tap | grep glusterfsd

両方のサーバーで。

次のような出力が得られた場合…

root@server1:~# netstat -tap | grep glusterfsd  
tcp        0      0 *:24009                 *:*                     LISTEN      1548/glusterfsd  
tcp        0      0 localhost.localdom:1019 localhost.localdo:24007 ESTABLISHED 1548/glusterfsd  
root@server1:~#

…すべては正常ですが、出力が得られない場合…

root@server2:~# netstat -tap | grep glusterfsd  
root@server2:~#

…該当するサーバー（この場合はserver2.example.com）でGlusterFSデーモンを再起動します：

server2.example.com:

/etc/init.d/glusterfs-server restart

その後、再度…

netstat -tap | grep glusterfsd

…そのサーバーで出力を確認してください - それは今、次のようになるはずです：

root@server2:~# netstat -tap | grep glusterfsd  
tcp        0      0 *:24010                 *:*                     LISTEN      1458/glusterfsd  
tcp        0      0 localhost.localdom:1021 localhost.localdo:24007 ESTABLISHED 1458/glusterfsd  
root@server2:~#

次にserver1.example.comに戻ります：

server1.example.com:

ボリュームの状態を確認するには、次のコマンドを使用します。

gluster volume info

root@server1:~# gluster volume info

Volume Name: testvol  
Type: Replicate  
Status: Started  
Number of Bricks: 2  
Transport-type: tcp  
Bricks:  
Brick1: server1.example.com:/data  
Brick2: server2.example.com:/data  
root@server1:~#

デフォルトでは、すべてのクライアントがボリュームに接続できます。client1.example.com（= 192.168.0.102）のみへのアクセスを許可したい場合は、次のコマンドを実行します：

gluster volume set testvol auth.allow 192.168.0.102

IPアドレスにワイルドカード（192.168.*のような）を使用することができ、カンマで区切って複数のIPアドレスを指定することも可能です（例：192.168.0.102,192.168.0.103）。

ボリューム情報は、更新された状態を表示するはずです：

gluster volume info

root@server1:~# gluster volume info

Volume Name: testvol  
Type: Replicate  
Status: Started  
Number of Bricks: 2  
Transport-type: tcp  
Bricks:  
Brick1: server1.example.com:/data  
Brick2: server2.example.com:/data  
Options Reconfigured:  
auth.allow: 192.168.0.102  
root@server1:~#