Хранение данных · 3 min read · Feb 04, 2026

Распределенное хранилище на четырех узлах хранения с GlusterFS на Fedora 12 - Страница 2

3 Настройка клиента GlusterFS

client1.example.com:

Есть пакет rpm клиента GlusterFS для Fedora 12, но проблема в том, что вы получите ошибки, такие как df: /mnt/glusterfs': Софт вызвал прерывание соединения или df:/mnt/glusterfs’: Транспортная конечная точка не подключена, когда вы пытаетесь получить доступ к общему ресурсу GlusterFS. Вот почему мы собираем клиент GlusterFS из исходников, чтобы избежать этих проблем.

Перед тем как собрать клиент GlusterFS, мы устанавливаем его зависимости:

yum groupinstall 'Development Tools'
yum groupinstall 'Development Libraries'
yum install libibverbs-devel fuse-devel

Затем мы загружаем исходники GlusterFS 2.0.9 (обратите внимание, что это та же версия, которая установлена на сервере!) и собираем GlusterFS следующим образом:

cd /tmp  
wget http://ftp.gluster.com/pub/gluster/glusterfs/2.0/LATEST/glusterfs-2.0.9.tar.gz  
tar xvfz glusterfs-2.0.9.tar.gz  
cd glusterfs-2.0.9  
./configure

В конце команды ./configure вы должны увидеть что-то вроде этого:

[...]  
GlusterFS configure summary  
===========================  
FUSE client        : yes  
Infiniband verbs   : yes  
epoll IO multiplex : yes  
Berkeley-DB        : yes  
libglusterfsclient : yes  
argp-standalone    : no  
  
[root@client1 glusterfs-2.0.9]#
make && make install  
ldconfig

Проверьте версию GlusterFS после этого (должна быть 2.0.9):

glusterfs --version
[root@client1 glusterfs-2.0.9]# glusterfs --version  
glusterfs 2.0.9 собран 19 февраля 2010 г. 19:20:46  
Ревизия репозитория: v2.0.9  
Авторские права (c) 2006-2009 Gluster Inc.   
GlusterFS поставляется БЕЗ КАКИХ-ЛИБО ГАРАНТИЙ.  
Вы можете перераспределять копии GlusterFS в соответствии с условиями GNU General Public License.  
[root@client1 glusterfs-2.0.9]#

Затем мы создаем следующие две директории:

mkdir /mnt/glusterfs  
mkdir /etc/glusterfs

Далее мы создаем файл /etc/glusterfs/glusterfs.vol:

vi /etc/glusterfs/glusterfs.vol

| volume remote1 type protocol/client option transport-type tcp option remote-host server1.example.com option remote-subvolume brick end-volume volume remote2 type protocol/client option transport-type tcp option remote-host server2.example.com option remote-subvolume brick end-volume volume remote3 type protocol/client option transport-type tcp option remote-host server3.example.com option remote-subvolume brick end-volume volume remote4 type protocol/client option transport-type tcp option remote-host server4.example.com option remote-subvolume brick end-volume volume distribute type cluster/distribute subvolumes remote1 remote2 remote3 remote4 end-volume volume writebehind type performance/write-behind option window-size 1MB subvolumes distribute end-volume volume cache type performance/io-cache option cache-size 512MB subvolumes writebehind end-volume |

Убедитесь, что вы используете правильные имена хостов серверов или IP-адреса в строках option remote-host!

Вот и все! Теперь мы можем смонтировать файловую систему GlusterFS в /mnt/glusterfs с одной из следующих двух команд:

glusterfs -f /etc/glusterfs/glusterfs.vol /mnt/glusterfs

или

mount -t glusterfs /etc/glusterfs/glusterfs.vol /mnt/glusterfs

Теперь вы должны увидеть новый общий ресурс в выводах…

mount
[root@client1 ~]# mount  
/dev/mapper/vg_server5-lv_root на / тип ext4 (rw)  
proc на /proc тип proc (rw)  
sysfs на /sys тип sysfs (rw)  
devpts на /dev/pts тип devpts (rw,gid=5,mode=620)  
tmpfs на /dev/shm тип tmpfs (rw)  
/dev/sda1 на /boot тип ext4 (rw)  
none на /proc/sys/fs/binfmt_misc тип binfmt_misc (rw)  
sunrpc на /var/lib/nfs/rpc_pipefs тип rpc_pipefs (rw)  
/etc/glusterfs/glusterfs.vol на /mnt/glusterfs тип fuse.glusterfs (rw,allow_other,default_permissions,max_read=131072)  
[root@client1 ~]#

… и…

df -h
[root@client1 ~]# df -h  
Файловая система            Размер  Использовано Доступно Использование% Смонтировано на  
/dev/mapper/vg_server5-lv_root  
                       29G  2.5G   25G  10% /  
tmpfs                 185M     0  185M   0% /dev/shm  
/dev/sda1             194M   23M  161M  13% /boot  
/etc/glusterfs/glusterfs.vol  
                      114G  9.8G   99G  10% /mnt/glusterfs  
[root@client1 ~]#

( server1.example.com, server2.example.com, server3.example.com и server4.example.com имеют около 28.5 ГБ пространства для файловой системы GlusterFS, так что результирующий общий ресурс имеет размер около 4 x 28.5 ГБ (114 ГБ).)

Вместо того чтобы монтировать общий ресурс GlusterFS вручную на клиенте, вы можете изменить /etc/fstab, чтобы общий ресурс монтировался автоматически при загрузке клиента.

Откройте /etc/fstab и добавьте следующую строку:

vi /etc/fstab

| [...] /etc/glusterfs/glusterfs.vol /mnt/glusterfs glusterfs defaults 0 0 |

Чтобы проверить, работает ли ваш измененный /etc/fstab, перезагрузите клиент:

reboot

После перезагрузки вы должны найти общий ресурс в выводах…

df -h

… и…

mount

4 Тестирование

Теперь давайте создадим несколько тестовых файлов на общем ресурсе GlusterFS:

client1.example.com:

touch /mnt/glusterfs/test1  
touch /mnt/glusterfs/test2  
touch /mnt/glusterfs/test3  
touch /mnt/glusterfs/test4  
touch /mnt/glusterfs/test5  
touch /mnt/glusterfs/test6

Теперь давайте проверим директорию /data/export на server1.example.com, server2.example.com, server3.example.com и server4.example.com. Вы заметите, что каждый узел хранения содержит только часть файлов/каталогов, которые составляют общий ресурс GlusterFS на клиенте:

server1.example.com:

ls -l /data/export
[root@server1 ~]# ls -l /data/export  
total 0  
-rw-r--r-- 1 root root 0 2010-02-22 20:15 test1  
-rw-r--r-- 1 root root 0 2010-02-22 20:15 test2  
-rw-r--r-- 1 root root 0 2010-02-22 20:15 test5  
[root@server1 ~]#

server2.example.com:

ls -l /data/export
[root@server2 ~]# ls -l /data/export  
total 0  
-rw-r--r-- 1 root root 0 2010-02-22 20:15 test4  
[root@server2 ~]#

server3.example.com:

ls -l /data/export
[root@server3 ~]# ls -l /data/export  
total 0  
-rw-r--r-- 1 root root 0 2010-02-22 20:15 test6  
[root@server3 ~]#

server4.example.com:

ls -l /data/export
[root@server4 ~]# ls -l /data/export  
total 0  
-rw-r--r-- 1 root root 0 2010-02-22 20:15 test3  
[root@server4 ~]#

5 Ссылки

Share: X/Twitter LinkedIn

Get new posts in your inbox

No spam. Unsubscribe anytime.