Установка GlusterFS с реплицируемым хранилищем
Обеспечение отказоустойчивости с помощью репликации хранилища средствами GlusterFS.
Я хочу поделиться своим DocumentRoot /var/www/html/ между двумя веб серверами Apache. Оба моих веб-сервера стоят за балансировщиком распределения нагрузки прокси сервера Nginx. Как настроить и установить GlusterFS ( «распределенное хранилище»), которая является масштабируемой сетевой файловой системой на Ubuntu Linux 16.04 LTS сервер?
GlusterFS является сетевой файловой системой распределенного хранения с свободным и открытым исходным кодом. Сеть распределенных файловых систем хранения очень популярна среди веб-сайтов для интеренет торговли с свысокой нагрузкой, облачных вычислений, потоковых медиа-услуг, (сети доставки контента) CDN и многое другое. Этот статья покажет вам , как установить GlusterFS на Ubuntu Linux 16.04 LTS сервер и настроить 2 узла хранения высокой доступности для вашего веб — сервера.
Пример установки
Облако или физический сервер будет единственной точкой отказа. Например /var/www/html/ может быть точкой отказа? Мы используем два веб-сервера Apache. Тем не менее, как обечпечитьт, чтобы /var/www/html/ синхронизируются на обоих серверах Apache? Вы не хотите, чтобы данные и страницы для клиентов с разных серверов отличались. Чтобы сохранить /var/www/html/ в синхронизации вам нужен кластерная система хранения. Даже если один узел выходит из строя другой продолжает работать. Более того, когда вышедший из строя узел подключается обратно, он должен синхронизировать отсутствующие файлы с другого сервера в /var/www/html/.
Как настроить репликацию в GlusterFS для обеспечения высокой доступности хранения?
- Минимум два отдельных хранилища (может быть облако или физический сервер)
- Каждый сервер должен иметь отдельный раздел или диск для GlusterFS. Для примера будем использовать /dev/vdb1 раздел.
- Частная сеть (LAN / VLAN) между серверами
- Ubuntu Linux 16.04 LTS на обоих серверах
Хватить говорить, приступим к работе с установкой GlusterFS и конфигурацией на Ubuntu.
Шаг 1 — Настройка /etc/hosts
Первоначальная настройка /etc/host файла:
|
1 |
$ sudo vi /etc/hosts |
Установить правильный IP-адрес в соответствии с картинкой или согласно вашей установки:
|
1 2 |
<span class="notranslate"> 192.168.2.11 gfs01</span> <span class="notranslate"> 192.168.2.12 gfs02</span> |
Закройте и сохраните файл. Проверьте:
|
1 2 |
$ ping -c2 gfs01 $ ping -c2 gfs02 |
Шаг 2 — Настройка IPTables для трафика между gfs01 и gfs02
Введите следующие на gfs01 , чтобы разрешить весь трафик от узла gfs02:
|
1 |
$ sudo ufw allow proto any from 192.168.1.12 to 192.168.1.11 |
Введите следующие на gfs02 , чтобы разрешить весь трафик от узла gfs01:
|
1 |
$ sudo ufw allow proto any from 192.168.1.11 to 192.168.1.12 |
Шаг 3 — Настройка репозитория GlusterFS
Введите следующую команду на обоих gfs01 и gfs02 серверах , чтобы установить последнюю версию сервера GlusterFS:
|
1 2 |
$ sudo add-apt-repository ppa:gluster/glusterfs-3.9 $ sudo apt-get update |
Шаг 4 — Установка GlusterFS
Введите следующую команду apt-get command/apt command команду на обоих gfs01 и gfs02 серверах:
|
1 |
$ sudo apt-get install glusterfs-server |
Шаг 5 — GlusterFS обновление пакета
Ваше общее хранилище может быть повреждено если обновлять GlusterFS во время когда он запущен. Лучше всего, чтобы отфильтровать автоматические обновления безопасности. Позже вы узнаете, как повысить безопасность GlusterFS. Введите следующую команду на обоих gfs01 и gfs02 серверах:
|
1 |
$ sudo apt-mark hold glusterfs* |
Шаг 6 — Настройка и форматирование диска на каждом сервере
Вам необходимо ввести следующие команды на обоих серверах gfs01 (будьте осторожны с именами устройств в то время как создаете блоки разделов устройства):
|
1 2 3 4 5 6 7 |
$ sudo fdisk /dev/vdb $ sudo mkfs.ext4 /dev/vdb1 $ sudo mkdir -p /nodirectwritedata/brick1 $ sudo echo '/dev/vdb1 /nodirectwritedata/brick1 ext4 defaults 1 2' >> /etc/fstab $ mount -a $ sudo mkdir /nodirectwritedata/brick1/gvol0 $ df -H |
Вам необходимо ввести следующие команды на обоих серверах gfs02:
|
1 2 3 4 5 6 7 |
$ sudo fdisk /dev/vdb $ sudo mkfs.ext4 /dev/vdb1 $ sudo mkdir -p /nodirectwritedata/ brick2 $ sudo echo '/dev/vdb1 /nodirectwritedata/ brick2 ext4 defaults 1 2' >> /etc/fstab $ mount -a $ df -H $ sudo mkdir /nodirectwritedata/brick2/gvol0 |
Не редактируйте и не записывайте файлы непосредственно в /nodirectwritedata/brick1/ или /nodirectwritedata/brick2/ на каждом сервере. Прямая запись испортит ваш массив.
Шаг 7 — Убедитесь в том, что служба GlusterFS запущена
Введите следующие команды:
|
1 |
$ sudo systemctl status glusterfs-server.service |
Если не работает запустите её:
|
1 |
$ sudo systemctl start glusterfs-server.service |
Включить GlusterFS во время загрузки:
|
1 |
$ sudo systemctl enable glusterfs-server.service |
Шаг 8 — Настройка trusted pool
От gfs01 сервере:
|
1 2 |
$ sudo gluster peer probe gfs02 peer probe: success. Host gfs02 port 24007 already in peer list |
От gfs02 сервере:
|
1 2 |
$ sudo gluster peer probe gfs01 peer probe: success. Host gfs01 port 24007 already in peer list |
Шаг 9 — Настройка раздела GlusterFS
НА gfs01 (или gfs02) :
|
1 2 3 |
# gluster volume create gvol0 replica 2 gfs01:/nodirectwritedata/brick1/gvol0 gfs02:/nodirectwritedata/brick2/gvol0 |
Пример результата:
|
1 |
volume create: gvol0: success: please start the volume to access data |
|
1 |
# gluster volume start gvol0 |
Пример результата:
|
1 |
volume start: gvol0: success |
Чтобы увидеть статус, введите следующую команду:
|
1 |
# gluster volume status |
Для того, чтобы увидеть информацию о объеме, введите следующую команду:
|
1 |
# gluster volume info |
Шаг 10 — Монтирование клиентов
Теперь наш кластер запущен и работает. Это время, наши клиенты могут устанавливать такие совместно используемые stoage. Вы можете иметь 1,2,3,4 или столько, сколько вы хотите клиент в соответствии с вашими сетевыми ресурсами. Вы можете настроить gfs01 и gfs02, как и сам клиент тоже.
Монтирование на gfs01 / gfs02 узел
Введите следующую команду:
|
1 2 |
$ sudo mkdir /mnt/www/ $ sudo mount -t glusterfs gfs01:/gvol0 /mnt/www/ |
Обновите /etc/fstab
|
1 |
echo 'gfs01:/gvol0 /mnt/www glusterfs defaults,_netdev 0 0' >> /etc/fstab |
Сохраните и закройте файл. Установите его:
|
1 2 |
$ sudo mount -a $ df -H |
Монирование на другом сервере с именем www1
Если www1 использует Debian / Ubuntu Linux подобных ОС, введите следующую команду:
|
1 2 3 4 |
$ sudo add-apt-repository ppa:gluster/glusterfs-3.9 $ sudo apt-get update $ sudo apt-get install glusterfs-client $ sudo mkdir -p /mnt/www/ |
Редактируйте /etc/hosts файл и обновите его следующим образом:
|
1 2 |
192.168.2.11 gfs01 192.168.2.12 gfs02 |
Сохраните и закройте файл. Обновите /etc/fstab файл для монтирования общего хранилища:
Обновление /etc/fstab:
|
1 2 3 |
echo 'gfs01:/gvol0 /mnt/www glusterfs defaults,_netdev 0 0' >> /etc/fstab $ sudo mount -a $ df -H |
Шаг 11 — Тестирование
Cd /mnt/www/ и создать некоторые файлы на www1 или gfs02:
|
1 2 3 4 |
# cd /mnt/www # mkdir test # cd test # cp /etc/*.conf . |
Вы должны увидеть файлы на обоих gfs02, gfs01 и www1.
Примечание о настройке network.ping.timeout
И, наконец выполните следующую команду на обоих gfs02 и gfs01 для установки таймаута сети до 5 секунд от дефолта 42:
|
1 |
$ sudo gluster volume set gvol0 network.ping-timeout "5" |
Проверим
|
1 |
$ sudo gluster volume get gvol0 network.ping-timeout |
Замечание о Apache DocumentRoot
Вам нужно отредактировать httpd.conf и установить DocumentRoot, указав каталог /mnt/www/
Услуги построения и поддержки отказоустойчивых, распределенных, высоконагруженных систем, обращайтесь [email protected]
Pingback : Как включить TLS/SSL-шифрование Glusterfs » Администрирование серверов