Gedeelde schijven met hoge beschikbaarheid met Vultr Block Storage en GlusterFS

• GlusterFS instellen
• Belangrijke opmerking over opnieuw monteren
• Belangrijke opmerking over back-ups
• FAQ

GlusterFS is een netwerkgebonden bestandssysteem waarmee u effectief twee schijven kunt delen over meerdere apparaten op het netwerk. Dit bestandssysteem past perfect in het aanbod van Vultr's blokopslag, omdat je een schijf over het netwerk kunt delen die niet kant-en-klaar mogelijk is.

In termen van functies, uitbreidbaarheid en betrouwbaarheid heeft GlusterFS bewezen een van de meest geavanceerde en stabiele bestandssystemen te zijn die beschikbaar zijn.

Wanneer er wijzigingen worden aangebracht aan de schijf op één server, worden deze automatisch in realtime gerepliceerd naar de andere server. Om dit te bereiken en deze gids te volgen, hebt u nodig:

• Twee Vultr-cloudinstanties, bij voorkeur met hetzelfde besturingssysteem.
• Twee blokopslagstations van dezelfde grootte.

Nadat u deze twee blokopslagschijven hebt besteld, moet u ze aan VM 1 en VM 2 koppelen. Aangezien we beide blokopslagschijven voor hetzelfde bestandssysteem zullen gebruiken, krijgt u het bruikbare bedrag door de totale grootte van beide schijven door twee te delen. van GB's. Als u bijvoorbeeld twee schijven van 100 GB heeft, is 100 GB bruikbaar (100 * 2/2).

Bovendien moeten beide VM's zich op dezelfde locatie bevinden om op hetzelfde particuliere netwerk te zijn. We maken verbinding met de servers via hun interne IP-adressen. Merk op dat we de gegevens op het blokopslagstation zullen wissen. Zorg ervoor dat ze gloednieuw en ongeformatteerd zijn.

In deze gids, zullen we gebruiken storage1en storage2respectievelijk met een eigen IP-adressen 10.0.99.10 en 10.0.99.11. Uw servernamen en IP-adressen zullen waarschijnlijk verschillen, dus zorg ervoor dat u ze wijzigt tijdens het instellen van GlusterFS.

Deze gids is geschreven met CentOS / RHEL 7 in gedachten. GlusterFS is echter relatief compatibel met meerdere Linux-distributies.

GlusterFS instellen

Stap 1: Wijzig het /etc/hostsbestand

Om snel verbinding te kunnen maken met de respectievelijke instanties, moeten we gemakkelijk te onthouden namen aan het hostsbestand toevoegen. Open het /etc/hostsbestand en voeg de volgende regels onderaan toe:

10.0.99.10 storage1
10.0.99.11 storage2

Stap 2: voeg de schijf toe storage1

SSH in storage1en voer de volgende opdrachten uit. Standaard zijn gekoppelde blokopslagstations gemount als /dev/vdb. Als dit om welke reden dan ook in uw geval anders is, moet u dit wijzigen in de onderstaande opdrachten.

Formatteer de schijf:

fdisk /dev/vdb

Druk op "enter" voor de volgende drie vragen (met betrekking tot partitiegrootte en dergelijke, we willen alle beschikbare ruimte op de blokopslagstations gebruiken) en schrijf "w" om deze wijzigingen naar de schijf te schrijven. Schrijf nadat dit met succes is voltooid:

/sbin/mkfs.ext4 /dev/vdb1

We zijn doorgegaan en hebben nu een bestandssysteem gemaakt, omdat Vultr standaard geen bestandssystemen op blokopslag maakt.

Vervolgens gaan we de map maken waarop we onze bestanden zullen opslaan. Je kunt deze naam wijzigen, maar je zult hem niet vaak zien verschijnen, dus om de complexiteit te elimineren, raad ik aan om hem met rust te laten.

mkdir /glusterfs1

Als u de schijf automatisch wilt opstarten tijdens het opstarten, opent u /etc/fstaben voegt u de volgende regel onder aan het bestand toe:

/dev/vdb1 /glusterfs1      ext4    defaults        1 2

Monteer ten slotte de schijf:

mount -a

De koppeling blijft behouden tijdens het opnieuw opstarten, dus wanneer u uw server opnieuw opstart, wordt de schijf automatisch opnieuw aangekoppeld.

Stap 3: Voeg de schijf toe storage2

Nu we de schijf hebben toegevoegd en gemonteerd storage1, moeten we ook de schijf maken storage2. De commando's verschillen nauwelijks. Voor fdisk, volgt u dezelfde stappen als hierboven.

fdisk /dev/sdb
/sbin/mkfs.ext4 /dev/sdb1
mkdir /glusterfs2

Bewerk /etc/fstaben voeg de volgende regel toe:

/dev/vdb1 /glusterfs2      ext4    defaults        1 2

Net als bij storage1, wordt de schijf automatisch opnieuw opgestart.

Monteer de schijf:

mount -a

Laten we tot slot kijken of we de partitie kunnen zien verschijnen:

df -h

Je zou je schijf hier moeten zien verschijnen. Als dit niet het geval is, probeer dan de bovenstaande stappen te volgen.

Stap 4: GlusterFS installeren op storage1enstorage2

We moeten vervolgens GlusterFS installeren. Voeg de repository toe en installeer GlusterFS:

rpm  -ivh  http://dl.fedoraproject.org/pub/epel/7/x86_64/e/epel-release-7-5.noarch.rpm
wget -P /etc/yum.repos.d http://download.gluster.org/pub/gluster/glusterfs/3.7/3.7.5/CentOS/glusterfs-epel.repo
yum -y install glusterfs glusterfs-fuse glusterfs-server

Er is een kans dat u een foutmelding krijgt yumomdat de handtekening voor de repository niet klopt. In dat geval is het veilig om te forceren om niet te controleren op de GPG-handtekening:

yum -y install glusterfs glusterfs-fuse glusterfs-server --nogpgcheck

Voer op beide servers de volgende opdrachten uit om GlusterFS nu te starten en automatisch te starten na opnieuw opstarten:

systemctl enable glusterd.service
systemctl start glusterd.service

Als u een oudere versie van CentOS gebruikt, kunt u gebruik maken van de serviceen chkconfigopdrachten:

chkconfig glusterd on
service glusterd start

Stap 5: De firewall in- storage1en uitschakelenstorage2

Hoewel dit niet per se de beste oplossing is, is het een goed idee om de firewall uit te schakelen om mogelijke conflicten met geblokkeerde poorten te voorkomen. Als u dit niet prettig vindt, kunt u de regels naar wens aanpassen, maar vanwege de aard van GlusterFS raad ik u ten zeerste aan de firewall uit te schakelen. Aangezien een privé-netwerk eigenlijk privé is op Vultr (en u hoeft andere klanten niet uit te schakelen), kunt u eenvoudig al het inkomende verkeer van internet blokkeren en toegestane verbindingen met het particuliere netwerk beperken. Het uitschakelen van de firewall en het niet wijzigen van andere systeemconfiguraties zou echter ook voldoende zijn:

systemctl stop firewalld.service
systemctl disable firewalld.service

In het geval dat een oudere CentOS versie die geen ondersteuning gebruikt u systemctl, gebruik maken van de serviceen chkconfigopdrachten:

service firewalld stop
chkconfig firewalld off

Als je het niet gebruikt firewalld, probeer dan uit te schakelen iptables:

service iptables stop
chkconfig iptables off

Stap 6: Voeg servers toe aan de opslagpool

Nadat we de firewall hebben uitgeschakeld, kunnen we beide servers toevoegen aan de opslagpool. Dit is een zwembad dat bestaat uit alle beschikbare opslag. Voer de volgende opdracht uit op storage1:

gluster peer probe storage2

Wat deze opdracht doet, is toevoegen storage2aan zijn eigen opslagpool. Door de volgende opdracht uit te voeren storage2, worden beide schijven gesynchroniseerd:

gluster peer probe storage1

Nadat we dit op beide servers hebben uitgevoerd, moeten we de status op beide servers controleren:

gluster peer status

Beide servers moeten de status "Peers: 1" hebben. Een veelgemaakte fout is dat mensen verwachten dat ze het zullen zien Peers: 2, maar zoals storage1bij peering storage2en vice versa, turen ze niet met zichzelf. Daarom Peers: 1is wat we nodig hebben.

Stap 7: Maak een gedeelde drive aan storage1

Nu beide servers via GlusterFS met elkaar kunnen verbinden, gaan we een gedeelde schijf maken.

Aan storage1, voer uit:

gluster volume create mailrep-volume replica 2  storage1:/glusterfs1/files  storage2:/glusterfs2/files force

Het volume is nu gemaakt. In GlusterFS moet u een volume "starten" zodat het actief wordt gedeeld op meerdere apparaten. Laten we beginnen:

gluster volume start mailrep-volume

Kies vervolgens een map die op het volume moet staan ​​en over beide servers moet worden gerepliceerd. In deze tutorial gebruiken we de map /var/files. Dit kan natuurlijk van alles zijn. Maak het storage1 alleen aan :

mkdir /var/files

Monteer het vervolgens:

mount.glusterfs storage1:/mailrep-volume /var/files/

Update /etc/fstabzodat de schijf automatisch bij het opstarten wordt gemount. Voeg het volgende toe:

storage1:/mailrep-volume /var/files glusterfs defaults,_netdev 0 0

Monteer de schijf opnieuw:

mount -a

Stap 8: een gedeelde drive maken op storage2

Nu we een gedeelde Drive hebben gemaakt storage1, moeten we er ook een maken storage2. Maak een map met dezelfde locatie / pad en naam:

mkdir /var/files
mount.glusterfs storage2:/mailrep-volume /var/files/

storage1Voeg, net als bij , de volgende regel toe aan /etc/fstab:

storage2:/mailrep-volume /var/files glusterfs defaults,_netdev 0 0

Monteer de schijf opnieuw:

mount -a

Stap 9: Test de gedeelde opslag

Navigeer naar de /var/filesmap op storage1en maak een bestand aan:

cd /var/files
touch created_on_storage1

Ga vervolgens naar de storage2server. Voer uit ls -laen je zou het bestand moeten zien created_on_storage1verschijnen.

Ga storage2naar de /var/filesmap en maak een bestand aan:

cd /var/files
touch created_on_storage2

Ga terug naar storage1en voer uit ls -la /var/files. U zou het bestand created_on_storage2hier moeten zien verschijnen.

Stap 10: Start alle servers opnieuw op (optioneel)

Om te controleren of uw installatie blijft bestaan ​​tijdens het opnieuw opstarten, dient u als best practice alle servers opnieuw op te starten. Zoals eerder vermeld, moet u wachten tot de ene server actief is en vervolgens de andere opnieuw opstarten zodat de gedeelde schijf automatisch wordt gemount.

Start storage1eerst opnieuw op, wacht tot het klaar is en start dan opnieuw op storage2. Log nu in en voer uit op beide servers:

cd /var/files
ls -la

U zou nu beide bestanden moeten zien verschijnen. Zorg ervoor dat u begint zonder bestanden op het volume, dus verwijder de testbestanden die we hebben gemaakt. U kunt dit doen op storage1, storage2of beide. Wijzigingen worden onmiddellijk gerepliceerd:

cd /var/files
rm created_on_storage1
rm created_on_storage2

U moet op beide servers een identiek gedeeld volume hebben, ongeacht de acties op beide volumes.

Je hebt nu een volwaardige GlusterFS-setup opgezet met 100 GB (of meer) bruikbare ruimte. Als u in de toekomst meer nodig heeft, is de installatie eenvoudig schaalbaar om meer capaciteit en / of meer servers toe te voegen als uw werklast dit vereist.

Bedankt voor het lezen!

Belangrijke opmerking over opnieuw monteren

Met GlusterFS kunt u uw gegevens op twee schijven up-to-date houden. Houd er echter rekening mee dat wanneer beide servers tegelijkertijd opnieuw worden opgestart , u de schijven op beide servers moet forceren. U moet de koppeling handmatig forceren door de volgende opdracht uit te voeren:

gluster volume start mailrep-volume force

Dat komt omdat een van de servers als server fungeert en de andere als client fungeert. Hoewel het verschil in de praktijk niet zo gemakkelijk merkbaar is, betekent dit dat wanneer u beide servers opnieuw moet opstarten, u de ene opnieuw moet opstarten, moet wachten totdat deze is opgestart en vervolgens de andere opstart.

Belangrijke opmerking over back-ups

Hoewel uw gegevens over twee schijven worden gerepliceerd, moet u uw gegevens ten minste driemaal laten repliceren. Hoewel uw gegevens beter zijn beschermd tegen gegevensbeschadiging en dergelijke, moet u er rekening mee houden dat wijzigingen onmiddellijk plaatsvinden en dat u op geen enkele manier wordt beschermd tegen menselijke fouten. Wanneer u alle bestanden op één schijf verwijdert, worden deze wijzigingen onmiddellijk gerepliceerd naar de andere schijf, wat betekent dat uw gegevens in beide gevallen worden gewist.

Gelukkig zijn er meerdere manieren om dit te voorkomen. Ten eerste raad ik aan om back-ups op uw cloudinstantie zelf in te schakelen. Hoewel deze back-ups geen gegevens bevatten over de blokopslag, beschermt het de gegevens op de instantie zelf.

Als het gaat om het maken van een back-up van de gegevens op de blokopslag zelf, raad ik aan om een ​​apart exemplaar (bijvoorbeeld een SATA-abonnement) op te starten, zodat u bijvoorbeeld elke nacht een back-up van een van de twee aangesloten servers kunt uitvoeren. Op deze manier zijn uw gegevens veilig op een ander afzonderlijk apparaat.

FAQ

Kan ik mijn schijfopslag vergroten?

U kunt de opslagruimte voor blokken vergroten via het Vultr-configuratiescherm. U moet de grootte van de schijf binnen het besturingssysteem daarna wijzigen, maar dat valt buiten het bestek van dit artikel.

Kan ik de blokopslag op meer dan twee servers aansluiten?

Hoewel deze handleiding is geschreven voor twee servers (dus twee blokopslagstations die op beide servers zijn aangesloten), is het mogelijk om deze handleiding te gebruiken en deze ook voor meer dan twee servers te gebruiken. Een opstelling met meer dan twee servers / schijven kan er voor 6 servers zo uitzien, bijvoorbeeld:

VM: storage1
VM: storage2
VM: storage3
VM: storage4
Block Storage: attached to storage1
Block Storage: attached to storage2
Block Storage: attached to storage3
Block Storage: attached to storage4

Aangezien alle blokopslagschijven een capaciteit hebben van bijvoorbeeld 200 GB, krijgt u 200 * 4/4. Met andere woorden, de bruikbare ruimte is altijd de capaciteit van een opslagblok met één blok. Dat komt omdat één server met gekoppelde blokopslag door GlusterFS wordt behandeld als de "master" en op de andere servers wordt gerepliceerd. De setup is echter gebouwd om te kunnen overleven zonder een masterserver, waardoor het zo'n redundante en betrouwbare, stabiele oplossing is.