Laufwerksausfälle
Ersetzen Sie ein ausgefallenes Laufwerk in einer RustFS-Bereitstellung und lassen Sie RustFS die Daten automatisch wiederherstellen.
RustFS verwendet Erasure Coding, damit Daten lesbar und schreibbar bleiben, wenn einzelne Laufwerke ausfallen. Nachdem Sie ein ausgefallenes Laufwerk ersetzt haben, stellt RustFS die fehlenden Daten automatisch darauf wieder her (Healing).
Ausgefallenes Laufwerk aushängen
Hängen Sie das ausgefallene Laufwerk auf Betriebssystemebene aus, bevor Sie die physische Festplatte ersetzen. So vermeiden Sie I/O-Fehler im Dateisystem oder in RustFS während des Austauschs.
sudo umount /data/rustfs0Hinweise
- Wenn das Laufwerk mehrere Einhängepunkte hat, führen Sie
umountfür jeden aus. - Wenn Sie den Fehler „device is busy“ sehen, stoppen Sie zuerst den RustFS-Dienst:
sudo systemctl stop rustfsAusgefallenes Laufwerk ersetzen
Nachdem Sie das ausgefallene Laufwerk physisch ersetzt haben, partitionieren und formatieren Sie das neue Laufwerk und vergeben Sie dieselbe Bezeichnung wie beim ursprünglichen Laufwerk.
sudo mkfs.xfs -f -i size=512 -n ftype=1 -L RUSTFS0 /dev/sdbAnforderungen
- Das neue Laufwerk ist mindestens so groß wie das ursprüngliche Laufwerk.
- Verwenden Sie dasselbe Dateisystem wie bei den anderen Laufwerken (XFS; siehe die Installationsanleitung).
- Wir empfehlen, Dateisysteme über die Bezeichnung (LABEL) oder die UUID einzuhängen, damit Einhängungen korrekt bleiben, wenn sich Gerätenamen nach einem Neustart ändern.
/etc/fstab oder die RustFS-Konfiguration aktualisieren
Prüfen Sie, dass Bezeichnungen oder UUIDs in den Einträgen von /etc/fstab auf das neue Laufwerk zeigen. Der Einhängepunkt muss mit dem in RUSTFS_VOLUMES (in /etc/default/rustfs) genannten identisch bleiben, damit das wiederhergestellte Laufwerk dem Cluster unter demselben Pfad beitritt.
UUID=<filesystem-uuid> /data/rustfs0 xfs defaults,noatime,nodiratime 0 0Tipps
- Bei Verwendung einer UUID:
sudo blkid -s UUID -o value /dev/sdb- Nachdem Sie
/etc/fstabbearbeitet haben, prüfen Sie die Syntax:
sudo mount -a
findmnt /data/rustfs0Neues Laufwerk wieder einhängen
Führen Sie die folgenden Befehle aus, um alle konfigurierten Dateisysteme einzuhängen und RustFS zu starten:
sudo systemctl start rustfsPrüfen Sie, dass alle erwarteten Dateisysteme eingehängt sind:
df -hT /data/rustfs0Fehler beim Einhängen
Wenn ein Einhängen fehlschlägt, prüfen Sie, dass Bezeichnungen oder UUIDs in /etc/fstab denen des Zieldateisystems entsprechen.
Datenwiederherstellung auslösen und beobachten
Sobald RustFS an einem bekannten Einhängepunkt ein frisch formatiertes Laufwerk erkennt, stellt der Hintergrund-Scanner die fehlenden Daten automatisch darauf wieder her. Ein manueller Befehl ist nicht erforderlich. Bestätigen Sie, dass die Wiederherstellung begonnen hat, und verfolgen Sie den Fortschritt in den Dienstprotokollen:
journalctl -u rustfs -f
tail -f /var/log/rustfs/rustfs.logSie können auch die RustFS Console öffnen und den Festplattenstatus des betroffenen Knotens prüfen.
Hinweise
- Die Datenwiederherstellung läuft im Hintergrund und wirkt sich in der Regel wenig auf Client-Anfragen aus.
- Wenn die Datenwiederherstellung endet, melden die Protokolle den Erfolg oder listen Objekte, deren Wiederherstellung fehlgeschlagen ist.
Anschlussprüfungen und Hinweise
- Leistungsüberwachung
- Die I/O-Last kann während der Datenwiederherstellung schwanken. Wir empfehlen, die Auslastung von Festplatte und Netzwerk zu überwachen.
- Ausfälle einer Charge
- Wenn mehrere Laufwerke derselben Fertigungscharge ausfallen, prüfen Sie die übrigen Laufwerke dieser Charge häufiger.
- Regelmäßige Ausfalltests
- Führen Sie regelmäßig Übungen zum Laufwerksausfall durch, damit Ihr Team das Wiederherstellungsverfahren proben kann.
- Wartungsfenster
- Planen Sie bei hoher Ausfallrate eigene Wartungsfenster, um Austausch und Datenwiederherstellung zu beschleunigen.