Spiegeln mit Backup der geänderten Dateien

340
Yannick Wurm

Wir haben einige große Speicheranforderungen (genomische Daten), für die wir etwas Archivspeicherplatz kaufen müssen (einmal schreiben, selten lesen, Dateien bleiben leicht zugänglich, jeder Benutzer sollte Zugriff auf seinen eigenen "Archiv" -Ordner haben). Eine "einfache" und relativ kostengünstige Lösung besteht darin, eine große NAS-Box zu erhalten, die für sechzig 6-TB-Disks = 360 TB Rohspeicherplatz geeignet ist. (zB dnuk, 45drives ...)

Aber was ist, wenn es ein Feuer / Flut / Diebstahl gibt? Einfache Lösung: Holen Sie sich eine zweite davon, richten Sie sie in einem anderen Gebäude / Campus ein und stellen Sie eine schnelle Verbindung für die tägliche Spiegelung von Master zu Slave sicher. Hierfür gibt es einfache Software.

Dies schützt vor einer Katastrophe. Es schützt jedoch nicht vor naiven Benutzern, die versehentlich ihre Dateien löschen und einen Monat später wieder haben möchten.

Gibt es eine einfache Softwarelösung, die erkennt, wenn Dateien geändert oder gelöscht werden und die alten Dateien an einen anderen Ort verschoben / kopiert werden? (Idealerweise würde dies auf dem "Slave" vorkommen; wir könnten dafür eine zusätzliche NAS-Box kaufen).

Irgendwelche Ideen? Vielen Dank! Yannick

1
Wir verwenden dazu inkrementelle rsync-Sicherungen mit Links, die Änderungen werden jedoch nicht überwacht oder erkannt, sondern nur nach Zeitplan ausgeführt. Windows verfügt über "Vorherige Versionen" über Schattenkopien von freigegebenen Ordnern. ssnobody vor 8 Jahren 0
Hmm - Danke @ssnobody, dass [relevant scheint] (http://www.mikerubel.org/computers/rsync_snapshots/). Haben Sie die rsync-inkrementellen Sicherungen mit Verknüpfungsansatz mit Daten verwendet, darunter auch Dateien im TB-Maßstab und z. B. 50 Millionen kleine Dateien? Yannick Wurm vor 8 Jahren 0
Ich habe es nicht persönlich in dieser Größenordnung ausprobiert, wir verwenden es auf mehreren Dateiservern und auf einem Webserver, auf dem maximal 6 TB Speicherplatz zur Verfügung stehen und Dateien, die größer als 4 GB sind, selten sind. Ich glaube nicht, dass es Probleme beim Lösen haben wird. Harte Links sind in das Betriebssystem integriert. Wenn Ihr System bereits Dateien mit TB-Größe verarbeitet, würde ich nicht glauben, dass dies zusätzliche Probleme verursachen würde. ssnobody vor 8 Jahren 0

1 Antwort auf die Frage

1
Angstrom

Wenn Sie mit Windows arbeiten, ist Bvckup 2 genau das, was Sie brauchen.

Die inkrementelle Weitergabe modifizierter Dateien ist kein großes Problem. Jede Sicherungs- / Synchronisierungssoftware kann dies tun. Der Trick besteht darin, die Umbenennungserkennung unterstützen zu lassen. Es gibt zwei Möglichkeiten, dies zu tun - erstens müssen Sie das Dateisystemprotokoll analysieren (NTFS hat beispielsweise ein Protokoll), um die tatsächlichen Änderungen zu sehen. Zweitens: Durchsuchen Sie beide Speicherorte und führen Sie dann eine vergleichende Analyse durch, um festzustellen, ob eine der beiden vorhanden ist Gelöschte Dateien stimmen mit den neu erstellten überein. Ich kenne keine einzige Sicherungssoftware, die mit den Journalen funktioniert, daher ist die erste Option nicht wirklich eine Option. Für die zweite Option benötigen Sie eine Software, die Sicherungspläne erstellt, dh sie durchsucht zuerst die Bäume, analysiert sie und gibt dann die Liste der auszuführenden Schritte aus (anstatt die Änderungen sofort in der Scanphase abzustimmenrobocopy /mirmacht es zum Beispiel). Das Problem hier ist die Größe Ihres Backups. Nur sehr wenige Backup-Apps werden einige Millionen Dateien nicht verschlucken, allein 50 Millionen. Ich habe die obige App erfolgreich mit einem 6-Millionen-Backup verwendet und vermute, dass sie auch Ihren Fall durchschauen kann.

Danke @angstrom - leider nicht unter Windows ... unser gesamtes Zeug ist auf Linux-Servern Yannick Wurm vor 8 Jahren 0