Praktische Begrenzung der Anzahl von BTRFS-Snapshots?

Ich erwäge, btrfs auf meinem Datenlaufwerk zu verwenden, damit ich Snapper oder so etwas wie Snapper verwenden kann, um zeitbasierte Snapshots zu erstellen. Ich glaube, dass ich damit alte Versionen meiner Daten durchsuchen kann. Dies käme zu meiner aktuellen Offsite-Sicherung hinzu, da bei einem Laufwerksfehler die Daten und die Snapshots gelöscht würden.

Nach meinem Verständnis belegen BTRFS-Snapshots nicht viel Platz (Metadaten und die Blöcke, die sich geändert haben, plus möglicherweise etwas Overhead), sodass der Platz keine Einschränkung zu sein scheint.

Wenn ich über eine Million Schnappschüsse (z. B. zwei Jahre lang jede Minute einen Schnappschuss) verfüge, würde dies zu Chaos führen, vorausgesetzt, ich habe genügend Speicherplatz für die Daten, die geänderten Daten und die Metadaten?

Wenn die Anzahl der Schnappschüsse praktisch begrenzt ist, hängt dies von der Anzahl der Dateien und / oder der Größe der Dateien ab?

Als jemand, der seit fast Jahren ein btrfsDateisystem verwendet, kann ich mit Sicherheit sagen, dass die Anzahl der Schnappschüsse, die leicht zu erreichen sind, praktisch nicht begrenzt zu sein scheint. Es gibt jedoch einige Einschränkungen. Dateisystem kann zur Fragmentierung führen. Es wird daher empfohlen, die integrierte Online-Defragmentierungsfunktion zu verwenden . Darüber hinaus kann man die Komprimierungsfunktion gut nutzen . Mit diesen Maßnahmen sollten die meisten Leistungsprobleme behoben werden, die bei der Erstellung vieler Schnappschüsse auf einem vernünftigen Computer auftreten können.Arch Linux2btrfsbtrfsbtrfs

Wie Sie vielleicht wissen, werden btrfsSubvolumes als Dateisysteme behandelt, und daher ist die Anzahl der Snapshots in der Tat begrenzt: nämlich durch die Größe der Dateien. Laut btrfsWiki ist die maximal erreichbare Dateigröße 2^64 byte == 16 EiB^[1] .

Abgesehen von diesen Einschränkungen kann es möglicherweise immer zu Problemen kommen, wenn der Speicherplatz knapp wird, ohne dass Sie dies sofort bemerken, da das Überprüfen auf freien Speicherplatz in btrfsDateisystemen manchmal schwierig sein kann, dh ohne zwischen verschiedenen Methoden zum Messen des freien Speicherplatzes in einem btrfsDateisystem unterscheiden zu können Verwenden Sie ganz einfach die Übersicht darüber, wie viel Speicherplatz noch vorhanden ist. Ein möglicher Weg, um dieses Szenario zu verhindern, ist die Verwendung von Quoten. Dies stellt sicher, dass Benutzer (oder der Benutzer, wenn es nur einer ist) nur eine bestimmte Menge an Speicherplatz verwenden können. Dieses Konzept wird hier und auch hier sehr gut diskutiert .

Last but not least eine Warnung: Ich bin kein Experte für btrfsDateisysteme und habe über diese Dinge erst gelesen, als ich vor einiger Zeit die gleiche Frage hatte. Darüber hinaus gibt es immer das Problem, dass btrfses sich um ein "sich schnell bewegendes Ziel" handelt (nette Formulierung, die Arch Linuxmeiner Meinung nach von einer Wiki-Seite gestohlen wird ), sodass sich die Dinge ändern könnten.

Obwohl es technisch keine Begrenzung für die Anzahl der Schnappschüsse gibt, habe ich in der BTRFS-Mailingliste gefragt :

Die (praktische) Antwort hängt in gewissem Maße davon ab, wie Sie btrfs verwenden.

Btrfs hat Skalierungsprobleme, weil zu viele Snapshots vorhanden sind (oder weil die Reflink-Snapshots dieselben Skalierungsprobleme hervorrufen können), und einzelne bis niedrige zweistellige Werte für Snapshots pro aufgenommenem Subvolume sind aus diesem Grund nach wie vor die beste Empfehlung.

Die Skalierungsprobleme betreffen jedoch in erster Linie die btrfs-Wartungsbefehle selbst, balance, check, subvolume delete. Während Millionen von Schnappschüssen das Gleichgewicht zum Beispiel praktisch unbrauchbar machen (es wird eine Art Arbeit sein, aber es könnte Monate dauern), sind normale Dateisystemoperationen wie das Lesen und Speichern von Dateien in der Regel nicht betroffen, außer in dem Maße, in dem die Fragmentierung zum Problem wird ( Die Kuh-Dateisysteme wie btrfs sind für die Fragmentierung bekannt, es sei denn, es werden Schritte wie Defragmentierung unternommen, um sie zu reduzieren.

Es scheint, dass die Verwendung von Snapshots als Archivsicherung ähnlich wie bei Time Machine / Snapper keine gute Idee ist.

Sie können insgesamt 2 ⁶⁴ Snapshots und Subvolumes erstellen.

Die btrfsDesign-Wiki-Seite sagt (empahsis mine):

Subvolumes sind im Grunde ein benannter Btree, der Dateien und Verzeichnisse enthält. Sie haben Inodes innerhalb des Baumes der Baumwurzeln und können Nicht-Stammbesitzer und -gruppen haben. Subvolumes können mit einem Kontingent von Blöcken versehen werden. Sobald dieses Kontingent erreicht ist, sind keine neuen Schreibvorgänge mehr zulässig. Alle Blöcke und Dateierweiterungen in Subvolumes werden mit einem Referenzzähler versehen, um eine Momentaufnahme zu ermöglichen. Auf dem FS können bis zu 2 ⁶⁴ Subvolumes erstellt werden.

Snapshots sind mit Subvolumes identisch , aber ihr Root-Block wird anfänglich mit einem anderen Subvolume geteilt. Wenn der Snapshot erstellt wird, wird die Referenzanzahl im Stammblock erhöht, und das Transaktionssystem für das Kopieren beim Schreiben stellt sicher, dass Änderungen, die entweder im Snapshot oder im Quell-Subvolume vorgenommen wurden, für diesen Stamm privat sind. Schnappschüsse sind beschreibbar und können beliebig oft wiederholt werden. Wenn schreibgeschützte Snapshots gewünscht werden, wird das Blockkontingent zum Zeitpunkt der Erstellung auf eins festgelegt.