Das neu erstellte XFS-Dateisystem zeigt 78 GB an

Wir haben ein RAID 6-Array mit 12 TB, das als einzelne Partition mit einem XFS- Dateisystem eingerichtet werden soll. Beim Erstellen des neuen Dateisystems werden 78 GB verwendet, es befinden sich jedoch keine Dateien auf dem Laufwerk.

[root@i00a ~]# df -h
Filesystem      Size  Used Avail Use% Mounted on
devtmpfs         32G     0   32G   0% /dev
tmpfs            32G     0   32G   0% /dev/shm
tmpfs            32G   11M   32G   1% /run
tmpfs            32G     0   32G   0% /sys/fs/cgroup
/dev/sdb3       154G  3.9G  150G   3% /
/dev/sdb2      1014M  153M  862M  16% /boot
/dev/sdb1       599M  6.7M  593M   2% /boot/efi
/dev/sdc1       187G  1.6G  185G   1% /var
tmpfs           6.3G     0  6.3G   0% /run/user/0
/dev/sda1        11T   78G   11T   1% /export/libvirt

Habe ich etwas falsch gemacht? Ist das beabsichtigt?

Es sieht so aus, als würde das Dateisystemprotokoll nur etwa 2 GB belegen, und ich kann nicht herausfinden, was den Speicherplatz sonst noch belegen könnte.

[root@i00a ~]# xfs_info /export/libvirt/
meta-data=/dev/sda1              isize=512    agcount=11, agsize=268435455 blks
         =                       sectsz=512   attr=2, projid32bit=1
         =                       crc=1        finobt=1, sparse=1, rmapbt=0
         =                       reflink=1
data     =                       bsize=4096   blocks=2929458688, imaxpct=5
         =                       sunit=0      swidth=0 blks
naming   =version 2              bsize=4096   ascii-ci=0, ftype=1
log      =internal log           bsize=4096   blocks=521728, version=2
         =                       sectsz=512   sunit=0 blks, lazy-count=1
realtime =none                   extsz=4096   blocks=0, rtextents=0

Partitionsinformationen:

[root@irb00a ~]# parted /dev/sda1
GNU Parted 3.2
Using /dev/sda1
Welcome to GNU Parted! Type 'help' to view a list of commands.
(parted) print
Model: Unknown (unknown)
Disk /dev/sda1: 12.0TB
Sector size (logical/physical): 512B/512B
Partition Table: loop
Disk Flags:

Number  Start  End     Size    File system  Flags
 1      0.00B  12.0TB  12.0TB  xfs

Dies ist ein Dell FX2 mit vier FC430-Rechenknoten und zwei FD332-Speicherknoten, auf denen Red Hat Enterprise Linux 8 ( Ootpa ) ausgeführt wird.

Für XFS df -hscheint das von angezeigte leere Dateisystem "Verwendete Größe" in hohem Maße davon abhängig zu sein, welche Metadatenfunktionen Sie zur mkfs.xfsZeit aktivieren .

Testen mit einer leeren 12-TB-Datei:

# truncate -s 12TB xfstest.img

Standardeinstellungen (auf meinem aktuellen ArchLinux-System):

# mkfs.xfs xfstest.img 
meta-data=xfstest.img            isize=512    agcount=11, agsize=268435455 blks
         =                       sectsz=512   attr=2, projid32bit=1
         =                       crc=1        finobt=1, sparse=1, rmapbt=0
         =                       reflink=0
data     =                       bsize=4096   blocks=2929687500, imaxpct=5
         =                       sunit=0      swidth=0 blks
naming   =version 2              bsize=4096   ascii-ci=0, ftype=1
log      =internal log           bsize=4096   blocks=521728, version=2
         =                       sectsz=512   sunit=0 blks, lazy-count=1
realtime =none                   extsz=4096   blocks=0, rtextents=0
# mount -o loop xfstest.img loop/
# df -h loop/
Filesystem      Size  Used Avail Use% Mounted on
/dev/loop0       11T   12G   11T   1% /dev/shm/loop
# umount loop/

Verwenden von reflink=1:

# mkfs.xfs -m reflink=1 -f xfstest.img
meta-data=xfstest.img            isize=512    agcount=11, agsize=268435455 blks
         =                       sectsz=512   attr=2, projid32bit=1
         =                       crc=1        finobt=1, sparse=1, rmapbt=0
         =                       reflink=1
data     =                       bsize=4096   blocks=2929687500, imaxpct=5
         =                       sunit=0      swidth=0 blks
naming   =version 2              bsize=4096   ascii-ci=0, ftype=1
log      =internal log           bsize=4096   blocks=521728, version=2
         =                       sectsz=512   sunit=0 blks, lazy-count=1
realtime =none                   extsz=4096   blocks=0, rtextents=0
# mount -o loop xfstest.img loop/
# df -h loop/
Filesystem      Size  Used Avail Use% Mounted on
/dev/loop0       11T   78G   11T   1% /dev/shm/loop

Unter Verwendung crc=0, reflink=0(aus irgendeinem Grund, dass auch dreht finobt=0, sparse=0)

# mkfs.xfs -m reflink=0 -m crc=0 -f xfstest.img 
meta-data=xfstest.img            isize=256    agcount=11, agsize=268435455 blks
         =                       sectsz=512   attr=2, projid32bit=1
         =                       crc=0        finobt=0, sparse=0, rmapbt=0
         =                       reflink=0
data     =                       bsize=4096   blocks=2929687500, imaxpct=5
         =                       sunit=0      swidth=0 blks
naming   =version 2              bsize=4096   ascii-ci=0, ftype=1
log      =internal log           bsize=4096   blocks=521728, version=2
         =                       sectsz=512   sunit=0 blks, lazy-count=1
realtime =none                   extsz=4096   blocks=0, rtextents=0
# mount -o loop xfstest.img loop/
# df -h loop/
Filesystem      Size  Used Avail Use% Mounted on
/dev/loop0       11T   33M   11T   1% /dev/shm/loop

Zusamenfassend:

# df -h loop/
Filesystem      Size  Used Avail Use% Mounted on
/dev/loop0       11T   78G   11T   1% /dev/shm/loop (reflink=1, crc=1)
/dev/loop0       11T   12G   11T   1% /dev/shm/loop (reflink=0, crc=1)
/dev/loop0       11T   33M   11T   1% /dev/shm/loop (reflink=0, crc=0)

"Verwendeter" Speicherplatz auf einem neuen 12-TB-Dateisystem ist also 78G, 12G oder nur 33M, abhängig davon, welche Metadaten-Features Sie zur Zeit von mkfs aktivieren.

Alle Dateisysteme haben einen Overhead für ihre eigenen internen Datenstrukturen. Diese internen Informationen werden für das Dateisystem verwendet, um künftig Dateien und Verzeichnisse zu erstellen und zu verfolgen, wo alles zugeordnet ist. Diese Daten werden zusammenfassend als "Metadaten" bezeichnet. Es sind Daten "über" die Daten im Dateisystem. Die Metadaten werden als Overhead betrachtet, da sie Speicherplatz beanspruchen, aber keine Benutzerdaten sind. Dieser Overhead ist ein unvermeidbarer Nebeneffekt bei der Verwendung eines Dateisystems.

Laut diesem Blogbeitrag hat XFS einen Overhead von rund 0,5% des gesamten Festplattenspeichers. (Beachten Sie, dass dieser Beitrag aus dem Jahr 2009 stammt, aber es gibt keinen Grund, warum dies drastisch geändert werden sollte.) Zu diesem Ergebnis kam er beim Testen des Dateisystem-Overheads von über einem Dutzend verschiedener Dateisysteme guestfish.

0,5% Ihres 12-TB-Speicherplatzes sind 60 GB groß. Dies scheint also ziemlich nahe an der erwarteten Nutzung zu liegen. Ich vermute, dass seine Zahl etwas höher als 0,5% gewesen sein sollte, aber dass es gerundet wurde.