Your browser does not seem to support JavaScript. As a result, your viewing experience will be diminished, and you have been placed in read-only mode.

Please download a browser that supports JavaScript, or enable it if it's disabled (i.e. NoScript).

ZFS - Wichtige Befehle

Linux

122

Anmelden zum Antworten

FrankM

zpool - configure ZFS storage pools

Ein paar der wichtigsten Befehle, die ich so die letzten Tage kennengelernt und benutzt habe. Wird bei Bedarf erweitert.

zpool create

Hiermit bauen wir einen ZFS Pool aus zwei Platten auf.

zpool create ZFS-Pool ata-WDC_WD40EZRZ-00GXCB0_WD-WCC7K6XD2C26 ata-WDC_WD40EZRZ-00GXCB0_WD-WCC7K5PPSH52

zpool status

Zeigt uns den Status des Pools an, welche Platten, Zustand usw.

root@pve:~# zpool status
  pool: ZFS-Pool
 state: ONLINE
  scan: resilvered 1.20T in 02:56:31 with 0 errors on Mon Oct 18 18:28:36 2021
config:

	NAME                                          STATE     READ WRITE CKSUM
	ZFS-Pool                                      ONLINE       0     0     0
	  mirror-0                                    ONLINE       0     0     0
	    ata-WDC_WD40EZRZ-00GXCB0_WD-WCC7K6XD2C26  ONLINE       0     0     0
	    ata-WDC_WD40EZRZ-00GXCB0_WD-WCC7K5PPSH52  ONLINE       0     0     0

errors: No known data errors

zpool attach

Hiermit fügen wir eine oder mehrere Platten zu einem Pool hinzu.

zpool attach ZFS-Pool ata-WDC_WD40EZRZ-00GXCB0_WD-WCC7K6XD2C26 ata-WDC_WD40EZRZ-00GXCB0_WD-WCC7K5PPSH52

zpool detach

Das entfernt eine Platte aus dem Pool.

zpool detach ZFS-Pool 8992518921607088473

zpool replace

Eine Platte, die z.B. ausgefallen ist, wird hiermit ersetzt.

zpool replace ZFS-Pool ata-WDC_WD40EZRZ-00GXCB0_WD-WCC7K5PPSH52

zfs - configures ZFS file systems

zfs list

Listet den Inhalt des ZFS Filesystemes.

root@pve:~# zfs list -t filesystem -o name,used
NAME                  USED
ZFS-Pool              418G
ZFS-Pool/nas_backup   384G

oder

root@pve:~# zfs list
NAME                     USED  AVAIL     REFER  MOUNTPOINT
ZFS-Pool                 418G  3.10T     1.50G  /ZFS-Pool
ZFS-Pool/nas_backup      384G  3.10T      384G  /ZFS-Pool/nas_backup
ZFS-Pool/vm-100-disk-0  33.0G  3.13T     3.17G  -

oder

gibt alle Parameter aus, was für Experten

root@pve:~# zfs get all ZFS-Pool
NAME      PROPERTY              VALUE                  SOURCE
ZFS-Pool  type                  filesystem             -
ZFS-Pool  creation              Sat Oct 16 10:50 2021  -
ZFS-Pool  used                  418G                   -
ZFS-Pool  available             3.10T                  -
ZFS-Pool  referenced            1.50G                  -
ZFS-Pool  compressratio         1.01x                  -
ZFS-Pool  mounted               yes                    -
ZFS-Pool  quota                 none                   default
ZFS-Pool  reservation           none                   default
ZFS-Pool  recordsize            128K                   default
ZFS-Pool  mountpoint            /ZFS-Pool              default
ZFS-Pool  sharenfs              off                    default
ZFS-Pool  checksum              on                     default
ZFS-Pool  compression           on                     local
ZFS-Pool  atime                 on                     default
ZFS-Pool  devices               on                     default
ZFS-Pool  exec                  on                     default
ZFS-Pool  setuid                on                     default
ZFS-Pool  readonly              off                    default
ZFS-Pool  zoned                 off                    default
ZFS-Pool  snapdir               hidden                 default
ZFS-Pool  aclmode               discard                default
ZFS-Pool  aclinherit            restricted             default
ZFS-Pool  createtxg             1                      -
ZFS-Pool  canmount              on                     default
ZFS-Pool  xattr                 on                     default
ZFS-Pool  copies                1                      default
ZFS-Pool  version               5                      -
ZFS-Pool  utf8only              off                    -
ZFS-Pool  normalization         none                   -
ZFS-Pool  casesensitivity       sensitive              -
ZFS-Pool  vscan                 off                    default
ZFS-Pool  nbmand                off                    default
ZFS-Pool  sharesmb              off                    default
ZFS-Pool  refquota              none                   default
ZFS-Pool  refreservation        none                   default
ZFS-Pool  guid                  16136524096267552939   -
ZFS-Pool  primarycache          all                    default
ZFS-Pool  secondarycache        all                    default
ZFS-Pool  usedbysnapshots       0B                     -
ZFS-Pool  usedbydataset         1.50G                  -
ZFS-Pool  usedbychildren        417G                   -
ZFS-Pool  usedbyrefreservation  0B                     -
ZFS-Pool  logbias               latency                default
ZFS-Pool  objsetid              54                     -
ZFS-Pool  dedup                 off                    default
ZFS-Pool  mlslabel              none                   default
ZFS-Pool  sync                  standard               default
ZFS-Pool  dnodesize             legacy                 default
ZFS-Pool  refcompressratio      1.00x                  -
ZFS-Pool  written               1.50G                  -
ZFS-Pool  logicalused           394G                   -
ZFS-Pool  logicalreferenced     1.50G                  -
ZFS-Pool  volmode               default                default
ZFS-Pool  filesystem_limit      none                   default
ZFS-Pool  snapshot_limit        none                   default
ZFS-Pool  filesystem_count      none                   default
ZFS-Pool  snapshot_count        none                   default
ZFS-Pool  snapdev               hidden                 default
ZFS-Pool  acltype               off                    default
ZFS-Pool  context               none                   default
ZFS-Pool  fscontext             none                   default
ZFS-Pool  defcontext            none                   default
ZFS-Pool  rootcontext           none                   default
ZFS-Pool  relatime              off                    default
ZFS-Pool  redundant_metadata    all                    default
ZFS-Pool  overlay               on                     default
ZFS-Pool  encryption            off                    default
ZFS-Pool  keylocation           none                   default
ZFS-Pool  keyformat             none                   default
ZFS-Pool  pbkdf2iters           0                      default
ZFS-Pool  special_small_blocks  0                      default

zfs create

Legt ein Dataset an. Das kann man sich wie einen Ordner vorstellen.

A dataset is a space where you put your data. Datasets are flexible in size and are located inside your pool.

zfs create <Pool_Name>/<dataset>

zfs snapshot

zfs snapshot datapool/test@today

zfs list

root@pbs:/mnt/datastore/datapool/test# zfs list -t snapshot
NAME                  USED  AVAIL     REFER  MOUNTPOINT
datapool/test@today     0B      -       96K  -

Die Anleitung zum Thema -> https://openzfs.github.io/openzfs-docs/index.html

Interessante Links zum Thema

FrankM

Unter dem Beitrag sammel ich mal ein paar Beispiele, für mich zum Nachlesen

Den Anfang macht die

ZFS-Replication

Ich hatte Am Anfang ein wenig Verständnisprobleme, bis es klar war, das diese Replication von Pool zu Pool funktioniert. Also brauchen wir zwei vorhandene ZFS-Pools.

root@pbs:/mnt/datastore/datapool/test# zfs list
NAME                    USED  AVAIL     REFER  MOUNTPOINT
Backup_Home             222G   677G      222G  /mnt/datastore/Backup_Home
datapool                2.36G  1.75T     2.36G  /mnt/datastore/datapool

Wir erzeugen ein Dataset im datapool

zfs create datapool/docs -o mountpoint=/docs

Wir erzeugen eine Datei mit Inhalt

echo "version 1" > /docs/data.txt

Wir erzeugen einen Snapshot

zfs snapshot datapool/docs@today

Kontrolle

root@pbs:/mnt/datastore/datapool/test# zfs list -t snapshot
NAME                          USED  AVAIL     REFER  MOUNTPOINT
datapool/docs@today             0B      -       96K  -

Wir replizieren den vorhandenen Snapshot zum ZFS-Pool Backup_Home und speichern ihn da im Dataset test.

zfs send datapool/docs@today | zfs receive Backup_Home/test

Nun befinden sich die Daten in dem anderen ZFS-Pool

root@pbs:/mnt/datastore/datapool/test# ls /mnt/datastore/Backup_Home/test/
data.txt

Und was mich am meisten interessiert, ist wie man das zu einem anderen Server schickt

zfs send datapool/docs@today | ssh otherserver zfs receive backuppool/backup

Den Test reiche ich dann später nach.

Quelle: https://www.howtoforge.com/tutorial/how-to-use-snapshots-clones-and-replication-in-zfs-on-linux/

ZFS inkrementelle Replication

Als, nur die geänderten Daten senden!

Wir erzeugen ein paar Dateien

root@pbs:/mnt/datastore/datapool/test# echo "data" > /docs/data1.txt
root@pbs:/mnt/datastore/datapool/test# echo "data" > /docs/data2.txt
root@pbs:/mnt/datastore/datapool/test# echo "data" > /docs/data3.txt
root@pbs:/mnt/datastore/datapool/test# echo "data" > /docs/data4.txt

Neuer Snapshot

zfs snapshot datapool/docs@17:02

Liste der Snapshots

root@pbs:/mnt/datastore/datapool/test# zfs list -t snapshot
NAME                          USED  AVAIL     REFER  MOUNTPOINT
datapool/docs@today            56K      -       96K  -
datapool/docs@17:02             0B      -      112K  -

Wir senden dieinkrementelle Replication

zfs send -vi datapool/docs@today datapool/docs@17:02 | zfs receive Backup_Home/test
send from datapool/docs@today to datapool/docs@17:02 estimated size is 38.6K
total estimated size is 38.6K
cannot receive incremental stream: destination Backup_Home/test has been modified
since most recent snapshot

Dazu schreibt die Anleitung, die ich unten verlinkt habe, das die Daten verändert wurden. Warum, verstehe ich aktuell noch nicht. Mit -F im send Befehl erzwingt man einen Rollback zum letzten Snapshot.

zfs send -vi datapool/docs@today datapool/docs@17:02 | zfs receive -F Backup_Home/test
send from datapool/docs@today to datapool/docs@17:02 estimated size is 38.6K
total estimated size is 38.6K

Und Kontrolle

ls /mnt/datastore/Backup_Home/test/
data1.txt  data2.txt  data3.txt  data4.txt  data.txt

Quelle: https://klarasystems.com/articles/introduction-to-zfs-replication/

Pacman Befehle
Linux • pacman manjaro • • FrankM

1

0
Stimmen

1
Beiträge

60
Aufrufe

Niemand hat geantwortet
10G
Linux • 10g linux • • FrankM

2

0
Stimmen

2
Beiträge

79
Aufrufe

Bedingt durch ein paar Probleme mit der Forensoftware, habe ich einen kleinen Datenverlust erlitten. Dazu gehören auch hier einige Beiträge. Dann versuche ich das mal zu rekonstruieren.

Oben hatten wir das SFP+ Modul ja getestet. Als nächsten Schritt habe ich die ASUS XG-C100F 10G SFP+ Netzwerkkarte in meinen Hauptrechner verbaut.

20211028_162455_ergebnis.jpg

Die Verbindung zum Zyxel Switch erfolgt mit einem DAC-Kabel. Im Video zum Zyxel Switch wurde schön erklärt, das die DAC Verbindung stromsparender als RJ45 Adapter sind. Somit fiel die Wahl auf die DAC Verbindungen. Hier nochmal das Video.
ZyXEL XGS1010-12 - Multi-Gigabit Switch im Test
So sieht so ein DAC Verbindungskabel aus. Die SFP+ Adapter sind direkt daran montiert.

20211028_170118_ergebnis.jpg
ethtool root@frank-MS-7C37:/home/frank# ethtool enp35s0 Settings for enp35s0: Supported ports: [ FIBRE ] Supported link modes: 100baseT/Full 1000baseT/Full 10000baseT/Full 2500baseT/Full 5000baseT/Full Supported pause frame use: Symmetric Receive-only Supports auto-negotiation: Yes Supported FEC modes: Not reported Advertised link modes: 100baseT/Full 1000baseT/Full 10000baseT/Full 2500baseT/Full 5000baseT/Full Advertised pause frame use: Symmetric Advertised auto-negotiation: Yes Advertised FEC modes: Not reported Speed: 10000Mb/s Duplex: Full Port: FIBRE PHYAD: 0 Transceiver: internal Auto-negotiation: on Supports Wake-on: pg Wake-on: g Current message level: 0x00000005 (5) drv link Link detected: yes iperf3 ----------------------------------------------------------- Server listening on 5201 ----------------------------------------------------------- Accepted connection from 192.168.3.207, port 44570 [ 5] local 192.168.3.213 port 5201 connected to 192.168.3.207 port 44572 [ ID] Interval Transfer Bitrate Retr Cwnd [ 5] 0.00-1.00 sec 1.10 GBytes 9.43 Gbits/sec 46 1.59 MBytes [ 5] 1.00-2.00 sec 1.10 GBytes 9.42 Gbits/sec 0 1.60 MBytes [ 5] 2.00-3.00 sec 1.10 GBytes 9.42 Gbits/sec 3 1.60 MBytes [ 5] 3.00-4.00 sec 1.10 GBytes 9.42 Gbits/sec 0 1.60 MBytes [ 5] 4.00-5.00 sec 1.10 GBytes 9.42 Gbits/sec 0 1.61 MBytes [ 5] 5.00-6.00 sec 1.10 GBytes 9.42 Gbits/sec 0 1.63 MBytes [ 5] 6.00-7.00 sec 1.10 GBytes 9.42 Gbits/sec 0 1.63 MBytes [ 5] 7.00-8.00 sec 1.09 GBytes 9.41 Gbits/sec 0 1.68 MBytes [ 5] 8.00-9.00 sec 1.10 GBytes 9.42 Gbits/sec 0 1.68 MBytes [ 5] 9.00-10.00 sec 1.10 GBytes 9.42 Gbits/sec 0 1.68 MBytes [ 5] 10.00-10.02 sec 22.5 MBytes 9.45 Gbits/sec 0 1.68 MBytes - - - - - - - - - - - - - - - - - - - - - - - - - [ ID] Interval Transfer Bitrate Retr [ 5] 0.00-10.02 sec 11.0 GBytes 9.42 Gbits/sec 49 sender
ZFS-Pool - Do not use (sda & sdb) to create a pool!
Linux • zfs proxmox • • FrankM

2

0
Stimmen

2
Beiträge

110
Aufrufe

Hier kurz vor dem Abschluss der Spiegelung.

d54abd23-aa52-482d-b9e1-52ece09106ec-grafik.png

Und alles wieder gut und eine Menge gelernt 🤓

594b6283-bbbe-4cec-8401-d57cce52012b-grafik.png
Kopia - HTTP/2 deadlock
Kopia • kopia linux • • FrankM

1

0
Stimmen

1
Beiträge

149
Aufrufe

Niemand hat geantwortet
ROCKPro64 - 0.9.16 mit Kernel 5.6 auf PCIe NVMe SSD
ROCKPro64 • linux rockpro64 • • FrankM

1

0
Stimmen

1
Beiträge

197
Aufrufe

Niemand hat geantwortet
Passwort Manager - KeePassXC
Allgemeine Diskussionen • keepassxc linux • • FrankM

1

0
Stimmen

1
Beiträge

324
Aufrufe

Niemand hat geantwortet
Linux Befehle - ls & tail
Linux • linux • • FrankM

1

0
Stimmen

1
Beiträge

239
Aufrufe

Niemand hat geantwortet
Liste von Linuxbefehlen
Linux • linux • • FrankM

2

0
Stimmen

2
Beiträge

514
Aufrufe

In meinem neuen PC ist eine 2,5G Karte drin, das muss man ja am WE mal testen. Und so bekommt man ein paar Infos zu den Interfaces.
root@frank-MS-7C37:~# ethtool enp41s0 Settings for enp41s0: Supported ports: [ TP MII ] Supported link modes: 10baseT/Half 10baseT/Full 100baseT/Half 100baseT/Full 1000baseT/Full 2500baseT/Full Supported pause frame use: Symmetric Receive-only Supports auto-negotiation: Yes Supported FEC modes: Not reported Advertised link modes: 10baseT/Half 10baseT/Full 100baseT/Half 100baseT/Full 1000baseT/Full 2500baseT/Full Advertised pause frame use: Symmetric Receive-only Advertised auto-negotiation: Yes Advertised FEC modes: Not reported Speed: Unknown! Duplex: Unknown! (255) Port: Twisted Pair PHYAD: 0 Transceiver: internal Auto-negotiation: on MDI-X: Unknown Supports Wake-on: pumbg Wake-on: d Link detected: no

1 / 1

ZFS - Wichtige Befehle

zpool - configure ZFS storage pools

zpool create

zpool status

zpool attach

zpool detach

zpool replace

zfs - configures ZFS file systems

zfs list

zfs create

zfs snapshot

zfs list

Interessante Links zum Thema

ZFS-Replication

ZFS inkrementelle Replication

Pacman Befehle Linux • pacman manjaro • • FrankM

10G Linux • 10g linux • • FrankM

ZFS-Pool - Do not use (sda & sdb) to create a pool! Linux • zfs proxmox • • FrankM

Kopia - HTTP/2 deadlock Kopia • kopia linux • • FrankM

ROCKPro64 - 0.9.16 mit Kernel 5.6 auf PCIe NVMe SSD ROCKPro64 • linux rockpro64 • • FrankM

Passwort Manager - KeePassXC Allgemeine Diskussionen • keepassxc linux • • FrankM

Linux Befehle - ls & tail Linux • linux • • FrankM

Liste von Linuxbefehlen Linux • linux • • FrankM

Pacman Befehle
Linux • pacman manjaro • • FrankM

10G
Linux • 10g linux • • FrankM

ZFS-Pool - Do not use (sda & sdb) to create a pool!
Linux • zfs proxmox • • FrankM

Kopia - HTTP/2 deadlock
Kopia • kopia linux • • FrankM

ROCKPro64 - 0.9.16 mit Kernel 5.6 auf PCIe NVMe SSD
ROCKPro64 • linux rockpro64 • • FrankM

Passwort Manager - KeePassXC
Allgemeine Diskussionen • keepassxc linux • • FrankM

Linux Befehle - ls & tail
Linux • linux • • FrankM

Liste von Linuxbefehlen
Linux • linux • • FrankM