- Btrfs združuje datotečni sistem, RAID in upravljalnik nosilcev podatkov s COW, posnetki podatkov, stiskanjem in izvornimi kontrolnimi vsotami.
- Podvolumi so logični sistemi znotraj Btrfs, ki omogočajo ločevanje /, /home, /var in upravljanje posnetkov po conah.
- Podpora za več naprav vam omogoča dodajanje/odstranjevanje diskov, spreminjanje profilov RAID in uravnoteženje podatkov na spletu.
- Orodja, kot sta snapper ali btrbk, izkoriščajo posnetke Btrfs, vendar so za prave varnostne kopije še vedno potrebne zunanje kopije.
Če prihajate iz ext4 ali XFS in z zmedenim izrazom gledate na Btrfs , je to povsem normalno: to ni "samo še en datotečni sistem", temveč nekakšna kombinacija datotečnega sistema, RAID-a in upravljalnika nosilcev podatkov. Ko začnete videti stvari, kot so podnosi, posnetki, uravnoteženje obremenitve ali čiščenje, se vse skupaj zdi zapleteno, vendar so v resnici deli, ki se brezhibno ujemajo.
V tem članku bomo raziskali, kako uporabljati podvolume Btrfs in njihov namen v tipičnih namestitvah (kot so Arch, Debian, openSUSE ali naprave NAS s Synology/QNAP), kako so povezani s posnetki podatkov, RAID-om, stiskanjem in posledicami za prostor na disku. Videli boste tudi primere dejanskih ukazov za ustvarjanje datotečnih sistemov, podvolumov, posnetkov podatkov in upravljanje več diskov, pa tudi nekatere pogoste težave (kot je zloglasni ENOSPC s "prostim" prostorom).
Kaj je Btrfs in zakaj je drugačen?
Btrfs je datotečni sistem naslednje generacije za GNU/Linux, zasnovan za skaliranje od enega SSD-ja do večdiskovnih področij z redundanco, posnetki podatkov in stiskanjem. V jedro je integriran od različice 2.6.29, in čeprav je njegov razvoj še aktiven, je format diska stabiliziran, tako da bo sistem Btrfs, ustvarjen danes, ostal berljiv v prihodnjih jedrih.
Za razliko od bolj tradicionalnih datotečnih sistemov, kot sta ext4 ali XFS, Btrfs združuje funkcije , ki so bile prej razpršene po datotečnem sistemu, programski RAID (mdadm) in upravljalnik logičnih nosilcev (LVM). Z enim samim skladom imate upravljanje več naprav, profile RAID, posnetke, podnosilce, preverjanja integritete in še več.
Ključna načela Btrfs: COW, posnetki, RAID in kontrolne vsote
Jedro sistema Btrfs je model kopiranja ob pisanju (COW) . Ko spremenite podatke, jih sistem ne prepiše na isti lokaciji, temveč nove bloke zapiše drugam in posodobi reference. To omogoča skoraj takojšnje kloniranje datotek in podvolumov ter posnetke, ki so zelo poceni tako glede časa kot prostora.
Ta zasnova se zanaša na to, da ima vsak blok podatkov in metapodatkov svojo kontrolno vsoto (običajno CRC32C) . Pri branju bloka Btrfs preveri kontrolno vsoto; če se ne ujema in obstaja druga kopija (na primer v RAID 1 ali RAID 10), prebere zdravo repliko in sproti odpravi napako. To ščiti pred tiho korupcijo, ki je ext4 sam ne more zaznati.
Poleg tega Btrfs vključuje vgrajeno podporo za več naprav s profili RAID, kot so RAID0, RAID1, RAID10, RAID5 in RAID6, ki jih je mogoče konfigurirati ločeno za podatke (-d) in metapodatke (-m). Notranje gledano ne gre za klasični blokovni RAID kot mdadm, temveč za replikacijo in črtanje na ravni "kosov", ki ga upravlja sam datotečni sistem.
Končno lahko Btrfs uporabi transparentno stiskanje sproti (zlib, lzo, zstd): podatki se stisnejo pred zapisovanjem in razpakirajo ob branju, popolnoma transparentno za aplikacije. To zmanjša porabo prostora na disku in v mnogih primerih celo pospeši branje na počasnih ali mehanskih diskih.
Ustvarjanje datotečnega sistema Btrfs
Za začetek dela s podzvezki najprej potrebujete datotečni sistem Btrfs na napravi . Osnovni postopek ustvarjanja je zelo podoben kateremu koli datotečnemu sistemu mkfs:
mkfs.btrfs /dev/sdb
Ta ukaz inicializira /dev/sdb z Btrfs , brez RAID-a ali drugih dodatkov. Uporabite lahko celoten disk ali particijo. Nato ga priklopite na točko priklopa, na primer:
mount /dev/sdb /mnt/btrfs
Če želite sistem z več napravami že od samega začetka , preprosto dodajte več naprav v ukaz za ustvarjanje:
mkfs.btrfs /dev/sdc /dev/sdd
V tem primeru Btrfs ustvari logični bazen z agregirano zmogljivostjo naprav (privzeto so podatki v formatu "single" in zrcaljeni metapodatki tipa RAID1, razen če določite drugače). Ko ga priklopite, morate določiti le eno od naprav, na primer /dev/sdc.
Izvorni profili RAID in dinamično upravljanje bazenov
Pri ustvarjanju datotečnega sistema lahko z možnostmi -dy -m določite profil redundance za podatke in metapodatke : vrednosti, kot so raid0, raid1, raid10, raid5, raid6 ali single. Tipičen primer RAID1 v Btrfs bi bil:
mkfs.btrfs -d raid1 -m raid1 /dev/sdc /dev/sdd
Za razliko od klasičnega RAID 1 Btrfs nima enakih zrcal blok za blokom . Zagotovljeno je, da ima vsak blok podatkov ali metapodatkov vsaj dve kopiji na različnih napravah, vendar ni "dvojnih" diskov kot takih, dovoljene pa so tudi različne velikosti diskov.
Ko je sistem nameščen, lahko dodajate in odstranjujete diske iz bazena, medtem ko je sistem vroč, z ukazi, kot so:
btrfs device add /dev/sdb /mnt/btrfs
btrfs device delete /dev/sdc /mnt/btrfs
Po dodajanju naprav je običajno priporočljivo izvesti uravnoteženje obremenitve podatkov , da se obstoječi deli podatkov prerazporedijo po vseh diskih:
btrfs filesystem balance /mnt/btrfs
Ta postopek uravnoteženja premesti bloke glede na izbrani profil RAID, tako da vsi diski sodelujejo in se prostor uporablja bolj enakomerno . Gre za spletno delovanje: datotečni sistem ostane dostopen med delovanjem.
Kako preklopiti iz enega na RAID1 brez ponovne namestitve
Ena od odličnih stvari pri Btrfs je, da lahko obstoječi sistem pretvorite v drug profil RAID brez odklopa ali ponovne namestitve. Predstavljajte si, da imate korenski imenik Btrfs na enem samem disku, /dev/sda1, in želite preklopiti na RAID 1 z dodajanjem /dev/sdb1.
Koraki bi bili dodajanje nove naprave in izvajanje uravnoteženja obremenitve s pretvorbo profila:
btrfs device add /dev/sdb1 /
btrfs balance start -dconvert=raid1 -mconvert=raid1 /
Med tem postopkom bo Btrfs premaknil dele diska, tako da bodo vsi podatki in metapodatki podvojjeni na obeh diskih. Ko bo končan, bo ukaz »btrfs filesystem show /« prikazal dve napravi s podobno uporabo, ukaz »btrfs filesystem df /« pa bo prikazal profile RAID1 za podatke, metapodatke in sistem.
Razgradnja in popravilo RAID z Btrfs
Če eden od diskov odpove v izvorni konfiguraciji RAID1 , sistem preide v degradirani način. V Btrfs potrebujete za nastavitev tega sistema naslednjo možnost:
mount -o degraded /dev/sdb /mnt/btrfs
Medtem ko je sistem v tem stanju, bo Btrfs še naprej stregel podatke iz zdravih kopij, vendar ne bo imel popolne redundance . Pravilen postopek je dodati nov disk, odstraniti manjkajočo napravo iz nabora in zagnati uravnoteženje obremenitve za ponovno replikacijo blokov.
V primerih lokalizirane poškodbe ali problematičnih diskov imate tudi možnost zagona čiščenja , ki pregleda vse bloke, preveri kontrolne vsote in po možnosti popravi napake iz delujoče kopije:
btrfs scrub start /mnt/btrfs
btrfs scrub status /mnt/btrfs
To čiščenje se izvaja v ozadju, medtem ko je sistem nameščen, zato ga je najbolje načrtovati v času izven konic , zlasti na strežnikih ali napravah NAS.
Transparentno stiskanje: zlib, lzo, zstd
Če sistem nastavite z možnostjo `compress` ali `compress=<something>`, se aktivira samodejno stiskanje vseh podatkov, zapisanih od te točke naprej. Na primer:
mount -o compress=zstd /dev/sdb /mnt/btrfs
Sistem bo stisnjene bloke shranil na disk, vendar boste pri zagonu ukaza `ls` ali `stat` še vedno videli nestisnjeno logično velikost . Prednost je opazna pri orodjih, kot sta `df` (manj porabljenega prostora) ali `btrfs filesystem df`, ali pri uporabi pripomočkov, kot je `compsize`.
Razpoložljivi algoritmi ponujajo različno ravnovesje med kompresijskim razmerjem in porabo procesorja :
- zlib: močno stisne, vendar je počasnejši; uporaben za zelo statične podatke.
- lzoZelo hitro, vendar manj stisne; dobra možnost za sisteme z veliko pisanja.
- zstd: zelo zanimivo ravnovesje z več nastavljivimi nivoji.
Stopnjo stiskanja lahko prilagodite tudi med priklopom, na primer zstd:1 za prednost hitrosti ali zstd:15 za maksimiranje stiskanja na račun uporabe procesorja. Ti parametri se odražajo v /proc/mounts in v sporočilih dmesg, ko je sistem priklopljen.
Kopiranje ob pisanju v datoteke: takojšnji kloni z refleksijami
Mehanizem COW na ravni datotek je na primer razkrit z možnostjo `--reflink=always` ukaza `cp` . Pri kopiranju velike datoteke v Btrfs z reflink se podatki na disku ne podvojijo; ustvarijo se le dodatne reference na iste bloke.
cp --reflink=always imagen.iso copia1.iso
Kopija se prikaže takoj in sprva ne zasede nobenega dodatnega prostora . Šele ko je ena od datotek spremenjena, se prizadeti bloki fizično kopirajo (resnično kopiranje ob pisanju). To je izjemno uporabno za predloge virtualnih strojev , osnovne slike in tako naprej.
Ista logika velja za posnetke podvolumov , ki so preprosto COW kloni celotnega podvolumna. Ko so ustvarjeni, skoraj ne uporabljajo metapodatkov; dejanska poraba prostora za shranjevanje se pojavi kasneje, odvisno od tega, kako različna je vsebina med izvirnikom in posnetkom.
Podzvezki Btrfs: kaj so in za kaj se uporabljajo
Podvolumen v Btrfs je v praksi "mini datotečni sistem" znotraj glavnega sistema . Celoten Btrfs ima vedno vsaj en podvolumen (najvišjo raven) in na njem lahko ustvarite še druge, ki so od zunaj videti kot preprosti imeniki.
Lepota tega je v tem, da je mogoče vsak podvolumen namestiti neodvisno , imeti lastne posnetke, kvote (če je sistem kvot omogočen) in pravilnike za varnostno kopiranje . Vse to ob souporabi istega shranjevalnega prostora in konfiguracije RAID kot nadrejeni volumen.
Če želite ustvariti več podvolumov na vrhu Btrfs, ki je že nameščen v /mnt/btrfs, bi naredili nekaj takega:
btrfs subvolume create /mnt/btrfs/subvolumen1
btrfs subvolume create /mnt/btrfs/subvolumen2
btrfs subvolume create /mnt/btrfs/subvolumen3
Ti podvolumi se bodo prikazali kot imeniki v /mnt/btrfs, če pa jih navedete z btrfs, boste videli njihove ID-je in notranje poti :
btrfs subvolume list /mnt/btrfs
Ko imate ID (na primer 256 za podvolumen1), lahko v drugo pot namestite samo ta podvolumen :
mount -o subvolid=256 /dev/sdb /mnt/subvol1
Na ta način je mogoče do podatkov na tem podvolumenu dostopati hkrati kot do /mnt/btrfs/subvolume1 in /mnt/subvol1 , vendar gre za isto vsebino. To je zelo uporabno za ločevanje /, /home, /var ali določenih naborov podatkov, ne da bi se pri tem zatekli k tradicionalnemu particioniranju.
Zasnova podvolumov: praktični primeri (Arch, Debian, NAS)
Zelo tipična struktura v namiznem računalniku je lahko:
- @ za koren (/) brez /home ali /var/lib/docker.
- @doma v /home z vašimi osebnimi podatki.
- @var ali specifične podvolume, kot so @var-log, @var-cache itd.
- @posnetki za shranjevanje posnetkov, razvrščenih po datumu.
To omogoča orodjem, kot so snapper za sistemske posnetke , Timeshift ali btrbk, da ustvarijo posnetke samo sistema (podvolumen @) za razveljavitev posodobitev, medtem ko so uporabniški dokumenti (v @home) zaščiteni ali sinhronizirani z drugačno logiko.
Na strežniku NAS Synology ali QNAP se dejansko zgodi, da se na podvolumih Btrfs ustvarijo mape v skupni rabi , kar omogoča, da Snapshot Replication naredi posnetke teh map, jih klonira ali podvoji na drug strežnik NAS. Gre za isto idejo, vendar zapakirano v grafičnem vmesniku.
Posnetki podvolumov: povrnitev in kopije v nekaj sekundah
Posnetki v Btrfs so preprosto podvolumi, ustvarjeni kot posnetki drugega . Če želite ustvariti posnetek /mnt/btrfs/subvolume1 v drugem podvolumu, uporabite snapshot_sub1:
btrfs subvolume snapshot \
/mnt/btrfs/subvolumen1 \
/mnt/btrfs/subvolumen1_snapshot
Če nato zaženete ukaz `btrfs subvolume list`, boste videli nov ID in pot za ta posnetek. Od takrat naprej sta logično neodvisna : spremembe enega ne vplivajo na drugega, čeprav si interno delita bloke, dokler nista spremenjena.
To se uporablja tako za hitre varnostne kopije (na primer pred nadgradnjo sistema) kot tudi za laboratorije, testiranje, razvojna okolja itd. Obnovitev posnetka običajno vključuje bodisi namestitev posnetka in njegovo uporabo kot novega privzetega podvolumena bodisi kopiranje podatkov nazaj.
Uporaba Btrfs na več diskih z RAID-om
Z Btrfs se upravljanje več diskov izvaja neposredno iz datotečnega sistema. Pri ustvarjanju nosilca lahko določite ločene profile za podatke in metapodatke, na primer podatke v RAID 5 in metapodatke v RAID 1, če imate tri ali več naprav.
mkfs.btrfs -d raid5 -m raid1 /dev/sdb /dev/sdc /dev/sdd
Ta vrsta profila ponuja črtanje in pariteto za podatke (izboljšane hitrosti branja in toleranca napak) ter močno redundanco za metapodatke, vendar za ceno nekaj dodatnega prostora na disku. Vendar pa je RAID 5/6 v Btrfs v preteklosti imel znatne napake; v kritičnih okoljih mnogi skrbniki še vedno dajejo prednost RAID 1/10.
Če ste sprva ustvarili skupek RAID1 in želite kasneje bolje izkoristiti prostor, lahko profile vedno pretvorite sproti z uravnoteženjem:
btrfs balance start -dconvert=raid5 -mconvert=raid1 /srv
Podobno se dodajanje ali odstranjevanje naprav izvede z ukazom `btrfs device add/remove` , ki mu sledi uravnoteženje obremenitve za premestitev delov. Ukaz `btrfs filesystem show` ponuja pregled stanja, velikosti in uporabe vsakega diska v področju.
Upravljanje prostora: zakaj du in df "lažeta" v Btrfs
Eden najbolj zmedenih vidikov Btrfs je, da klasični orodji df in du ne odražata natančno realnosti . Mešanica RAID-a na ravni blokov, COW-ja, posnetkov in stiskanja pomeni, da predpostavka "1 zapisan MiB = 1 porabljen MiB" ne drži.
V Btrfs je prostor za shranjevanje dodeljen v velikih kosih , običajno 1 GiB za podatke in 256 MiB za metapodatke. Vsakemu kosu je dodeljen ustrezen profil: enojni, RAID 1, RAID 10 itd. Znotraj kosa je res, da je 1 MiB zapisan kot 1 MiB porabljen, vendar način kombiniranja več kosov in blokovnih kopij otežuje ta preprost izračun.
Poleg tega pri COW in posnetkih podatkov brisanje datoteke ne zagotavlja, da bodo njeni bloki sproščeni : če so ti bloki v skupni rabi z drugim posnetkom podatkov ali klonirano ref-povezavo, bodo še naprej zasedali prostor, dokler ne bo več nobene povezave do njih. Od tod občutek "izbrišem stvari in prostor se ne vrne."
Zaradi tega Btrfs ponuja posebne ukaze, kot sta »btrfs filesystem df <pot>« , ki prikazujejo razčlenitev podatkov, metapodatkov in uporabe sistema po profilu, in »btrfs filesystem show <naprava>«, ki prikazuje, kateri del vsakega diska je rezerviran in uporabljen v surovi obliki.
Najboljše prakse s podvolumi in posnetki pri vsakodnevni uporabi
Če na primer nameščate Arch Linux z Btrfs na en sam SSD , je zelo priporočljiva strategija:
- Na korenski particiji ustvarite edinstveno datoteko Btrfs.
- Definirajte ločene podvolume za /(system), /home, /var/log, morda /var/lib/libvirt ali /var/lib/docker.
- Vsak podvolumen namestite z ustreznimi možnostmi stiskanja (zstd ali lzo) in po želji izvedite samodejno defragmentacijo za nalaganja z veliko majhnimi datotekami.
- Uporabite Snapper, Timeshift ali btrbk za avtomatizirajte posnetke sistemskega podvoluma pred in po posodobitvah.
Na fizičnem računalniku z več SSD-ji lahko izbirate med enim večnamenskim poljem Btrfs z RAID 1/10 in logičnimi podnosi ali več ločenimi polji Btrfs. Kar zadeva podnosi, ni velike razlike: ostanejo logične entitete znotraj polja Btrfs, na katerem se nahajajo. Pomembno je, da že na začetku določite, katere podatke želite posneti in obnoviti neodvisno.
Glede popolnih varnostnih kopij ne pozabite, da posnetki podatkov niso zunanje varnostne kopije . Snapper ali Timeshift se običajno uporabljata za lokalne posnetke podatkov (predvsem sistema), za prave varnostne kopije vsega (vključno z /home) pa je najbolje uporabiti orodja, kot so borg, restic, rsync, remote btrbk ali lastne rešitve za posnetke podatkov/replikacijo strežnika NAS.
Osnovna administracija in uporabni ukazi Btrfs
Ukazni vmesnik Btrfs se morda zdi nekoliko preobsežen, vendar omogoča skrajšanje podukazov z uporabo edinstvenih predpon . Na primer, namesto »btrfs filesystem defragment /« lahko uporabite »btrfs filesystem /«, če ni dvoumnosti.
Nekateri bistveni ukazi, ki jih boste pogosto uporabljali, so:
- mkfs.btrfs: ustvarite datotečne sisteme z možnostmi RAID in oznakami.
- btrfs datotečni sistem prikaži/df: Oglejte si naprave, uporabo in profile.
- dodajanje/brisanje naprav btrfs: dodajanje ali odstranjevanje diskov iz nabora.
- Začetek ravnotežja v btrfs: ponovno uravnotežite podatke in pretvorite profile RAID.
- Zagon/stanje brisanja btrfs: preveri in popravi bloke s kontrolnimi vsotami.
- ustvarjanje/seznam/brisanje/posnetek podvolumna btrfs: upravljanje podvolumov in posnetkov.
- preverjanje btrfsPreverite datotečni sistem brez povezave (previdno).
Pomembno si je tudi zapomniti, da se tradicionalnega ukaza fsck ne sme posredovati Btrfs-u ob vsakem zagonu ; v ukazu fstab mora biti zadnje polje vnosov Btrfs enako 0, da se izognemo nepravilnim samodejnim preverjanjem.
S tem naborom konceptov in ukazov Btrfs preneha biti tista "čudna črna skrinjica" in postane zelo prilagodljivo orodje, s katerim lahko logično organizirate svoj sistem s podvolumi, izkoristite resnično uporabne posnetke in vse to združite z redundanco in stiskanjem, tako na preprostem prenosniku kot na skupini več diskov.
Kazalo
- 1 Kaj je Btrfs in zakaj je drugačen?
- 2 Ključna načela Btrfs: COW, posnetki, RAID in kontrolne vsote
- 3 Ustvarjanje datotečnega sistema Btrfs
- 4 Izvorni profili RAID in dinamično upravljanje bazenov
- 5 Kako preklopiti iz enega na RAID1 brez ponovne namestitve
- 6 Razgradnja in popravilo RAID z Btrfs
- 7 Transparentno stiskanje: zlib, lzo, zstd
- 8 Kopiranje ob pisanju v datoteke: takojšnji kloni z refleksijami
- 9 Podzvezki Btrfs: kaj so in za kaj se uporabljajo
- 10 Zasnova podvolumov: praktični primeri (Arch, Debian, NAS)
- 11 Posnetki podvolumov: povrnitev in kopije v nekaj sekundah
- 12 Uporaba Btrfs na več diskih z RAID-om
- 13 Upravljanje prostora: zakaj du in df "lažeta" v Btrfs
- 14 Najboljše prakse s podvolumi in posnetki pri vsakodnevni uporabi
- 15 Osnovna administracija in uporabni ukazi Btrfs
