LizardFS

LizardFS on MooseFSi fork, mis tekkis peale Moose kommertsiks minemist. Arendatud on mõlemad tarkvarad Poolas. Üldiselt on tegemist vägagi sarnaste tarkvaradega. Hetkeseisuga tundus peamine erinevus olevas selles, et LizardFSil toimis koormuse jagamise algoritm paremini. Samas suutis MooseFS jällegi automaatselt ümberlülitada metadata serverite Master-Slave olekuid.

Põhimõtteliselt koosneb LisardFS kahest komponendist: Metadata server ja Junkserver. Metadata hoiab endas inodesid kaustasid jms. Korraga saab seejuures olla vaid üks metadata server master seisus, aga ta saab omada tervet hulka slave servereid mis temalt infot sünkroniseerivad. Lisaks on olemas metadata logger ja tekkinud logist saab omakorda teha masteri (Logimine ise ei mõjuta jõudlust). Junk serveris asuvad kõvakettad kuhu paigaldatakse andmed.

Olles startinud ühe metadata serveri saab kliendis juba failisüsteemi külge haakida ja sinna nii faile kui kaustu tekitada, ainult failid ei saa enne junk serverite külgehaakimist olla suuremad kui 0 baidi pikkusega.

Failisüsteem ise on mounditav üle fuse. Poole failisüsteemis pole aga küll saab faili-kataloogi baasil määrata replikatsiooni tasemeid ning üle fuse saab külge haakida ka alamkaustu. Failisüsteemis on olemas na nn "prügikast" ehk ühtegi faili ei kustutata kohe vaid esmalt märgitakse see metadata serveris ära ning kustutatakse teatud invervalliga. Lisaks on võimalik teha snapshotte ja määrata paroole.

Tasub ilmselt veel ära märkida, et lisaks Linuxile töötab LizardFS ka FreeBSD10 peal.

Paigaldamine

Buildimiseks on vajalik cmake ja kliendi (mfsmount) ehitamiseks ka fuse lib.

tar xf lizardfs-2.5.4.tar.gz
cd lizardfs-2.5.4
./configure
make
make install

Paigaldame loodud paketi, ja tekitame grupi ning kasutaja

tar xfv /root/lizardfs.tbz
groupadd -g 900 mfs
useradd -g mfs -M -u 900 mfs

Seadistame metadata serveri asukoha (see tuleb teha ka klientmasinas)

echo "10.7.0.1 mfsmaster" >> /etc/hosts

Metadata serveri paigaldus

Nimetame mõned dist konfid ümber, kusjuures vaikekonfid tunduvad minimaalsete täiendamisega igati kasutamiseks sobivat.

cd /etc/mfs
cp mfsexports.cfg.dist mfsexports.cfg
cp mfsmaster.cfg.dist mfsmaster.cfg

Teeme kausta metadata hoiustamiseks, seadistame õigusi jne

mkdir /srv/mfs
cp /var/lib/mfs/metadata.mfs.empty /srv/mfs/metadata.mfs
chown -R mfs:mfs /srv/mfs

Lisame metadata asukohta konfiguratsiooni

echo "DATA_PATH = /srv/mfs" >> mfsmaster.cfg

Käivitame metadata serveri

mfsmaster

Käivitame dashboardi veebiserveri

mfscgiserv

Tegemist on veebiliidesega, milleni pääseb http://localhost:8000/ urliga ning kus näeb LizardFS hetkeseisu graafikuid, statistikaid jms.

Data nodede(de) paigaldus

Esiteks tuleb kõigile nodes asuvatele kettaseadmetele tekitada failisüsteem, kettad külge haakida ning /etc/mfs/mfshdd.cfg konfifaili defineerida mountpoindid. Junkserveri startimiseks tuleb anda käsk

# mfschunkserver

Klient

Kliendis failisüsteemi haakimiseks tuleb anda käsk

# mfsmount /srv

Juhul kui lizardfs on ehitatud spetsiifilisse kausta tuleb utiliit käivitada täisrajaga

# /root/lizardfs-2.5.4/build-pack/src/mount/fuse/mfsmount /srv

Haldamine

Koopiate määramiseks on utiliit mfssetgoal, näiteks

# mfssegoal 2 /mnt

või

# mfssetgoal 2 /mnt/fail/suva

Uus replikatsioonide poliitika hakkab kehtima seejuures ainult uutele tekitatavatele failidele. Vanad failid jäävad varasema tasemega.

Fuse kliendi häälestamine

Fuse kliendi osas, millega failisüsteem külge haagitakse, tundub, et palju aega kulub context switchidele (ehk kernel-userspace vahelisele sõelumisele), mida paistab saab pisut parandada kui kinnistada fuse protsess taskset utiliidi abil kindlale tuumale mistõttu saab fuse kasutada ühe ja sama protsessori cachet ja see tundus testimisel vähendavat üleüldist protsessori koormust ning parandavat jõudlust.

Käsk ise võiks olla selline

# taskset 80 mfsmount /srv