Erinevus lehekülje "DM-Multipath" redaktsioonide vahel
(→Multipath tarkvara seadistamine ja käivitamine) |
(→Juurfailisüsteemi kasutamine multipath seadmelt) |
||
159. rida: | 159. rida: | ||
* kataloogis /boot asub bootloader sh bootloaderi seadistusfaili, nt grub.lst ning operatsioonisüsteemi tuum ja ramdisk on arvuti lokaalsel kettal | * kataloogis /boot asub bootloader sh bootloaderi seadistusfaili, nt grub.lst ning operatsioonisüsteemi tuum ja ramdisk on arvuti lokaalsel kettal | ||
* ramdisk sisaldab FC adapteri draiverit ning multipath tarkvara, lisaks ka device mapperi ja udev tugi | * ramdisk sisaldab FC adapteri draiverit ning multipath tarkvara, lisaks ka device mapperi ja udev tugi | ||
+ | |||
+ | ===Kasulikud lisamaterjalid=== | ||
+ | |||
+ | * http://christophe.varoqui.free.fr/ | ||
+ | * https://www.redhat.com/docs/manuals/csgfs/browse/4.6/DM_Multipath/index.html | ||
+ | * http://blog.core-it.com.au/?p=80 | ||
+ | * http://blog.thilelli.net/post/2009/02/09/Comparison:-EMC-PowerPath-vs-GNU/Linux-dm-multipath |
Redaktsioon: 20. märts 2009, kell 23:26
Sisukord
- 1 Sissejuhatus
- 2 Salvestusressursid
- 3 Multipath seadmete kasutamiseks ettevalmistuste tegemine
- 4 Multipathing jaoks vajaliku tarkvara paigaldamine
- 5 Multipath tarkvara seadistamine ja käivitamine
- 6 Multipath seadmete kasutamine
- 7 Juurfailisüsteemi kasutamine multipath seadmelt
- 8 Kasulikud lisamaterjalid
Sissejuhatus
Multipathing ehk täpsemini DM-Multipathing (device-mapper multipath) viitab üldiselt võimalusele arvutist ühe ja sama salvestusressursi (ingl. k. storage; nt kettakastist välja jagatud LUN või iSCSI target) poole jõuda erinevaid teid mööda. Tavaliselt on sel juhul salvestusressurss arvuti külge ühendatud FC või iSCSI abil.
Multipath ehk täpsemini DM-Multipath seade on operatsioonisüsteemi kõrgemate kihtide jaoks jaoks moodustatud loogiline seade, millele vastab tavaliselt mitu füüsilist seadet. Sõltuvalt multipath seadistusest võib loogilisel seadmel olla selliseid omadusi
- redundantsus - töötab vaatamata mõne arvuti ja salvestusressursi vahel oleva ühenduse riknemisest
- jõudlus - võimaldab kiiremat andmevahetust kui üksik arvuti ja salvestusressursi vaheline ühenduskanal
Multipath lahenduse juures töötavad koostöös neli komponenti
- salvestusressurssi arvutiga ühendava seadme draiver - nt FC ühenduse puhul QLogic HBA draiver qla2xxx
- tuuma device-mapper tugi, mis nt võimaldab konstrueerida füüsilistest seadmetest erinevate omadustega loogilisi seadmeid
- udev - dünaamiline seadmete moodustamine, vastavalt toimuvatele sündmustele, nt ühenduse kadumine mõnel kanalil
- multipath tarkvara - juhib udev ja device mapperi tööd multipath seadmete kontrollimise osas, jälgib salvestusressursside seisundit
Multipath tarkvara ülesandeks on ära tunda, et erinevaid teid mööda on arvutiga ühendatud üks ja sama salvestusressurss ning moodustada loogiline seade. Lisaks multipath tarkvara jälgib ühenduste korrasolekut ning teeb vastavaid ümberlülitusi. Kui multipath tarkvara töötab on käivitatud multipathd deemoni protsess
# ps aux | grep multipath | grep -v grep root 4208 0.1 0.0 19572 3208 ? SLl 00:22 1:47 /sbin/multipathd
Multipath seadmete kasutamiseks on lisaks vabatarkvaralisele DM-Multipathile olemas ka kommertslahendusi, nt EMC PowerPath. Ühe või teise implementatsiooni eelistamine sõltub konkreetselt kasutusel olevast riistavarast, operatsioonisüsteemist ja eelkõige nõuetest lahendusele.
Salvestusressursid
Multipath juures võib põhimõtteliselt kasutada igasuguseid SCSI protokolli kasutavaid seadmeid, sh lokaalseid seadmeid. Reeglina pakuvad aga praktilist huvi sellised juhtumid, kus arvuti ja salvestusressursi vahel on tõepoolest mitu erinevat teed. Levinud on nt selline skeem, kus on FC meedia abil ühendatud FC lülitiga (ingl. k. switch) omavahel üks kettakast ja mitu arvutit, kusjuures kõik ühendused arvutite ja kettakastist lülitini on füüsiliselt dubleeritud
_____________ | Kettakast | |_____________| SPA || SPB || ___||____________ | | | FC lüliti | |_________________| || || || || || ..... arvuti n _||_ || arvuti 1 | | || |____| || || _||_ | | arvuti 2 |____|
Konkreetselt võiks olla nt tegu sellise riistvaraga
- EMC CLARiiON CX3 kettakast
- CISCO MDS9505 FC lüliti
- QLogic QLA2432 FC adapterid
Multipath seadmete kasutamiseks ettevalmistuste tegemine
Enne multipath seadmete seadistamise juurde asumist peab olema selge milliste omadustega tulemust on eesmärk saavutada.
Multipathing jaoks vajaliku tarkvara paigaldamine
Kaasaegsed Linuxi distributsioonide sh Debian GNU/Linux paketihalduses sisaldab multipathingu jaoks vajalik ja sissejuhatuses loetletud tarkvara, st levinud seadmete draivereid, device-mapperi tugi tuumas, udev ja multipath. Kui ei ole selget põhjust talitada muud moodi, tuleks eelistada operatsioonisüsteemi paketihalduses esinevat tarkvara.
Debian GNU/Linux puhul on udev ja device-mapper vaikimisi paigaldatud, nt QLogic FC adapteri jaoks soovitatakse kasutada non-free repositooriumist paketti firmware-qlogic
# apt-get install firmware-qlogic
ning multipath tarkvara paigaldamiseks öelda
# apt-get install multipath-tools
Multipath tarkvara seadistamine ja käivitamine
Multipath tarkvara tööd kontrollib seadistusfail /etc/multipath.conf, mis võiks ülalkirjeldatud seadmete kasutamisel olla nt sellise sisuga
defaults { udev_dir /dev polling_interval 5 default_selector "round-robin 0" user_friendly_names yes } blacklist { wwid 200d04efd1804f38e devnode "^(ram|raw|loop|fd|md|dm-|sr|scd|st)[0-9]*" devnode "^hd[a-z][[0-9]*]" devnode "^cciss!c[0-9]d[0-9]*[p[0-9]*]" } multipaths { multipath { wwid 3600601602cc01d008a360bdb7d14de11 alias pgdata } } devices { device { vendor "DGC" product "*" path_grouping_policy group_by_prio getuid_callout "/sbin/scsi_id -g -u -s /block/%n" prio_callout "/sbin/mpath_prio_emc /dev/%n" hardware_handler "1 emc" features "1 queue_if_no_path" no_path_retry 300 path_checker emc_clariion failback immediate } }
Kommentaarid seadistusfailile
- Seadistusfailis esineb neli sektsiooni, kusjuures kahes viimases peab esinema vähemalt üks alasektsioon: multipaths all kirjeldatakse süsteemile kättesaadavad multipath seadmed ning devices all süsteemile kättesaadavad salvestusressurssid, nt kui sama fiibri küljes on erinevate tootjate kettakastid.
Multipath deemoni käivitamist ja seiskamist sobib juhtida skriptiga
# /etc/init.d/multipath-tools start|stop
Kui seni tehtud sammud on õnnestunud, siis antud juhul peaks olema ilmunud seade nimega /dev/mapper/pgdata
# fdisk /dev/mapper/pgdata -l Disk /dev/mapper/pgdata: 268.4 GB, 268435456000 bytes 255 heads, 63 sectors/track, 32635 cylinders Units = cylinders of 16065 * 512 = 8225280 bytes Disk identifier: 0x00000000 Disk /dev/mapper/pgdata doesn't contain a valid partition table
multipath programmiga saab muu hulgas küsida millised seadmed on parasjagu aktiivsed
# multipath -ll pgdata (3600601602cc01d008a360bdb7d14de11) dm-8 DGC ,RAID 5 [size=250G][features=1 queue_if_no_path][hwhandler=1 emc] \_ round-robin 0 [prio=0][enabled] \_ 0:0:0:0 sda 8:0 [active][ready] \_ round-robin 0 [prio=1][active] \_ 0:0:1:0 sdb 8:16 [active][ready] \_ round-robin 0 [prio=0][enabled] \_ 1:0:0:0 sdc 8:32 [active][ready] \_ round-robin 0 [prio=1][enabled] \_ 1:0:1:0 sdd 8:48 [active][ready]
Multipath seadmete kasutamine
Üldiselt soovitatakse multipath seadmetele moodustada LVM kusjuures on abiks kirjeldada LVM seadistusfailis sobiv filter, nt
filter = [ "r/disk/", "r/sd.*/", "a/.*/" ]
Juurfailisüsteemi kasutamine multipath seadmelt
Juurfailisüsteemi kasutamine multipath seadmelt võimaldab paindlikumalt migreerida operatsioonisüsteemi teisele riistavarale.
Selleks tuleb paigaldada pakett multipath-tools-boot
# apt-get install multipath-tools-boot
mille käigus moodustatakse uue ramdisk.
Kogu asjakorraldus on selline
- kataloogis /boot asub bootloader sh bootloaderi seadistusfaili, nt grub.lst ning operatsioonisüsteemi tuum ja ramdisk on arvuti lokaalsel kettal
- ramdisk sisaldab FC adapteri draiverit ning multipath tarkvara, lisaks ka device mapperi ja udev tugi