[vaegkuulja]

Hi, ärge näkku lööge aga ma pole just Linuxi kasutaja ja ennast pole asi väga huvitanud ka. Kuid on üks asi, mis Unix/Linuxi puhul on ka minu jaoks autoriteet.
See on masinate jõudluse liitmine clustri abil. Kahjuks Windowsi clustrid pole tõesti jõudluse liitmise peale üles ehitatud, vaid redundantsuse peale. Ühesõnaga mul on hunnik vanu mahakantud (tasuta saadud) masinaid, mida oleks võimalik keldriboxi kõik maast-laeni üles panna, kui saaks Linuxi clustrisse panna. Ise olen ma nii dumba, et ei hakka parem isegi uurima asja, nagunii panen lõpuks mööda. Mõistagi maksab selle konfimine ja sellega pean ma arvestama, ainult ma ei tea kui palju ja kas on kedagi kes sellist asja oskaks. Lõppeesmärk oleks siis saada kokku kõikide CPU'de jõudlus ja selle abil jooksutada virtuaalmasinat kus jookseks näiteks mingi Windows os või ka ESX oleks hea (kui üldse võimaldab).

[wk]

Beowulf võiks olla üks lähtekohti:
http://en.wikipedia.org/wiki/Beowulf_(computing)

Selleks on loodud BootCD. Oletan, et see oskab luua klastri ja hiljem lisandujaid klastrisse liita:
http://bccd.net/
Kuna ise proovinud pole, siis täpsemalt ei tea.

[gnoom]

Ehk annavad järgnevad lingid sulle abi sellel clusterdamise maailma avastamisel.
http://www.mini-itx.com/projects/cluster/
http://www.bsdcluster.com/
http://people.freebsd.org/~brooks/papers/bsdcon2003/fbsdcluster/

[Andrus Luht]

Sa võid ehitada omale vanadest masinates HPC (High Performance Cluster) aga ühtegi hüperviisorit sa seal peal jooksutada ei saa. Asi selles, et HPC'd on loodud suurmahuliseks jagatud andmearvutuseks samas kui hüperviisorid tahavad väga-väga-väga intiimselt suhelda su protsessori(te)ga. Seda kohe kindlasti ei anna aga teha HPC baasil.

[Drake]

Rääkimata asjaolust, et kogu see kompott sööb ilmselt rohkem voolu kui arvutuslikku tulemust toodab, siis hypervisorit jooksutada mingi kasumiga on küll vähetõenäoline, isegi kui tegu oleks vmware-serveriga, mis võiks joosta otse selle liinuksi klastri peal.
Kui HPC on mõeldud selleks, et kogu supp on kokku liidetud üheks suureks arvutusmasinaks, et närida läbi x kogusest andmetest, siis virtualiseerimine on ikka peamiselt ühe masina võimsuse jagamine mitmeks.
Sina tahad aga mõlemat korraga, mis on ideeliselt õilis, kuid tööriistade kasutamise seisukohalt jabur.
Tee niisama klaster ja jooksuta soovitavaid teenuseid, või pane kõikidele rontidele hypervisor ja kui litsentse jätkub, siis tõmba kokku klastriks hypervisori tasandil.
Midagi aga annaks teha XEN-iga ehk ?
http://www.asplund.nu/xencluster/xen-cluster-howto.html

d.

[Andrus Luht]

Drake, vmware server saab joosta AINULT HAC'i (High Availability Cluster) peal kuna endiselt vajab ta ligipääsu prose registritele. Sellist asja ei saa teha distributed computing režiimis AFAIK...
XEN on aga paravirtualiseerija ja jällegi ainult HAC'dele ning mitte HPC'dele...

[vaegkuulja]

[Andrus Luht]

vaegkuulja, sa said valesti aru. BCCD'd testitakse virtualbox nimelise hypervisor'iga ehk siis ühe füüsilise masina peal jooksutatakse virtuaalset bccd klastrit ja mitte vastupidi...
Mis aga puutub prose registrite emuleerimisesse, siis seda saab teha vaid ühe füüsilise masina piires. Muud varianti pole.

[Drake]

Mitte ei loe seda välja et selle BCCD-d peal jookseks virtualbox, mis võimaldaks klastris jooksutada win-i - pigem see et nad soovitavad jooksutada bccd-d virtualboxis.
Blade süsteemid on ikka midagi muud kui võrguga kokku tõmmatud hpc-d ja siia neid segada oleks suht kohatu.
Ehk siis hypervisor saab normaalselt olla ikkagi ühe hosti peal, mitte jagatult üle võrgu. Küll aga saaksid sa kõik need relvad ühtse liinuksi bootimagega üles lasta ja HPC klastrisse tõmmata ja sinna peale mõne teenuse istutada. Või siis W2kX hpc klastrit proovida.
Üks funky lahendus on ka rocks clusters - http://www.rocksclusters.org/wordpress/
Ise pole sellist käima lasknud, kuna siiani on vajadus olnud NLB ja HA klastrite järgi.

d.

[vaegkuulja]

[Andrus Luht]

vaegkuulja, takistus on ilmselt sinul arusaamises, mis on cluster, mis on hüperviisor ja kuidas need kaks kokku ei käi HPC korral.

[vaegkuulja]

[Andrus Luht]

vaegkuulja, ei anna. Vähemasti mitte nii nagu sina seda tahaks...

[no9]

[vaegkuulja]

[no9]

Reaaltaustaga(teades asjasse puutuvaid füüsikalisi piire) on natuke raske aru saada, mida sa saavutada tahad või milleks. Kas Mercury Systems (http://www.mc.com/) teeb midagi taolist, mida sa taga ajad? Noh, umbkaudselt, jättes kõrvale klasterdamise taseme.

Siiski loe veel kord, mis ma enne kirjutasin. Ehk on mul homme rohkem aega seletada, aga uuri wikipediat: http://en.wikipedia.org/wiki/Parallel_computing . Arvutid on arenenud nii, nagu nad seda teinud on, põhjusega. Või proovi veidi assembleris programmeerida (näiteks RISCi masina peal kuskil) - saad prose hingeeluga väheke paremini tuttavaks ja näed, miks mõned probleemid triviaalselt ei lahendu. Füüsika tundmine tuleb ka abiks. Väike ülesanne - kui kaugele levib valgus 2GHz prose takti jooksul? Ja kui kaugele elektriimpulss päris maailmas?

[Spezz]

[Andrus Luht]

Spezz, valgus levib ~15cm (0,149896229 m) ühe 2GHz'se prose takti jooksul. Elektriimpulsi levimise kiirus on tugevasti kinni materjalis, milles ta liigub. Reaalses maailmas on see koaksiaal-kaablis ~2/3 valguse kiirusest ehk siis ~10cm. Täpsem jutt siin: http://en.wikipedia.org/wiki/Speed_of_electricity

[Ho Ho]

[Andrus Luht]

Ho Ho, tegelikult on olemas ka tehnoloogiad, millega kaks 4-way serverit seotakse raua tasemel üheks 8-way serveriks aga see käib kõik raua tasemel. Softis ja üle 10/100/1000 võrgu seda just ei tee...

[Ho Ho]

Loomulikult on see võimalik. Näiteks AMD'l on selleks eraldi HT ühendus millega sai omavahel masinaid kokku pookida. Kiirus-efektiivsus on küll tunduvalt parem, kui üle LAN'i kuid kaugeltki mitte nii hea, kui native 8-way masinal.