[Spezz]

Komplektis siis järgmised seadmed:
2x DL360 G7
2x Cisco Catalyst 3750G
HP P4300 kit
Cisco switchid on konfitud ja redundancy toimib.
P4300 kumbki node omab 2x GB lan'i ja need on veetud korrektselt switchidesse ja ka storage jääb kättesaadavaks kui ühel kastil totejuhtmed ära tõmmata - link käib üle kahe portchanneli ja eraldi vlan'is.
Vat edasi kisub jamaks. DL360'ed omavad 4x onboard LAN ja lisakaart nelja pordiga - see aga pole võrgukaart vaid Broadcomi iSCSI adapter.
Kõikvõimalikes juhendites õpetus, et tuleb iSCSI port bondida reaalse lan NIC'iga ja see ka ära tehtud. Ikaldus aga selles, et sel juhul käib ka iSCSI traffic üle onboard NIC'i ja broadcomi kaardilt võrgukaablid eemaldades jääb kõik toimima.
Oskab keegi mõne ilusa vihje anda, mida ma valesti teen?

[Andrus Luht]

Spezz, kuidas hüperviisor neid võrgukaarte ja iscsi kaarte näeb? Eraldi adapteritena (kokku 8 võrgukaarti) või siis näeb ta neid eraldi (4 lan'i ja 4 hba'd)?

[Spezz]

Eraldi jah, 4 NIC'i ja 4 HBA'd.

[Andrus Luht]

siis on asi lihtne. need hba'd peaks olema täisverelised iscsi adapterid ning neid pole vaja bind'ida nic'idega. Proovi, kuidas asi töötab ilma sellise bind'imiseta.

[Spezz]

Seep see jama ongi, et ei tööta. Ei anna lisada ei static ega dynamic targetit.

Peale seda, kui on NIC'iga binditud saab targeti lisada aga datastoret külge ei saa.
Software iSCSI adapteri kaudu saab ka datastore külge aga siis pole enam oluline, kas iSCSI adapteritel on kaabel küljes või mitte

[Andrus Luht]

rauas fc või iscsi hba'de korral ei ole vaja tekitada seda software vmhba'd. Configuration > Storage adapters all peaks need iscsi hba'd eraldi näha olema ning sealt peaksid sa saama neid ka konfida ning ära määrata target'i aadress. Edasi leiavad nad ise juba lun'id ja pakuvad need sulle Storage all välja.

[Spezz]

Jah, on storage all olemas aga ei anna targetit konfida. Vt. pilti mu eelmises postituses

[Andrus Luht]

See eelmine pilt on sul ehk tarkvaralisest iscsi adapterist?
Vaata oma Storage adapters'ite alt, kas sul need iscsi hba'd on riist- või tarkvarailsed...

[Spezz]

Selle adapteri properties on siis eelneval pildil.

[Andrus Luht]

Mitut NIC'i ta sulle networking'u all näitab?

[Spezz]

Neli, need on onboard NIC'id.

[Andrus Luht]

If you're using a hardware dependent adapter such as the Broadcom 5709 then you need to bind vmkernel ports to the hardware adapter. A hardware dependent adapter depends on the VMkernel for networking. See page 94 of this document - http://www.vmware.com/pdf/vsphere4/r41/vsp_41_esx_server_config.pdf and especially step 4 on page 95.

[Spezz]

There is no step 4 on page 95
Kogu see bondimine on sellesama juhendi järgi läbi tehtud.
Tulemuseks ongi see, et iSCSI traffic käib üle onboard NIC'ide ja jääb toimima ka siis kui Broadcomi küljest võrgukaablid ära kisun.

[Andrus Luht]

Ega sa siis neid võrgu NIC'e bind'i sinna vmk'sse? Ja võrgu NIC'id on sul loodetavasti teises vlan'is kui iscsi?
Viga on lehekülje numbris. Võta lk 96 step 4 ja sealt siis lingitakse lk 102'le.

[Spezz]

Paraku on lõpptulemus täpselt selline nagu pildil lk. 101

Liiklus käib üle NIC'ide ja jääb toimima ka siis kui iSCSI adapterilt kaablid eemaldada.

[Andrus Luht]

Selline on õige konf software iscsi korral. Sina ei pea mitte lisama sinna oma võrguliideseid. Kui sa tekitad seda vmkernel-port'i siis kas saad sinna lisada nende võrgukaartide asemel neid broadcom'i hba'sid?

[Spezz]

Ei saa

EDIT:
Lahendasin probleemi järgmiselt:
Uus võrgukaardi draiver peale(http://downloads.vmware.com/d/details/esx40_intel_825766_82580_dt/ZHcqYnRldCViZCVodw==)
Reboot.
Nüüd on mul 8 GB NIC'i ja teen software iscsi.

EDIT2: Hmm, intrigeeriv .. nüüd ma saan ju bindida iSCSI adaptereid nende vastavate NIC'ide külge ..
EDIT3: Järgmine küsimus kerkis üles.
Storage clusteris on 2 node ja kummalgi 2 võrgukaarti.
Mitu võrgukaarti kummastki esx hostist storage liikluse jaoks eraldada? 2 või 4?

[Andrus Luht]

Spezz, mitu storage switchi sul on?

[Spezz]

Storage switchi?
Liiklus käib läbi kahe Cisco 3750G, mis on virtuaalselt üheks tehtud.

[Andrus Luht]

hmm... iscsi storage mõistes poleks seda virtuaalselt üheks tegemist vaja. Nii ehk naa peaks pooled storage liidesed olema ühe füüsilise seadme ja pooled teise taga. Sama lugu ka hostide storage liidestega. Kindlasti peaks olema tegu eri subnetide ja eraldi VLANidega. Võtmesõna MPIO.

[Spezz]

Kummastki storage kastist läheb 1 karv ühte ja teine teise switchi.
Gi1/0/19 ja Gi2/0/19 moodustavad portchanneli Po19, vlan 620
Gi1/0/20 ja Gi2/0/20 moodustavad portchanneli Po20, vlan 620
Nüüd ongi küsimus selles, et mitu liidest kummastki hostist kanaliks kokku tõmmata..

[Andrus Luht]

sul on kummaski hostis 4 hba'd seotud nelja nic'iga? Tee siis kaks ja kaks ning ära seo iscsi korral midagi kokku. kasuta multipath io'd. Head lugemist: http://virtualgeek.typepad.com/virtual_geek/2009/09/a-multivendor-post-on-using-iscsi-with-vmware-vsphere.html