Výkon iSCSI přes ethernet, optimalizace

[Marty]

Díky za podněty!

1. síťovka - mám problém se sloty. Atom má jen MiniPCI Express a PCI. V PCI mám SATA řadič. Šlo by SATA přesunout do MiniPCI Express a do PCI hodit síťovku, ale tím si nepomůžu. MiniPCI Express síťovka bude trošku oříšek, ale sehnat se dá. Má to smysl? Viděl bych to ale jako až poslední možnost.

2. vytížení /dev/zero >> iscsi, mazec, viz příloha, já jsem na to koukal přes htop a asi mi něco uniklo. Vypadá to, že má fakt procák problém

3. připojeno lokálně - ano, pomocí adres na síťovce

4. target je soubor vytvořený na poli, pole je z 95% plné (zbývá asi 150GB). Problém s fragmentací nevidím:

marty@tix:/mnt/data/volumes$ dd if=16G_blank.raw of=/dev/null33554432+0 records in
33554432+0 records out
17179869184 bytes (17 GB) copied, 162.655 s, 106 MB/s
marty@tix:/mnt/data/volumes$ dd if=iscsi_hdd_01.img.backup of=/dev/null
33554432+0 records in
33554432+0 records out
17179869184 bytes (17 GB) copied, 147.647 s, 116 MB/s

top_iscsi.PNG

[Marty]

Ještě jednou testík přístupu na iSCSI volume připojeného přes 127.0.0.1

tix:/mnt/sdd# dd if=/dev/zero of=/mnt/sdd/testfile bs=1M count=40964096+0 records in
4096+0 records out
4294967296 bytes (4.3 GB) copied, 141.706 s, 30.3 MB/s
tix:/mnt/sdd# dd if=testfile of=/dev/null
8388608+0 records in
8388608+0 records out
4294967296 bytes (4.3 GB) copied, 82.2473 s, 52.2 MB/s

a vytížení při čtení (předchozí post je zápis)
top_iscsi_read.PNG


Mno, tak to vypadá, že hlavní příčinou všelijaké rychlosti bude
1. kolísání rychlosti na RAIDu
2. vytížení procesoru mimo jiné VirtualBoxem

Napadá vás ještě něco dalšího?

[Fox!MURDER]

ja mel nejlepsi zkusenosti, co se tyce vykonu iscsi, se scst ... takze jestli se ti chce spekulovat, tak vyhod ietd a nahod scst ... rekord mam asi 1.5GB/s ...

[frelichl]

ja mel nejlepsi zkusenosti, co se tyce vykonu iscsi, se scst ... takze jestli se ti chce spekulovat, tak vyhod ietd a nahod scst ... rekord mam asi 1.5GB/s ...

OMG, na jakem hardwaru?

[Fox!MURDER]

Dual Xeon E5620, Areca 1880, 12x Seagate Cheetah 15k.7 600G, Mellanox ConnectX, IPoIB.

[Marty]

Muhahaha. Když jsem říkal, že je pro mě investice do MiniPCI Express síťovky moc, tak jsem tím myslel i nějaký infinibandový zvěrstva
Ale slušnej oddíl, to teda jo

Na SCST už jsem dneska koukal, rozhodně tomu dám šanci. Ale teď se bez gigabitový kabeláže nehnu

[Fox!MURDER]

mno, myslim, ze v cene tohohle bys mel tech sitovek asi tak kamion
psal jsem to tu spis proto, ze jsem testil vsechny ctyri iscsi targety a prave se scst jsem dosahoval nejlepsich vysledku.
ale to samozrejme nemusi platit pro tvuj setup ...