dyr: (Default)
[personal profile] dyr
Публикую больше для себя, чтобы не забыть, но может быть окажется полезным и для кого-то ещё.
Сторадж NexentaStor 3.1.1, 8x2Tb HDD в RAIDZ2, 1x80Gb SSD под cache, Intel 82599 10Gbase-SR сетевая, отдаётся через iSCSI и через NFS.
Проблема - iSCSI что с MPIO 4x1Gb, что с 1х10Gb сетью не позволяет получить скорость более ~90Мбайт/сек.
В итоге после тестов остановился на использование NFS в качестве datastore для VmWare ESXi 4.1. Результаты теста скорости для виртуалки в ней приведены в самом низу.


Version 1.96Sequential OutputSequential InputRandom
Seeks
Sequential CreateRandom Create
SizePer CharBlockRewritePer CharBlockNum FilesCreateReadDeleteCreateReadDelete
K/sec% CPUK/sec% CPUK/sec% CPUK/sec% CPUK/sec% CPU/sec% CPU/sec% CPU/sec% CPU/sec% CPU/sec% CPU/sec% CPU/sec% CPU
trinitynas24G1309944972788339031883339896369189499212916832434++++++++14595321318246++++++++1809541
trinitynas
# echo zfs_vdev_max_pending/W0t35 | mdb -kw
24G134994158837231504381328969712968836158716980440++++++++18233421494054++++++++1364334
trinitynas
# echo zfs_vdev_min_pending/W0t35 | mdb -kw
# echo zfs_vdev_max_pending/W0t35 | mdb -kw
24G130993960526827990674293989293688944949316747630++++++++13589311021736++++++++1745939
trinitynas
# echo zfs_vdev_min_pending/W0t1 | mdb -kw
# echo zfs_vdev_max_pending/W0t1 | mdb -kw
24G13299491281833457148634698100993989378984161098644++++++++24241541811563++++++++1687238
trinitynas
# echo zfs_vdev_min_pending/W0t2 | mdb -kw
# echo zfs_vdev_max_pending/W0t2 | mdb -kw
24G13499461886783289258431295102452589294854161332352++++++++20592461577155++++++++2317753
iSCSI mount7624M12339572087433188344657097118451105416++++++++++++++++++++++++++++++++++++++++++++++++
NFSv4
hard,intr
7624M2030997127443715523412575595359347111831171661869012271034126066962326113410
NFSv4
hard,intr
bonnie++ -s 24G
24G21779964321833112751957489539811613158.2111658868856261040125756978827110210
NFSv3
hard,intr
7624M19449959575431572335519392392153132636181168375++++++++137077965132312715215
From virtual
ESXi 4.1, NFS-imported datastore
24G6349927757225793721116809835611225228.68162648432+++++++++++
SizePer CharBlockRewritePer CharBlockNum FilesCreateReadDeleteCreateReadDelete
K/sec% CPUK/sec% CPUK/sec% CPUK/sec% CPUK/sec% CPU/sec% CPU/sec% CPU/sec% CPU/sec% CPU/sec% CPU/sec% CPU/sec% CPU
Version 1.96Sequential OutputSequential InputRandom
Seeks
Sequential CreateRandom Create

Date: 2011-12-09 03:35 pm (UTC)
From: [identity profile] http://users.livejournal.com/_slw/
и обо что тормозит?

Date: 2011-12-12 10:12 am (UTC)
From: [identity profile] http://users.livejournal.com/_dyr/
Увы, не знаю. Насколько я могу судить из вывода различных kstat, iostat и т.п., процессор, память, сетевая и диски достаточно свободны.

Date: 2011-12-09 05:54 pm (UTC)
From: [identity profile] hotid.livejournal.com
FC спасёт отца и т.п. :)

Date: 2011-12-12 11:48 am (UTC)
From: [identity profile] al-wolf.livejournal.com
У нас нечто похожее было и проблема скорости решилась обновлением вари.

P.S. В качестве хоста правда RHEL стоял

Date: 2011-12-12 12:14 pm (UTC)
From: [identity profile] http://users.livejournal.com/_dyr/
Nexenta обновлена до последней версии, iSCSI монтировал и из ESXi, и с физической машины с Ubuntu 11.10 Server.

Profile

dyr: (Default)
dyr

May 2016

S M T W T F S
1234567
891011121314
15161718192021
2223242526 2728
293031    

Most Popular Tags

Style Credit

Expand Cut Tags

No cut tags
Page generated Jul. 21st, 2017 02:30 pm
Powered by Dreamwidth Studios