Помогите понять результаты замеров СХД

[Adam]

Приветствую всех.
Товарищи, я не особый спец по теме, и очень надеюсь на вашу помощь.

Тема такая. Замеряю IOPs-ы и хочу узнать, сколько иопсов может дать сторедж из 6 дисков sata (7200), RAID-5:

Теория показывает что:
6 (HDD 7200 шт.) * 80 IOPs (с диска. для примера) = 480 IOPs в сумме

И при вариантах:
Вариант 1 - Запись 80% Чтение 20% = 192 IOPs
Вариант 2 - Запись 20% Чтение 80% = 408 IOPs

А теперь практика:

Есть виртуальная машина (ОС windows) с подмаунченным диском 1TB.
на этой виртуалке стоит iometer который будет писать/читать, одним воркером, весь диск в 1TB.

В итоге получаю такие цифирьки


как видим что не дотягиваем до значений теории (см. выше)

А теперь покажу результаты тех же замеров (параметры иометра идентичны виртуалке) но уже своего десктопа с двумя дисками один из которых на 2TB:



Если я все правильно понимаю:

То мой десктоп дает на
W80Random100 - 85,7 IOps | 17,0 Read IOps | 68,6 Write IOps

А СХД (рейд из 6 дисков)
W80Random100 - 81,2 IOps | 16,1 Read IOps | 65,1 Write IOps

А вот тут таки вопрос - КАК ТАК?

Где те теоритические 192 иопса?

Где я не прав товарищи?

Заранее благодартвую.

[gs]

Сколько outstanding IOs задано?

[Adam]

Сколько outstanding IOs задано?

Данный параметр не менял. и по дефолту стоит 1
Сие не есть верно?

[gs]

Это означает, что иометр дает запрос, ждет ответа, и только потом следующий запрос. Понятно, что имеем упор в один винт (ведь один запрос не распараллелишь).
Поставьте очередь побольше и посмотрите.

[Adam]

Это означает, что иометр дает запрос, ждет ответа, и только потом следующий запрос. Понятно, что имеем упор в один винт (ведь один запрос не распараллелишь).
Поставьте очередь побольше и посмотрите.

В моем случае, какое значение будет актуальным?

[gs]

Ну это же от задачи зависит.
Поставьте с десяток - разницу сразу увидите.
В реальной задаче глубина очереди растет вследствие роста нагрузки. И в какой-то момент начинается резкий рост латенси (иометр ее тоже показывает) - это значит приплыли, клиенты начинают материться.

[Adam]

Ну это же от задачи зависит.
Поставьте с десяток - разницу сразу увидите.
В реальной задаче глубина очереди растет вследствие роста нагрузки. И в какой-то момент начинается резкий рост латенси (иометр ее тоже показывает) - это значит приплыли, клиенты начинают материться.

Результаты с outstanding IOs = 10
W80Random100 - 106,4 IOps | 21.1 Read IOps | 85.2 Write IOps

Мне кажется не шипко выросло...
или будем считать что это есть нормальное значение?

[gs]

Странно это.
Какой контроллер, включен ли кэш?

[gs]

Завершена ли инициализация?

[Adam]

Странно это.
Какой контроллер, включен ли кэш?

Виноват, про контроллер сказать ничего не могу. могу сказать что вот такой сервак:
http://www.synology.com/ru-ru/products/ ... RS10613xs+

Завершена ли инициализация?

И еще раз виноват. не очень понял о чем речь?
Если можно поясните пожалуйста.

Кстати, замерил при outstanding IOs = 100
Получил: W80Random100 - 107,3 IOps | 21.4 Read IOps | 85.8 Write IOps

[gs]

Нашли тоже СХД...

Скорее всего с сетевыми настройками что-то. Потрясите их саппорт - бес его знает, что они в супермикру насовали.

[Adam]

А что скажут знатоки на такие цифирьки - на одном воркере, и при постепенном увеличении потоков (Queue Depth):

Замеры на сторадже



И замеры на моем десктопе с одним SATA диском с теми же параметрами:

[gs]

Не понимаю я, как этот барабан работает...

При рандомной записи на рэйд5 из шести винтов, с учетом райт пенальти 4, должно получаться порядка 120иопс, плюс-минус трамвайная остановка. Т.е. в этом плане более менее понятно. Но почему оно так тормозит на чтении и почему с глубиной очереди ни на копейку не растут иопсы - не знаю (при этом латенси растет предсказуемо).

[Adam]

Не понимаю я, как этот барабан работает...

При рандомной записи на рэйд5 из шести винтов, с учетом райт пенальти 4, должно получаться порядка 120иопс, плюс-минус трамвайная остановка. Т.е. в этом плане более менее понятно. Но почему оно так тормозит на чтении и почему с глубиной очереди ни на копейку не растут иопсы - не знаю (при этом латенси растет предсказуемо).

Вот такие вот показатели, "не виноватая я" (с)

Кстати, уважаемый gs, если не сложно, и если у вас есть возможность, не могли бы вы замерить у вас производительность при таких настройках?
на каком рейде 5-ом.

[gs]

У нас нет такого аппарата.
Вы же не аппаратный PCI контроллер тестите. Это сервер с непонятной начинкой, да еще через сеть.