Модернизация дисковой системы
Модераторы: Trinity admin`s, Free-lance moderator`s
Модернизация дисковой системы
Доброго дня. Давно читаю ваш форум - вот решил задать вопрос.
Есть сервер R2308GZ4GC\2х E5-2620\96GB
На котором крутится в виртуалке 1с сервер с SQL . Вроде бы всех все устраивает - но как всегда "хочется что-то улучшить" (вообщем чешется).
Вопрос касается дисковой системы:
сейчас имеем ASR7805+AFM700 и 4 диска ST9300653SS = собран Раид10 (пробовали собирать 5ку - было заметно хуже). Есть 4 запасных ST9300653SS.
Вопрос №1: Имея то что имеем, как можно улучшить дисковую?
1а. Может быть пересобрать 10ку добавив дисков? (на 6ти или 8ми дисках) - на сколько будет лучше? Как я понимаю улучшиться только чтение?
1б. Или лучше собрать второй раид10 и на него повесить другие виртуалки? Не пострадает ли при этом скорость первого массива - т.к. контроллер будет обслуживать 2 массива?
Вопрос №2: "выкинуть" ST9300653SS, купить 4ре SSD S3610 и собрать раид5 (то что часто тут советуют). Насколько это будет быстрее текущего решения? Прожует ли контроллер эти диски без замедления?
Пару лет назад пробовали создавать раид1 из двух SSDSC2BB120G401 - так вот особого прироста никто не заметил (ни в синтетических тестах, ни в работе) - вернулись обратно на раид10 из САСов.
Спасибо за ваш форум - очень много полезного периодически читаю.
Есть сервер R2308GZ4GC\2х E5-2620\96GB
На котором крутится в виртуалке 1с сервер с SQL . Вроде бы всех все устраивает - но как всегда "хочется что-то улучшить" (вообщем чешется).
Вопрос касается дисковой системы:
сейчас имеем ASR7805+AFM700 и 4 диска ST9300653SS = собран Раид10 (пробовали собирать 5ку - было заметно хуже). Есть 4 запасных ST9300653SS.
Вопрос №1: Имея то что имеем, как можно улучшить дисковую?
1а. Может быть пересобрать 10ку добавив дисков? (на 6ти или 8ми дисках) - на сколько будет лучше? Как я понимаю улучшиться только чтение?
1б. Или лучше собрать второй раид10 и на него повесить другие виртуалки? Не пострадает ли при этом скорость первого массива - т.к. контроллер будет обслуживать 2 массива?
Вопрос №2: "выкинуть" ST9300653SS, купить 4ре SSD S3610 и собрать раид5 (то что часто тут советуют). Насколько это будет быстрее текущего решения? Прожует ли контроллер эти диски без замедления?
Пару лет назад пробовали создавать раид1 из двух SSDSC2BB120G401 - так вот особого прироста никто не заметил (ни в синтетических тестах, ни в работе) - вернулись обратно на раид10 из САСов.
Спасибо за ваш форум - очень много полезного периодически читаю.
Re: Модернизация дисковой системы
Нет, и запись тоже ускорится. Теоретически - кратно (в 1,5 для 6-ти и в 2 раза для 8-ми дисков); впрочем, и практически где-то так же.bogidaich писал(а): Вопрос касается дисковой системы:
сейчас имеем ASR7805+AFM700 и 4 диска ST9300653SS = собран Раид10 (пробовали собирать 5ку - было заметно хуже). Есть 4 запасных ST9300653SS.
Вопрос №1: Имея то что имеем, как можно улучшить дисковую?
1а. Может быть пересобрать 10ку добавив дисков? (на 6ти или 8ми дисках) - на сколько будет лучше? Как я понимаю улучшиться только чтение?


Не пострадает - контроллер достаточно мощный, чтобы "не заметить"bogidaich писал(а):1б. Или лучше собрать второй раид10 и на него повесить другие виртуалки? Не пострадает ли при этом скорость первого массива - т.к. контроллер будет обслуживать 2 массива?

Но оптимальнее всё же сделать новую общую рейд-группу из бОльшего числа дисков - тогда скорость работы этой рейд-группы будет больше, нежели скорость отдельных групп по 4 диска.
Меня, правда, несколько смущает тот факт, что Вы до сих пор работали без HSD - это может быть "чревато боком".
Т.е. Вы, конечно, можете создать новую рейд-группу R10 на все 8 доступных Вам дисков на данном контроллере (и тем самым кратно увеличить скорость работы группы), но мне как-то неуютно было бы обходиться без HSD.
Тут ещё большой вопрос о профиле нагрузки - если запись в явном меньшинстве, то можно замутить R6 из семи дисков и один оставить как HSD: можете немного потерять на записи (и то лишь в тех режимах, когда её, записи, объём не будет вмещаться в бортовой кеш контроллера), но при этом хорошо поднимется чтение, прибавится объём (даже против R10 из 8 дисков) и увеличится надёжность (рейд-группа не только выдержит вылет любых двух дисков подряд - в отличие от R10, где второй имеет право вылететь лишь в другом сабъюните - но и отребилдится автоматом без вмешательства админа, в противном случае вынужденного найти хард на замену и поменять на него сдохший вручную).
Начнём с конца: у Вашего контроллера довольно резкий RoC ("процессор"), так что ssd, безусловно, должен дать Вам заметный прирост.bogidaich писал(а):Вопрос №2: "выкинуть" ST9300653SS, купить 4ре SSD S3610 и собрать раид5 (то что часто тут советуют). Насколько это будет быстрее текущего решения? Прожует ли контроллер эти диски без замедления?
Особенно если Вы не будете жадничать

Я, правда, не уверен, что R5 - это хорошая идея (точнее, уверен в обратном).

Лучше уж выбирать из R10 и R6 - зависит от профиля нагрузки, требуемого объёма, скорости, надёжности и т.д.
Ну, отсюда плохо видно, в чём там у Вас была засада - как уже неоднократно говорилось, надо смотреть на профили нагрузки и настройки контроллера и самой рейд-группы.bogidaich писал(а):Пару лет назад пробовали создавать раид1 из двух SSDSC2BB120G401 - так вот особого прироста никто не заметил (ни в синтетических тестах, ни в работе) - вернулись обратно на раид10 из САСов.
Может, Вы тогда подошли буквально к рекомендации - обоснованной! - отключать кеш дисков (не обратив внимания на спеку Ваших ssd в части наличия конденсаторной поддержки борт-кеша) и получили просадку на запись (фризы записи на ssd могут стать неприятной неожиданностью... особенно при заполнении ssd "под горлышко" и/или при интенсивной записи, за которой не успевает BGC)?
Или ещё какой косяк случился.
- Stranger03
- Сотрудник Тринити
- Сообщения: 12979
- Зарегистрирован: 14 ноя 2003, 16:25
- Откуда: СПб, Екатеринбург
- Контактная информация:
Re: Модернизация дисковой системы
Контроллер прожует, но тут дилема будет.bogidaich писал(а):Вопрос №2: "выкинуть" ST9300653SS, купить 4ре SSD S3610 и собрать раид5 (то что часто тут советуют). Насколько это будет быстрее текущего решения? Прожует ли контроллер эти диски без замедления?
- для SATA/SAS рекомендуется отключать кеш на дисках и включать кеш на контроллере
- для SSD все наоборот
Если на одном контроллере смешивать разные диски в разных группах, то надо подумать, как лучше будет.
Кстати Раид5 на S3610 вполне нормальный вариант.
Это странно, может у вас не в дисках затык?Пару лет назад пробовали создавать раид1 из двух SSDSC2BB120G401 - так вот особого прироста никто не заметил (ни в синтетических тестах, ни в работе) - вернулись обратно на раид10 из САСов.
Re: Модернизация дисковой системы
Большое спасибо за ответы.
Немного поясню предыдущее сообщение.
С объемом данных у нас пока не напряженно, всегда стараемся чтобы не больше 50% было занято.
С неполной разметкой ССД - тоже ясно, всегда так делаем даже на станциях (бестпрактикс уже можно сказать).
Касательно горячей замены дисков - после перехода на виртуалки все стало проще, все мигрирует на резерную ноду, далее все работы выполняются без напряженки, нервов и пота. Тем более что maxview storage manager отлично рассылает уведомления ежели что не так.
Когда пробовали раид1 на двух SSDSC2BB120G401, прошло много времени и из подробностей помню что кеш контроллера был отключен (как это рекомендует конфигуратор адаптек), а кеш дисков был включен исходя из этого
Сравнивалось именно раид1 на 2х ССД, и раид10 на 4х САСах. На 4 ССД результаты были бы явно другими.
Пока наверно попробуем поднять раид10 на 8ми дисках = благо покупать ничего не надо.
А ссд будем потихоньку закупать (сразу большие траты не одобряют)
Как я понял переход на ССД лучше начинать от 4х дисков? Или хотябы от 3х (два в раид1, один в хотспайр)? Вообще имеет смысл раид1 на двух ССД, или лучше собирать от 4 дисков?
Кстати такой же вопрос по контроллеру 6805 (на резервной ноде стоит) - сильно будут отличаться ответы или все также?
ПС: на текущий момент времени вообще имеет смысл чтото строить на ST9300653SS, т.к. цена 3610 почти такая же? В каких задачах предпочтение при покупке может быть отдано ST9300653SS ?
Немного поясню предыдущее сообщение.
С объемом данных у нас пока не напряженно, всегда стараемся чтобы не больше 50% было занято.
С неполной разметкой ССД - тоже ясно, всегда так делаем даже на станциях (бестпрактикс уже можно сказать).
Касательно горячей замены дисков - после перехода на виртуалки все стало проще, все мигрирует на резерную ноду, далее все работы выполняются без напряженки, нервов и пота. Тем более что maxview storage manager отлично рассылает уведомления ежели что не так.
Когда пробовали раид1 на двух SSDSC2BB120G401, прошло много времени и из подробностей помню что кеш контроллера был отключен (как это рекомендует конфигуратор адаптек), а кеш дисков был включен исходя из этого
Сравнивалось именно раид1 на 2х ССД, и раид10 на 4х САСах. На 4 ССД результаты были бы явно другими.
Пока наверно попробуем поднять раид10 на 8ми дисках = благо покупать ничего не надо.
А ссд будем потихоньку закупать (сразу большие траты не одобряют)
Как я понял переход на ССД лучше начинать от 4х дисков? Или хотябы от 3х (два в раид1, один в хотспайр)? Вообще имеет смысл раид1 на двух ССД, или лучше собирать от 4 дисков?
Кстати такой же вопрос по контроллеру 6805 (на резервной ноде стоит) - сильно будут отличаться ответы или все также?
ПС: на текущий момент времени вообще имеет смысл чтото строить на ST9300653SS, т.к. цена 3610 почти такая же? В каких задачах предпочтение при покупке может быть отдано ST9300653SS ?
- Stranger03
- Сотрудник Тринити
- Сообщения: 12979
- Зарегистрирован: 14 ноя 2003, 16:25
- Откуда: СПб, Екатеринбург
- Контактная информация:
Re: Модернизация дисковой системы
Ну все правильно, но SSD в вашей ситуации должны были порвать 4-е SAS диска.bogidaich писал(а):Когда пробовали раид1 на двух SSDSC2BB120G401, прошло много времени и из подробностей помню что кеш контроллера был отключен (как это рекомендует конфигуратор адаптек), а кеш дисков был включен исходя из этого
Сравнивалось именно раид1 на 2х ССД, и раид10 на 4х САСах. На 4 ССД результаты были бы явно другими.
От 2-х.bogidaich писал(а):Как я понял переход на ССД лучше начинать от 4х дисков? Или хотябы от 3х (два в раид1, один в хотспайр)? Вообще имеет смысл раид1 на двух ССД, или лучше собирать от 4 дисков?
Ответы те же, но 6805-й староват контроллер. Новых дисков в таблице совместимости не будет, но скорей всего работать будет.bogidaich писал(а):Кстати такой же вопрос по контроллеру 6805 (на резервной ноде стоит) - сильно будут отличаться ответы или все также?
Re: Модернизация дисковой системы
Это не проблема. Можно установить опцию "Global Physical Devices Write Cache Policy" в значение "Drive Specific" и выборочно назначить различные параметры для кэшей отдельных дисков.Stranger03 писал(а): Контроллер прожует, но тут дилема будет.
- для SATA/SAS рекомендуется отключать кеш на дисках и включать кеш на контроллере
- для SSD все наоборот
Если на одном контроллере смешивать разные диски в разных группах, то надо подумать, как лучше будет.
Понятно, что параметрами кэша контроллера управляем уже на уровне logical devices, отдельных массивов.
IMHO:
- собрать из 6 SAS HDD RAID10 + HS + 1 шт. в ЗИП,
- убедиться, что счастья нет,
- купить SSD SATA из HCL для RAID1, куда перенести быстрые ресурсы, для начала - vhd с tempdb виртуального сервера sql.
Как-то так, если без изучения доп.информации.
- Stranger03
- Сотрудник Тринити
- Сообщения: 12979
- Зарегистрирован: 14 ноя 2003, 16:25
- Откуда: СПб, Екатеринбург
- Контактная информация:
Re: Модернизация дисковой системы
Один человек не может все знать, спасибо за подсказку,Bormoto писал(а):Это не проблема. Можно установить опцию "Global Physical Devices Write Cache Policy" в значение "Drive Specific" и выборочно назначить различные параметры для кэшей отдельных дисков.
Понятно, что параметрами кэша контроллера управляем уже на уровне logical devices, отдельных массивов.

Re: Модернизация дисковой системы
подскажите в этом направленииBormoto писал(а):т,
- купить SSD SATA из HCL для RAID1
на сайте https://www.microsemi.com/products/stor ... patibility
нашел документ http://download.adaptec.com/pdfs/compat ... eries7.pdf
там про ССД вообще ни слова
- Stranger03
- Сотрудник Тринити
- Сообщения: 12979
- Зарегистрирован: 14 ноя 2003, 16:25
- Откуда: СПб, Екатеринбург
- Контактная информация:
Re: Модернизация дисковой системы
http://download.adaptec.com/pdfs/compat ... eries7.pdfbogidaich писал(а):там про ССД вообще ни слова
Как минимум почти все интелы кроме 3600 серии. Отдельная страничка с названием "Solid State Drives (SSDs)".
Кто сейчас на конференции
Сейчас этот форум просматривают: нет зарегистрированных пользователей и 5 гостей