» [Варез-путеводитель] Коммерческие iSCSI таргеты

Подскажите
Есть такая схема сервер под Win 2003 Storage на нем установлен WinTarget в котром созданы два виртуальных диска и по ISCSI подключены по сети к другому серверу с недавних пор на сервере с WinTarget в лог проложений постоянно валится ошибка
SCSI command 0x28 detected at virtual disk 1 failed. Неверная функция (1)

А на сервере к котрому подключенн диск постоянно идет переподключение к диску, сама работа с диском вроде как нормально только скорость сильно упала из за переподключений.
Если кто сталкивался с таким подскажите в чем может быть трабла нигде не могу найти описание такой ошибки и как ее лечить
Догадываюсь что скорее всего нуна пересоздать виртуальный диск но сильно не хотелось бы так поступать.

Заранее спасибо.

Из общих соображений, скорее сетевой линк проверить для начала.

про WinTarget никто уже ничего не расскажет... Можно попробовать взять в варезнике M$ Storage Server 2003 и проверить вирт. диск с ним.

Там и стоит Windows Unified Data Storage Server 2003 просто в логе пишется как ошибка приложения WinTarget. А на счет линка оба сервера это виртуальные машины которые крутятся на одном хосте они используют один сетевой интерфейс и к томуже в они оба в одном VLAN пинг пакетами по 65000 проходит за 2-3 mc из сети не та не та машинка не вываливается.
И где именно более вероятна проблемма с линка если это линк на клиенте или на таргете?

А могла ли к примеру повредиться внутренняя структука виртуального диска ISCIS? Просто как и говорил нигде не могу найти описание ошибки

В системе в лог приложения валится сообщения о подключении клиента потом о подтверждении подключения а потом где то от 3-х до 5-ти сообщений SCSI command 0x28 detected at virtual disk 1 failed. Неверная функция (1) это все примерно в одной двух секунд сюдя по времени в логах, а потом иногда сразу иногда через 3-5 минут весь набор сообщений повторятеся.

Други подскажите - поднял дома StarWind iSCSI Free на Вин7х64. Ставил виндовый Microsoft iSCSI Software Target 3.2 - но он при создании VHD на моем железном рэйде вылетал с ошибкой! Мне StarWind довольно таки вкатил - сделал диск, поставил галку Clustered чтоб несколько тачек подрубались, скачал и поставил на бук Microsoft iSCSI Software Initiator Version 2.08 - подрубился к таргету по вай-вай) Летает ужасно все - глазам не поверить) Но подскажите - кто то тут писал, но не могу найти! Три инициатора подключили себе том с таргета NTFS. Один закидывает на него файлы, другие не видят их пока не переподключатся к таргету...Как можно сдружить, чтоб наподобии Виндовой шары все работало - обновлялось сразу? Или незя так?

DJ_Diablo

NTFS - не кластерная фс. Попробуй вот эту зверушку - и не забудь отчитаться в студию

Еще близкая тема.

еще одно творение от SUN:

Open storage 7000
это 4 варианта "железных" серверов + JBOD от SUN + кастомизированная опен солярис с приличным web интерфейсом (другого как я понял просто нет)
умеет
iscsi
nfs
zfs
CIFS

на офсайте есть "эмулятор" под vmware и virtbox

Вопрос о FreeNAS

Что надо сделать, чтобы конфиг сохранялся на флопик или флешку?
Попробовал настраивать сервак с флопиком удаленно: тормоза были неиллюзорные, а после выключения флопик оказался пуст.

Стартанул с пустой флешкой - пишет Error: The changes could not be applied (error code 1).
при попытке нажать на Save в системных настройках.


Вот здесь пишут, что надо чтобы usb был поддерживаемый. Как посмотреть, опознался он или нет?

уффф. сохряняет

несмотря на ошибку Error: The changes could not be applied (error code 1) которая остаётся и хз чего значит

Можно ли во FreeNAS расшарить sparse таргет (zfs созданную с опцией -s)?
создать получилось, но похоже, что тамошний таргет шарит не zfs-ы, а некие "экстенты".

Как создать "экстент" на основе sparse zfs?


Добавлено:

получилось
zfs create -s -b 64k -V 750G mypool/mysparsezfs

затем из гуя фринас создал экстент из /dev/zvol/mypool/mysparsezfs, надпись типа File - игнорировал (возможности выбрать device в гуе нет), размер указал 700G

Подскажите пожалуйста, после создания StarWind-ом любого типа таргета, и подсоединения к нему клиентами все замечательно работает. Но стоит перезагрузить сервер с StarWind-ом, и подключиться к ранее созданным таргетам уже не получается (в свойствах таргета/устройства пишет: Not Activate). Приходиться каждый раз при перезагрузке San-сервера, пересоздавать таргеты заново. Что-то никто на это не жалуется.... или это только у меня такая проблема?

kdsnice
недоломаный он...
Во фришной версии этого гимора нет - но она урезаная.

LevT
Ясно... Спасибо!
Интересно какие еще баги в недоломанной версии есть, а то я собираюсь на нем продакшн-среду построить. Хотел использовать Open-E DSS V6, уж очень он мне понравился, но увы, в бесплатной версии серьезные ограничения, а "обесплатить" Open-E похоже никто не пытается.

Других я не заметил, но и не старался особенно: недолом он и есть недолом. Занялся вот изучением бесплатного COMSTAR.

kdsnice
А что тебе нужно от старвинда? Почему не можешь юзать например openfiler или freenas?

brassnet

Фринас 7 стрёмно юзать из=за суффикса RC1 Что-то тянут с релизом...
Если уж юзать freenas - то с бэкендом ZFS

И убедившись в возможности раздать такой сторадж комстаром, когда тот дозреет.


Добавлено:

ZFS реально круто: оно мне показало пальцем на битый сасовский диск из массива - о котором железный рейд LSI слова плохого не говорил.

Кроме того, есть и вот такие отзывы от FreeNAS в его нынешнем виде.

LevT
Ну Вы как опытный боец - какую ФС рекомендуете? Я думаю пока XFS или ZFS...

Цитата:

kdsnice
А что тебе нужно от старвинда? Почему не можешь юзать например openfiler или freenas?

Самое главное, это возможность работы с несколькими сетевыми картами (для того что бы на каждый дисковый массив был свой сетевой адаптер, для распределения нагрузки вообщем.)

Ну и возможность использовать диск напрямую, т.е. не создавать файл образа. Это то что делает ломаный StarWind, и на что стоят ограничения в бесплатной версии.

Если честно, то openfiler или freenas не пробовал. Наверное сейчас этим и займусь, а то с этим ломаным старвиндом - колхоз получается. А у вас какое мнение по поводу openfiler?

DJ_Diablo

дык мы тут таргет выбираем. А тема посвящена готовым сторадж-процессорам в сборе.

В ZFS в будущем обещали нативный таргет - а покамест на выбор пара таргетов в соляре и фрибсдешный во freenas.


Добавлено:

Цитата:

Самое главное, это возможность работы с несколькими сетевыми картами (для того что бы на каждый дисковый массив был свой сетевой адаптер, для распределения нагрузки вообщем.)

Такое все вообще таргеты умеют - если специально не обрезаны в сборке с целью вынудить заплатить за неё.

Вообщем попробовал я Openfiler 2.3. Очень понравился веб-интерфейс, достаточно функциональный. Конфигурация не вызвала сложностей. Но вот скорость получилась отстойная. На одном и том же железе, скорость чтения StarWind - 90МB/sek; OpenFiler - 45MB/sek.
У кого то получалось больше? Может какой-то "тюнинг" нужно сделать? Starwind без тюнинга тоже такую (45MB/sek) скорость давал.

Прежде всего, надо уяснить, что скорость линейного однопоточного обмена - это показатель только линейного однопоточного обмена. Скорость реальной нагрузки не обязана с нею коррелировать.

На месте рекламного отдела софтописателей я бы постарался затюнинговать что-то специально для таких тестов, чтобы малоквалифицированные лохи уверовали в превосходство нашего продукта. И приложил бы тем больше усилий, чем большую зарплату заплатили бы мне - в ущерб зарплате разработчиков и тестеров...

Цитата:

Скорость реальной нагрузки не обязана с нею коррелировать.

LevT

мне например удавалось получать 110 мегабайт в секунду на intel сетевухах под windows
(target RAM диск - инициатор в NUL) а под остальным я не знаю как такую скорость получить

Dimsoft

ты же проверял линейную скорость, не так ли? Использовать iometer - отдельная наука, мною, например, до сих пор не освоенная.

Ещё утиль появилась такого же типа: Intel NAS Performance Toolkit. Я эту сволочь скачал и поставил, собрался вдумчиво курить - но она отказалась запускаться на 2008 R2.

Цитата:

Прежде всего, надо уяснить, что скорость линейного однопоточного обмена - это показатель только линейного однопоточного обмена.  Скорость реальной нагрузки не обязана с нею коррелировать.

LevT
Кто же с этим спорит?
Но все таки это показатель. особенно когда показания скорости отличаются настолько сильно:
Open-E DSS V6 ~ 103MB/sek
DataCore SanMelody ~ 97/MB/sek
StarWind (с тюнингом) ~ 90MB/sek
Microsoft iSCSI Target ~ 45 MB/sek
Openfiler ~ 45 MB/sek

Протестировано мною лично на одинаковом железе. Судя из этих показателей, слабо вериться что например Openfiler при реальной нагрузке вдруг покажет лучшую производительность чем DSS V6 или StarWind. Надежда остается только на тонкую настройку, тем более что Openfiler это опенсоурс проект, и там наверняка можно что-то подкрутить.

kdsnice

Цитата:

Но все таки это показатель.

в том-то и дело, что сервероторгаши на иксбите зуб дают рядом золотых зубов клянутся: НЕ ПОКАЗАТЕЛЬ это. В этом вопросе я склонен им верить.

Надо бы осилить иометер... и перепроверить твои цифры с более реальной нагрузкой.

Один коллега в теме VMware обещал в ноябре заняться созданием квазистандартного LiveCD с линуксовым таргетом - для измерения влияния остальных элементов инфраструктуры.


Добавлено:
kdsnice

Погляди на список: ни опенфайлеру, ни мелкомягким мухлёж маркетологов не нужен (по разным причинам). А вот продажи у тройки "лидеров" чётко зависят от измерений. Причем именно от наивных измерений типа твоего: умников с иометером доля процента, которой можно смело пренебречь.

Цитата:

ни опенфайлеру, ни мелкомягким мухлёж маркетологов не нужен

Может по этому майкрософтовским таргетом мало кто пользуется?

А насчет openfiler, думаю тут дело в доводки. Все таки серьезный проект и он давно на рынке (с 2004 года), так что нужно покапать глубже, на то он и опенсоурс, что ручками все нужно доводить

П.С. Для измерения скорости я использую Everest Hdd Speed Test Suite, там целый комплекс тестов, хотя и только на чтение.

Цитата:

ы же проверял линейную скорость, не так ли?

LevT
да

в иометре можно все что угодно насочинять, вот только как оно будет коррелировать с действительностью ?

Добавлено:

Цитата:

Может по этому майкрософтовским таргетом мало кто пользуется?

kdsnice
так они его отдельно не продают
он идет как дополнительная опция к дорогому сторадж серверу

Цитата:

в иометре можно все что угодно насочинять, вот только как оно будет коррелировать с действительностью ?

я не знаю ответа.

Но хотя бы утверждения торгашей об отсутствии корреляции с линейной однопоточной скоростью - проверке поддаются.

Полазив еще немного по просторам интернета, в том числе и на руборде, я понял, что OpenSolaris 2009.6 с COMSTAR с использованием ZFS какая-то очень непонятная, и очень рульная штука. Так что солярис уже качается, а тем временем вот что у меня получилось с Microsoft iSCSI Target переученным и установленным на Windows 2008 R2 x64

Linear Read (begin) 76 MB/sek
Linear Read (Middle) 70 MB/sek
Linear Read (end) 68 MB/sek
Random Read 69 MB/sek

Измерения проводились 3-и раза, взято среднее арифметическое. На сетевой карте включены Jumbo frames, добавлены ключи в реестре. Ключи как написано здесь http://www.starwindsoftware.com/forums/starwind-f5/tcp-stack-optimized-iscsi-settings-t792.html

Получилось неплохо, по этому для продакшена пока выбираю Microsoft iSCSI Target, а тем временем буду разбираться с OpenSolaris 2009.6 и COMSTAR.

Цитата:

Получилось неплохо

kdsnice
еще есть положительный момент
microsoft iscsi target и microsoft hyper-v используют одинаковые vhd образы дисков =>
можно один и тот же том или локально в hyper-v использовать или "отдать" по сети