Легконаращиваемое хранилище(бюджетный вариант)

Технологии постороения кластеров (вычислительных и отказоустойчивых), настройка терминал серверов,
SAN , NAS, FibreChannel, Infiniband

Модераторы: Trinity admin`s, Free-lance moderator`s

otaku
Advanced member
Сообщения: 54
Зарегистрирован: 08 май 2008, 09:30
Откуда: Новосибирск

Легконаращиваемое хранилище(бюджетный вариант)

Сообщение otaku » 08 май 2008, 11:18

Пришла мне идея в быту отказатся от софтового рейда под линуксом.
После первоначальных расчетов было посчитано что дешевле всего покупать корпуса на 12 винтов, ставить туда мать, контроллер, и потом все эти диски анонсить в сеть по iscsi, щас подумываю нельзя ли анонсить винты из linux по fibre chanell?
На другом сервере ловлю винты по iscsi и делаю из них рейд 6 софтовый, все довольно шустренько работает.
Есть ли у кого нибудь подобный опыт с fibre channel, какой девайс покупать для анонса по фибрчанел?

Аватара пользователя
a_shats
Advanced member
Сообщения: 5010
Зарегистрирован: 27 авг 2002, 10:55
Откуда: Москва
Контактная информация:

Сообщение a_shats » 08 май 2008, 11:35

Ээээ, у Вас есть нормальные рабочие Target дрова для FC ?

otaku
Advanced member
Сообщения: 54
Зарегистрирован: 08 май 2008, 09:30
Откуда: Новосибирск

Сообщение otaku » 08 май 2008, 11:40

с FC ещё не работал, только подумываю наж этим, дров соответственно нету.

Аватара пользователя
a_shats
Advanced member
Сообщения: 5010
Зарегистрирован: 27 авг 2002, 10:55
Откуда: Москва
Контактная информация:

Сообщение a_shats » 08 май 2008, 11:48

То есть Вы их писать собрались ?  :D

Аватара пользователя
CrazyFrog
Advanced member
Сообщения: 210
Зарегистрирован: 16 авг 2005, 23:09
Откуда: Мурманск

Сообщение CrazyFrog » 08 май 2008, 20:48


Аватара пользователя
a_shats
Advanced member
Сообщения: 5010
Зарегистрирован: 27 авг 2002, 10:55
Откуда: Москва
Контактная информация:

Сообщение a_shats » 12 май 2008, 15:09

CrazyFrog
Это понятно  :D
Моя мысль была несколько в ином - чем изобретать велосипед, может, лучше описать задачу и узнать о готовых вещах ? :)

Аватара пользователя
art
free-lance moderator
Сообщения: 653
Зарегистрирован: 15 май 2003, 11:25
Откуда: SPb

Сообщение art » 12 май 2008, 19:26

позвольте полюбопытствовать,
эта штука позволяет серверу притворится FC хранилищем со своими WWN, LUN и прочим?

otaku
Advanced member
Сообщения: 54
Зарегистрирован: 08 май 2008, 09:30
Откуда: Новосибирск

Сообщение otaku » 14 май 2008, 10:46

a_shats писал(а):То есть Вы их писать собрались ?  :D
Если  в развитии проэкта в итоге окажется экономически вотсребованным, то почему бы и не написать опенсорсные драйвера под линукс или бсд.

Аватара пользователя
a_shats
Advanced member
Сообщения: 5010
Зарегистрирован: 27 авг 2002, 10:55
Откуда: Москва
Контактная информация:

Сообщение a_shats » 14 май 2008, 11:14

Жесть :) В западных компаниях за людей, пишущих софт для внешних массивов, платят дикие бабки (см. покупку Mylex IBM, ICP - сначала Intel, потом Adaptec), про какие-то десятилетия опыта разработки говорят - а оно вон как просто, оказывается, сел да написал  :D

Аватара пользователя
CrazyFrog
Advanced member
Сообщения: 210
Зарегистрирован: 16 авг 2005, 23:09
Откуда: Мурманск

Сообщение CrazyFrog » 15 май 2008, 00:06

art писал(а): эта штука позволяет серверу притворится FC хранилищем со своими WWN, LUN и прочим?
Я сам не пробовал (у меня нет сейчас такого qlogic), но заявляется что да.

У linux в 2.6.24+ тоже есть такая возможность.

otaku
Advanced member
Сообщения: 54
Зарегистрирован: 08 май 2008, 09:30
Откуда: Новосибирск

Сообщение otaku » 15 май 2008, 08:03

CrazyFrog писал(а):
art писал(а): эта штука позволяет серверу притворится FC хранилищем со своими WWN, LUN и прочим?
Я сам не пробовал (у меня нет сейчас такого qlogic), но заявляется что да.

У linux в 2.6.24+ тоже есть такая возможность.
Чем реализуется?
А то не нашел такой фичи.
С одной стороны сложно, с другой написать вменяемые драйвера на готовое железо намного проще, чем спроэктировать и реализовать железку.
Есть деньги есть идея, вопрос только в том стоит ли такое делать или нет, вот и все 8)
А программистов в России хороших не много, но встречаются, иногда даже сам удивляюсь их способностям.

Аватара пользователя
art
free-lance moderator
Сообщения: 653
Зарегистрирован: 15 май 2003, 11:25
Откуда: SPb

Сообщение art » 15 май 2008, 11:46

CrazyFrog писал(а):о заявляется что да.
А я почему то думал, что в FC сети участники неравноправны, т.е. FC-HBA не могут чего-то на физическом уровне.
Выходит, что  soft-based хранилище можно сделать (теоретически) из общедоступного железа.

Тогда понятно, почему Netapp стал судиться с SUN за их zfs.

sivanov
Advanced member
Сообщения: 127
Зарегистрирован: 25 апр 2008, 11:20
Откуда: Свердлоская обл.

Сообщение sivanov » 15 май 2008, 13:59

FC HBA нужны с поддержкой Target mode.
А Sun с ZFS действительно подложила огромную свинью NetApp (и правильно сделала!). Преимущества перед чисто аппаратными решениям тоже имеются...
А поддержка target mode SCSI устройств есть например во FreeBSD аж с версии 3.0 , т.е. январь 1999 года :)

Аватара пользователя
CrazyFrog
Advanced member
Сообщения: 210
Зарегистрирован: 16 авг 2005, 23:09
Откуда: Мурманск

Сообщение CrazyFrog » 15 май 2008, 15:02

otaku писал(а): У linux в 2.6.24+ тоже есть такая возможность.
Чем реализуется?
http://git.kernel.org/?p=linux/kernel/g ... cab745d6c8
Есть деньги есть идея, вопрос только в том стоит ли такое делать или нет, вот и все 8)
Нет. FC уже почти умер, закопать только забыли. В этом сегменте рынка роста больше не будет. Ниша FC - реляционные базы (=структурные данные) достигли своего эффективного предела. Рост --  и гигантский -- будет в неcтруктурированых данных. Нужны огромные кластерные NASы, горизонтально-масштабируемые, shared-nothing, максимально устойчивые к отказу одного-нескольких узлов, ёмкостью до петабайт, скоростью доступа гигабайты в секунду. И чтоб был MAID, и чтоб были снапшоты/CDP. Приложениями будут медиа-данные, суперкомпьютеры, архивы, всякий UGC в web 2.0.

Такая нужда сейчас незаметна, поскольку пока эти задачи потребители решают "на коленке" со странными писюками на 48 винтов, но по мере наработки опыта тупиковость этого пути будет очевидна.
А программистов в России хороших не много, но встречаются, иногда даже сам удивляюсь их способностям.
AFAIK, в isilon почти все погроммисты бывшие россияне.

Аватара пользователя
art
free-lance moderator
Сообщения: 653
Зарегистрирован: 15 май 2003, 11:25
Откуда: SPb

Сообщение art » 15 май 2008, 16:22

флеймообразующая тема ...
CrazyFrog писал(а): Нет. FC уже почти умер, закопать только забыли. В этом сегменте рынка роста больше не будет. Ниша FC - реляционные базы (=структурные данные) достигли своего эффективного предела. Рост --  и гигантский -- будет в неcтруктурированых данных.
Преувеличение.
Возможно в области FC не будет тем для новостей, но хоронить тут нечего. Если сейчас большие деньги пузярятся вокруг WEB2.0, то это не значит, что этим мир накормишь.

Пока еще люди покупают товары, ездят в поездах и летают в самолетах. Заводы управляют своими производственными линиями, банки счетами, биржи торгами и т.д. Все это OLTP

CrazyFrog писал(а): Нужны огромные кластерные NASы, горизонтально-масштабируемые, shared-nothing, максимально устойчивые к отказу одного-нескольких узлов, ёмкостью до петабайт, скоростью доступа гигабайты в секунду.
Кому нужны?
Гуглу и пр., который зарабатывает деньги на рекламе, потому что люди пялятся в плохоструктурированный контент.

Едва ли наш белковый мир сможет вытеснить реальное производство за пределы земли и оставить себе в пользование только рекламу, информацию и потребление услуг.

А раз так, то без OLTP никуда не денешься.
OLTP на слабосвязанных кластерах появится не раньше, чем оптические CORE2CORE & CORE2RAM соединение, а это будет еще не скоро.

Ответить

Вернуться в «Кластеры, Аппаратная часть»

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 13 гостей