Blade-технологии HP

[Nadir Zaitov]

Сообщение от Eldar Fattakhov

... любой процессор использует практически любой доступный участок оперативной памяти ... другого вычислительного узла

Объясните тут поподробнее, как это регулируется и какой критерий дотупности:

• В обход контроля операционки узла? Если нет, то требуются процессорные мощности на работу соотв. части операционки.
• Насколько память "прозрачна" для процессора? В процессорах архитектуры IA32_x64 уже есть встроенные контроллеры Ethernet или, все ж, обмен идет через локальный кусок памяти узла? Если через кусок памяти, то ИМХО, во первых, это затратно для сервера (больше серверов и обмена данными - больше затрат на куски "неэффективной, буферной" памяти) и существенно сокращает эффективность работы кеш-процессоров (все кеш должны теперь еще синхронизироваться с изменяющимися кусками физической памяти, что затратно).

[Eldar Fattakhov]

Сообщение от Nadir Zaitov

Объясните тут поподробнее

RDMA (англ. Remote Direct Memory Access) — группа протоколов удалённого прямого доступа к памяти, при котором передача данных из памяти одного компьютера в память другого компьютера происходит без участия операционной системы, при этом исключается участие CPU в обработке кода переноса и необходимость пересылки данных из памяти приложения в буферную область ОС, то есть данные пересылаются напрямую на соответствующий сетевой контроллер. (Wikipedia).

Возможно, некоторые мои первичные комментарии не однозначно ясны, но суть сохраняется.

Дополнительно - на англоязычной страничке Википедии.

[Nadir Zaitov]

Сообщение от Eldar Fattakhov

RDMA (англ. Remote Direct Memory Access)...
Возможно, некоторые мои первичные комментарии не однозначно ясны, но суть сохраняется.

Спасибо за ссылочку. Так и получается, что RDMA (я так понял) - это копирование куска памяти одного узла в кусок памяти другого узла без непосредственного участия процессора, хотя затраты процессорные всеж есть (на инициализацию процесса и на приемку результатов) и (как я и предполагал) такой процесс существенно сокращает эффективность работы кеш-процессоров (все кеш должны теперь еще синхронизироваться с изменяющимися кусками физической памяти ...). Кроме того для самой памяти необходима регистрация памяти и более тонкое управление операционной системой, в результате чего из оборота (доступности) на время вылетают соответствующие куски памяти (у передающего узла только на запись, у принимающего и на запись и на чтение всеми процессами и процессорами соответственно).

Вы же согласитесь, что это не совсем "доступность любого свободного куска памяти у любого узла", по крайней мере вы платите за этот кусок своим куском памяти, да и обе операционки "в курсе" того, что происходит.

[Eldar Fattakhov]

Сообщение от Nadir Zaitov

как я и предполагал

Я всегда предполагаю, что за всё что имеем нужно чем-то платить. Само собой, гибкость перераспределения ресурсов сопровождается накладными расходами, иногда превышающими выгоду от этой самой теоретический гибкости. Здесь яркими примерами могут быть попытки "распилить" один физический сервер на множество виртуальных в ходе процесса консолидации серверных ферм (точнее - "зоопарков") с использованием виртуализации.

Если же остаться в обсуждаемой области (HPC), то складывается впечатление, что те накладные затраты (ОС, память, процессоры и т.п.), которые Вам видны и предсказуемы, не носят сколь-нибудь критичного характера при создании больших серверных ферм. Например, предлагаются "чуть-ли-некоробочные" варианты HPC-ферм: HP Cluster Platform Express (на базе серверов-лезвий типа HP ProLiant BL465c G5 или "обычных" серверов HP ProLiant DL165 G5). Эти решения могут строиться как с использованием InfiniBand, так и без неё (полный набор вариантов - Gigabit Ethernet, InfiniBand, Myrinet, Quadrics). Выбор моделей серверов не ограничен вышеуказанными (в качестве управляющих можно использовать 7 моделей, в качестве вычислительных - 6).

С не-коробочными версиями HP-кластеров (в данном контексте "HP" - High Performance) можно ознакомиться в документе HP Cluster Platform 3000 and HP Cluster Platform 4000. На картинке из этого документа видно, что кластер на 128 узлов может занять без проблем 4 шкафа. Одновременно можно почитать о возможностях расширения конфигурации до 1024 серверных узлов (стандартно - до 512 узлов, чтобы получить полную систему нужно будет воспользоваться услугами Центров компетенции HP).

Более подробно о кластерах от компании Hewlett-Packard - можно почитать в разделе Unified Cluster Portfolio overview на сайте HP.

[Eldar Fattakhov]

В настоящий момент HP занимает 41.8% в списке TOP500 (включая системы на основе серверов HP ProLiant), притом в списке недавно анонсированных систем более 40% заняли системы на основе HP BladeSystem (они заняли 201 позицию в списке TOP500)!

Одним из участников списка является система, состоящая из 4 супер-кластеров (1280 серверов-лезвий HP BL2x220cс пиковой производительностью 205 терафлопс/сек), находящаяся в эксплуатации анимационной компании WETA Digital.

[Alexander Fadeev]

Сообщение от Vangelis Baris

Добрый день. В настоящий момент у нас в офисе есть демонстрационное Blade шасси с целым зоопарком серверов (на процессорах Intel Itanium2, Intel Xeon, AMD Opteron и под разными операционными системами HP-UX, Linux и Windows). Мы можем провести презентацию Blade технологии от НР в любое удобное для Вас время у нас в офисе. Я также продемонстрирую не на словах на деле все возможности по управлению.

Есть ли возможность оттестировать на серверах HP разного класса EastLinux? Наши корпоративные заказчики проявляют интерес к нашим решениям, но оборудование должно соотвествовать...
Если возможность эта есть - как её реализовать?

[Eldar Fattakhov]

Сообщение от Alexander Fadeev

Есть ли возможность оттестировать на серверах HP разного класса EastLinux? Наши корпоративные заказчики проявляют интерес к нашим решениям, но оборудование должно соотвествовать...
Если возможность эта есть - как её реализовать?

Возможность протестировать есть, но ограниченная в настоящий момент - в офисе есть только один свободный сервер начального уровня (HP ProLiant ML150 на основе процессоров Intel Xeon, дисков SAS, до 4 ГБ ОЗУ). Сможем передать на тестирование заказчику на период до двух недель.

"Более тяжелые" решения (серверы стандартной архитектуры 300-й серии, blade-серверы) доступны через партнеров HP (есть в наличии у компаний Шарифа, Агата Импекс) при согласовании условий тестирования.

[Nadir Zaitov]

Оффтоп:

Сообщение от Eldar Fattakhov

серверы стандартной архитектуры 300-й серии

Был еще у Элдар-аки HP ProLiant ML310, да мы его уже на тестирование забрали. Возвратим, Эльдар-ака, не скоро.

[Erkin Kuchkarov]

Оффтоп:

Сообщение от Nadir Zaitov

ML310

У Мерседес Бенц есть серия "внедорожников" ML... ML 350 к примеру. Надо было его просить

[Nadir Zaitov]

Оффтоп:

Сообщение от Erkin Kuchkarov

Оффтоп:

У Мерседес Бенц есть серия "внедорожников" ML... ML 350 к примеру. Надо было его просить

Вайдод! Выяснил, что в итоге Эльдар-ака нам пару внедорожников типа ML.... 150 (мерседесовский "Смарт") передал, да еще 2-х различных поколений...
Это тот случай, когда 1+1 существенно меньше 1