Кластер VMware на блейд-серверах BL460c
Кластер предназначается для средних и крупных предприятий, которые хотят добиться уменьшения времени внеплановых простоев. Кластер высокой доступности помогает в предоставлении услуги в режиме 24x7 и доступности сервера. Кластер состоит как минимум из 2 серверов. В предлагаемом решении управляемые VMware серверы следят за состоянием друг друга. Один из них ведущий, именно на нем разворачивается наше бизнес-приложение. Если происходит отказ ведущего сервера, то второй автоматически принимает его роль, поэтому доступ к бизнес-приложению заказчика практически не прерывается.
1. Описание задачи
Данный пример описывает создание высокодоступного кластера VMware на блейд-серверах BL460c G7. Оборудование представляет собой два блейд-сервера BL460c G7 со сконфигурированным кластером VMware HA (High Available) и блейд-корзины HP c7000. На основе этого примера может быть собран кластер на блейд-серверах Gen8, особых различий в конфигурировании не будет. HP EVA 4400 - система хранения. Для подключений Fibre Channel и Ethernet в корзине c7000 в 1-м и 2-ом отсеках устанавливаются модули HP Virtual Connect Flex Fabric
2. Описание компонентов
Virtual Connect FlexFabric — виртуализированный конвергентный модуль вывода и ввода для блейд-корзины с7000. HP Virtual Connect FlexFabric применяет технологии Accelerated iSCSI, FCoE, Flex-10 для коммутации сетевой инфраструктуры (LAN и SAN) и блейд-серверов со скоростью 10Gb. Возможности: перенос «профилей» (WWN серверов и таблица MAC) как между разными лезвиями в шасси, так и на удалённые сайты, на которых есть подобный блейд-сервер.
Использование Virtual Connect позволяет делить два порта сетевой карты блейд-сервера на четыре порта 1GbE/10GbE/8Gb FC/iSCSI при общей пропускной способности 10GbE на каждый порт. В итоге, возможно получить на сервер от восьми виртуальных портов (на BL460с G7) задаваемые при первой инициализации. Но HP Virtual Connect FlexFabric не полноценные коммутаторы – это агрегаторы, для их работы необходимы отдельные SAN- и Ethernet- свитчи (последняя прошивка позволяет Direct Connect с HP P10000 3PAR). Использованное оборудование в Onboard Administrator.
Карта NC553i Dual Port FlexFabric 10Gb интегрирована в ProLiant BL460c G7, может работать напрямую с HP Virtual Connect FlexFabric, мезонин-карты для этого не нужны. Для отказоустойчивости связи блейд-сервера с Ethernet-коммутаторами и системой хранения EVA 4400 установлены модули HP Virtual Connect FlexFabric Данный сценарий предусматривает разделение трафика от HP Virtual Connect FlexFabric на FC-фабрику и Ethernet-коммутаторы. Коммутация модулей и блейд-серверов внутри корзины происходит благодаря FCoE. HP Virtual Connect FlexFabric для работы с разными протоколами необходимы трансиверы. На каждом модуле в этом примере в 1 и 2 порт установлены трансиверы 4 Gb FC SFP, а в 4 и 5 трансиверы 10Gb SFP+. Для задействования сетевого оборудования в демо-центре использованы10GbE-каналы
На диаграмме видно, что три порта NC553i адаптера Dual Port FlexFabric 10Gb для подключения к инфраструктуре сети и взаимодействия машин между собой сконфигурированы как FlexNIC. Последний порт для связи с системой хранения EVA 4400 и SAN-инфраструктурой сконфигурирован как FCoE. С модулями Virtual Connect для управления HP Virtual Connect Manager поставляется ПО, и HP Virtual Connect Enterprise Manager для модулей Enterprise. При помощи Enterprise Manager возможно управление 256 доменами из одной консоли. После подключения модуль конфигурируется подключением самой корзины Onboard Administrator или по IP-адресу, назначенному по умолчанию на заводе.
3. Настройка профилей
После того как HP FlexFabric подключен, необходимо определить SAN-фабрику, серверные профили, Ethernet-сеть и домен. Такие настройки производятся в командной строке или HP Virtual Connect Manager. В приведенном примере домен создан, значит, следующее действие – определение VC Sharing Uplink Sets для Ethernet сетей машин HTC-77-A и HTC-77-B. В мастере установки включаем “Map VLAN tags”.
Эта функция позволяет использовать один Shared Uplink Set, чтобы интерфейс работал с множеством сетей. Так можно на интерфейсе сервера настраивать множество VLANs. В мастере установки VCM задаются параметры Shared Uplink Sets. Пример задания SUS:
Обе сети «HTC-MGMT-A» и«HTC-77-A» назначаются: VLAN_Uplink_1 – порт 5 первого модуля; VLAN_Uplink_2 (Shared Uplink Set) на 5 порт второго модуля, и включает сети HTC-MGMT-B (VLAN 21) и HTC-77-B (VLAN 20).
Пример создания сети в VCM:
HP Virtual Connect, используя 10Gb соединения, может создать внутреннюю сеть. Такая сеть используется для VMware vMotion и для организации отказоустойчивости. В данном случае проведена настройка двух сетей VMware vMotion поименованные HP-MGMT-A и HP-MGMT-B. 6 порт HP Virtual Connect FlexFabric в 1 и 2 отсетках подключает панель управления.
После этого настраивается фабрика SAN: в VCM выбирается Define – SAN Fabric. В первом отсеке выбираем порт X1 для SAN-1. Для модуля SAN-2акже X1 порт.
Пример настройки:
Последний шаг - «склеивание» в серверный профиль ранее сделанных настроек. Это можно сделать при помощи командной строки: Virtual Connect – Virtual Connect Scripting Utility или web-интерфейс VCM. Перед тем, как устанавливать ОС, надо проверить обновлены ли FC, NIC и системные драйверы и заданы ли параметры сети. Пример: Выбираем Define – Server Profile в VCM, вводим имя профиля, из созданных ранее сетевых подключений выбираем необходимое.
В примере порты назначены заранее: 2 SAN порта и 6 Ethernet портов на каждый профиль. Для отсеков 11 и 12 профили идентичны, каждый сервер видит одинаковый набор портов. Скорость на каждый порт не превышает 10Гб/с. В случае, когда планируется расширение сети, рекомендуется назначить нераспределенные порты в профиле(unassigned). Если сделать так, то позже можно будет их активировать без перезагрузки и выключения сервера.
По умолчанию при создании профиля доступны только два порта в Ethernet разделе. Для добавления вызываем правой кнопкой мыши контекстное меню и выбираем “Add connection”. Для типов портов назначаем скорость: порты управления – 500Mb/s, порты SAN – 4Gb/s, порты виртуальных машин – 4.5Gb/s. После того, как будут созданы профили, они привязываются в этом же меню к блейд-отсеку корзины. 
4. Настройка кластера VMware
Далее проводится удаленное подключение к блейдам, а также разворачивание VMware ESX 5.0. В меню установщика выбираем VMware и указываем путь к дистрибутиву. Перезагружаем после установки сервер и приступаем к настройке машин. Проводим подключение серверу ESX. В разделе Configuration создаем на каждый хост 6 vmnics, также и с модулем Virtual Connect: vMotion (vSwitch2), VM Network (vSwitch1), Service Console (vSwitch0). В итоге получается устойчивая конфигурация, в которой 2 vmnics соответствует каждой сети.
Можно заметить, что после добавления vmnics, каждому адаптеру задается скорость, которая задана в серверном профиле.
Затем с помощью vSwitch объединяем vmnics в группу: Port – в Configuration выбираем vSwitch – Edit, затем NIC Teaming, после чего видим оба vmnics. По умолчанию ставим балансировку нагрузки «Route based on the originating virtual port ID».
5. Дисковый массив EVA 4400
В показываемом примере создается LUN размером в 500 ГБ, разделенный между двумя хостами машин. Создаем виртуальный диск и презентуем его двум хостам ESX. Обязательное условие для кластера - разделяемый LUN. Новый LUN форматируется в VMFS, Raw Device mappings функция(RDMs) должна быть задействована для виртуальных машин. 6. Внедрение VMware vMotion и VMware HA Проверка доступности кластера: виртуальная машина Windows 2008 Server R2 развернута на одном из хостов.
Несколько раз вручную виртуальная машина смигрирована с сервера на сервер, кластер во время миграции оставался доступным.
Наш DC HTC DC, наш кластер – Demo-FlexFabric Cluster, хосты VMware - Demo-ESX2 и Demo-ESX1, SAS контроллеры блейд-серверов - vmhba2, порты сетевых карт NC553i Dual Port FlexFabric 10Gb Adapter, подключенные к LUN EVA 4400 - Vmhba0 и vmhba1, виртуальная машина - Demo-VM-W2K8R2-01.
В нашей компании Вы можете купить сервер бу от компании HP по низким ценам.
Статья создана по материалам специалиста HP.
