Большие гонки кластеров

Кластерное ПО Compaq завоевало первое место в сравнительном тестировании компании D.H. Brown Associates

Однако, если в самом начале кластеры применяли для увеличения надежности компьютеров, то сейчас эта технология также позволяет увеличить и быстродействие вычислительной платформы.

Кроме этих двух характеристик кластерной технологии — быстродействия и надежности — есть еще несколько дополнительных требований, которые важны при использовании кластеров в современных вычислительных системах. Вот эти требования:

• Скорость резервного копирования и восстановления данных.
• Функциональные возможности по переносу нагрузки с аварийных узлов на исправные.
• Параллельный доступ к базе данных.
• Средства настройки высокого уровня готовности.
• Единое внешнее представление системы.
• Восстановление после аварии.

Именно эти требования выдвигала известная аналитическая компания D.H. Brown Associates при тестировании шести наиболее известных систем кластеризации. В исследовании сравнивались следующие шесть систем:

Рассмотрим более подробно, как проводилось тестирование и как с ним справилась система от Compaq.

Резервное копирование и восстановление информации

Этой проверке исследователи придавали большое значение, поскольку основная задача системы высокой надежности — любой ценой сохранить данные. А использование нескольких узлов кластера, которые одновременно обращаются к одним и тем же данным, увеличивает сложность процедуры резервного копирования и последующего восстановления информации.

Для оценки качества системы резервного копирования и восстановления информации исследователи использовали следующие четыре характеристики: как система работает в режиме переноса нагрузки с аварийного узла на исправный, насколько хорошо распознается авария целого узла или отдельного приложения, какие предусмотрены возможности по восстановлению информации, не происходит ли сбоев в работе файловой системы при переносе нагрузки на исправные узлы.

• Файловая система, используемая Compaq, не требует перемонтирования при передаче ее на другой узел кластера.
• TruCluster динамически меняет процедуру резервного копирования в зависимости от того, какие ресурсы располагаются на узлах кластера.
• Для проверки работоспособности узлов и приложений используются утилиты, которые контролируют загрузку процессора, а также размеры свободного дискового пространства и области подкачки.
• При выходе из строя адаптера глобальной сети узел может использовать для связи с внешним миром локальную сеть или соответствующий адаптер другого узла.

Перенос нагрузки

Это не менее важная часть исследования программного обеспечения кластеризации. Перенос нагрузки с аварийного узла на исправный является основным механизмом обеспечения непрерывной работы приложений при условии оптимального использования ресурсов кластера. Эти требования — перенос нагрузки и резервное копирование c восстановлением информации — являются ключевыми во всей кластерной технологии, а все остальные требования касаются, скорее, удобства использования этих технологий.

Насколько эффективно реализован перенос нагрузки в тестируемых системах, исследователи проверяли по следующим характеристикам: масштабируемость числа узлов, процессоров и дисков, поддерживаемых кластером; поддержка RAID-массивов уровней 1 и 5; сохранение нормального режима функционирования NFS и целостности транзакций; коммуникационные возможности кластера (единый IP-адрес, переключение соединений SNA и X.25); переключение дисков и ленточных накопителей к исправному узлу, функциональные возможности по загрузке и эксплуатации кластерной системы.

• TruCluster поддерживает перенос нагрузки по сетям Ethernet, Fast Ethernet, FDDI и ATM, а также по последовательному соединению и через разделяемый диск.
• Использование соединения узлов по технологии Memory Channel позволяет оптимизировать передачу сообщений между ними.
• При выходе из строя адаптера глобальной сети узел может использовать для связи с внешним миром локальную сеть или соответствующий адаптер другого узла.

Можно сконфигурировать интерфейсы, используемые для подключения дисков и ленточных накопителей так, чтобы ими можно было управлять только с исправных узлов кластера.

Параллельный доступ к базам данных

Кластеры, в основном, используют для хранения большого количества информации. Она, как правило, хранится в базах данных, и поэтому исследователи из D.H. Brown Associates решили проверить совместную работу кластерных систем и СУБД. Для выполнения этого теста система должна иметь распределенный менеджер блокировок, который обеспечивает непротиворечивое изменение базы данных при поступлении последовательности запросов с разных узлов кластера.

В этом разделе кластер оценивали по следующим характеристикам: работа СУБД на четырехузловом кластере, поддержка режима виртуального «сырого» (raw) устройства, на котором СУБД хранит данные, работа менеджера блокировок, другие функциональные особенности кластера.

• Технология Memory Channel, используемая Compaq для объединения узлов кластера, позволяет использовать DMA-диск в качестве виртуального сырого устройства.
• Только в системе Compaq реализована балансировка нагрузки на систему хранения данных.
• Memory Channel позволяет оптимизировать передачу сообщений между узлами кластера при работе менеджера блокировок (Distributed Lock Manager — DLM).
• Compaq встроила менеджер блокировок в ядро системы, и опубликовал API-интерфейс для доступа к нему приложений.

Настройка конфигурации высокого уровня готовности

Настройка такой конфигурации кластера, при которой обеспечивается высокая доступность приложений, дело не простое. Это связано в первую очередь с тем, что сложно определять правила, по которым те или иные приложения переносятся с аварийных узлов кластера на исправные. Кластерная система должна позволять легко переносить приложения с одного узла кластера на другой, а также восстанавливать аварийное приложение на другом узле кластера.

В этой категории исследовались следующие характеристики системы: качество интерфейса системного администратора, возможности сценариев восстановления приложений, качество системы балансировки нагрузки, оперативное изменение оборудования кластера, дополнительные функциональные возможности системы.

• TruCluster можно администрировать с помощью Web, графического интерфейса и командной строки.
• Для всех ресурсов системы написаны сценарии восстановления после сбоя.
• Compaq реализовала в кластере все стандартные протоколы сетевого контроля, такие как MIB и SNMP.
• Кластер обеспечивает балансировку нагрузки и динамическое изменение процедур резервного копирования.

Единое представление кластера (Single System Image)

Следует отметить, что пользователь системы не обязан знать о том, что он работает с кластерной системой, поэтому для максимально комфортных условий работы пользователей кластер должен выглядеть извне как единый компьютер. Кластер должен иметь единую файловую систему для всех узлов, единый IP-адрес и единое ядро системы. Для проверки этих требований и были проведены исследования, которые перечислены в этой категории.

Для обеспечения единого внешнего представления кластер должен иметь следующие характеристики: единая файловая система, драйвера устройств и соответствие стандарту POSIX, единое именование ресурсов внутри кластера, независимое от того, на каком узле кластера ресурс располагается, дополнительные возможности, такие как единый IP-адрес, общая область подкачки для всего кластера и др.

По этим параметрам Compaq также получила первое место, что обеспечивалось следующими особенностями TruCluster:

• TruCluster поддерживает кластерную файловую систему CFS, которая соответствует стандарту POSIX.
• Использование журнальной файловой системы AdvFS позволяет обойтись без утилит проверки целостности файловой системы.
• Поддержка прямого и косвенного доступа к CFS с использованием Device Request Dispatcher.
• Поддержка единых паролей, общего IP-адреса, единых параметров системы безопасности, состояний процессов и других характеристик.

Восстановление после стихийного бедствия

Даже самые надежные системы могут выйти из строя, если произойдет, например, пожар в помещении, где стоит сервер, или наводнение. При глобальном масштабе современного бизнеса такие относительно локальные неприятности не должны ему вредить, поэтому кластер должен быть распределенным. К счастью, стихийные бедствия случаются не часто, и поэтому в сравнении кластерных технологий этой части исследований уделялось меньше всего внимания.

Для обеспечения нечувствительности системы к стихийным бедствиям исследователи выдвинули следующие требования: возможность перенесения приложений на узлы, расположенные как можно дальше друг от друга, обеспечение репликации и зеркалирования информации на внешние по отношению к кластеру серверы, максимальная удаленность узлов кластера друг от друга, дополнительные функциональные возможности, такие как удаленные перезапуск кластера и управление им, обеспечение непротиворечивой работы нескольких фрагментов кластерной системы, которые потеряли связь друг с другом и другие требования.

На момент тестирования решение Compaq обеспечивало максимальное расстояние между узлами кластера, равное 15 км.

Итог

Поскольку исследование было комплексным, то представители D.H. Brown Associates выводили общую оценку продуктов по сумме шести тестов. При этом использовались разные весовые коэффициенты. Их соотношение было следующим: резервное копирование — 20; балансировка нагрузки — 20; параллельный доступ к СУБД — 10; администрирование конфигурации высокой готовности — 5; единое представление системы — 5%; защита от стихийных бедствий — 5.

Таким образом, максимальное суммарное значение не могло превышать 65 баллов. В таблице приведены общие результаты тестов.

Преимущества Compaq

Исследования D.H. Brown Associates показали, что кластерное решение Compaq максимально отвечает современным требованиям, предьявляемым компаниями к кластерной технологии. Итак, давайте перечислим еще раз достоинства TruCluster:

• Файловая система, используемая Compaq, не требует перемонтирования при передаче ее на другой узел кластера, поскольку использует DLM и доступна одновременно с нескольких узлов кластера.
• Использование соединения узлов по технологии Memory Channel позволяет оптимизировать передачу сообщений между ними.
• Только в кластерном программном обеспечении Compaq реализована балансировка нагрузки через подсистему хранения.
• Кластер обеспечивает балансировку нагрузки и динамическое изменение процедур резервного копирования.
• Compaq встроил менеджер блокировок в ядро системы и опубликовал API-интерфейс для доступа к нему приложений.
• TruCluster можно администрировать через Web, посредством графического интерфейса и командной строки.
• Использование файловой системы с журналированием AdvFS позволяет обойтись без утилит проверки целостности файловой системы.
• Поддерживаются единые пароли, IP-адреса, параметры системы безопасности, статусов процессов и другие характеристики.

Как устроен кластер

Кластер объединяет несколько серверов, соединенных между собой специальным коммуникационным каналом, часто называемым также «системной сетью».