В сентябре 2005 года победителем тендера на строительство сети передачи данных, призванной обеспечить сбор информации в новых широкомасштабных научных проектах Европейского центра ядерных исследований (CERN), стало сетевое подразделение ProCurve Networking корпорации Hewlett-Packard. Через два года руководство компании пригласило европейских журналистов в пресс-тур по одному из крупнейших мировых центров современной физики, руководствуясь давно известной истиной — лучше один раз увидеть, чем сто раз услышать.
Потребность в радикальном обновлении сетевой инфраструктуры, которое должно завершиться в будущем году, возникла в связи с построением CERN большого адронного коллайдера (Large Hadron Collider, LHC) — гигантского 27-километрового ускорителя элементарных частиц, расположенного под землей на глубине около 100 м. По возможностям LHC не имеет аналогов: скорость протонов и легких ионов во встречных пучках будет лишь на 0,1% уступать скорости света.
Ожидается, что новый ускоритель, 80% средств на создание которого поступило от партнеров Центра, станет инструментом решения принципиально новых задач в области физики элементарных частиц. Для исследования процессов, вызываемых столкновением высокоэнергетичных адронных пучков, на ускорителе построены четыре системы детектирования: ALICE, ATLAS, CMS и LHCb. По оценкам, ATLAS (самая мощная из них, снабженная 150 млн сенсоров) будет генерировать данные с частотой 40 млн раз в секунду, поэтому ее подключение к вычислительным комплексам и системам хранения потребует полосы пропускания 320 Мбайт/с. Для остальных детекторов показатели находятся в диапазоне 50–220 Мбайт/с.
Масштабы проекта — лишь одна из причин модернизации инфраструктуры, предпринятой руководством Центра. Среди других факторов руководители CERN называют возросшее число пользователей, изменение их потребностей доступа к данным и вычислительным мощностям. Уже год назад с учетом приглашенных ученых количество пользователей корпоративной сети CERN примерно вдвое превысило число штатных сотрудников, и этот разрыв продолжает расти. Ежемесячно ИТ-департамент Центра получает более 1,5 тыс. запросов на перемещение компьютеров либо изменение их конфигураций. Другими словами, работа департамента в чем-то аналогична деятельности сервис-провайдера. Кроме того, исследователи, приезжающие в CERN со всего мира, хотят использовать все возможности ИТ-инфраструктуры этой организации на своих рабочих местах.
Эти обстоятельства обусловили появление весьма жестких технических требований в запросе 2005 года на тендерные предложения. Естественно, серьезное внимание уделялось и цене. По совокупности критериев наилучшим оказалось решение HP ProCurve. Поставки сетевого оборудования в рамках контракта начались весной 2006 года, а сейчас работа завершена примерно на 75%. В подразделениях CERN намечено установить чуть менее 100 коммутаторов серий 5406 и 5412, примерно 900 устройств семейства 3400 и без малого 1 тыс. коммутаторов серии 3500. В результате магистральный сегмент новой сети будет насчитывать около 250 портов 10 GE и свыше 2 тыс. гигабитных портов Ethernet. Количество гигабитных портов для подключения пользовательских компьютеров достигнет 70 тыс.
О масштабах сетевой и вычислительной инфраструктуры CERN свидетельствуют и такие данные: три опорные сети с пропускной способностью по несколько десятков гигабит в секунду, более 100 высокопроизводительных маршрутизаторов, свыше 2 тыс. подсетей, более 50 тыс. активных пользовательских устройств (число которых стремительно увеличивается), 3 тыс. км кабеля на неэкранированной витой паре и 5 тыс. км волоконно-оптических линий. Центр обработки данных CERN имеет 8 тыс. процессоров, ленточные накопители суммарной емкостью 12 Пбайт (подключенные по каналам с пропускной способностью 70 Гбит/с), 40 тыс. постоянно активных жестких дисков, 500 10-гигабитных портов Ethernet. Полоса пропускания опорной сети ЦОДа составляет 2,4 Тбит/с.
В качестве магистрального оборудования CERN использует маршрутизаторы производства Force-10. Судя по всему, выбор производителя обусловлен историческими причинами и тем, что в период проведения тендера позиции ProCurve в области оборудования для ядра сети были слабее, чем в сегменте граничных устройств.
