Андрей Фролов, КРОК: Технология DWDM: чтобы несколько ЦОДов работали как единое целое

Intelligent Enterprise: Насколько быстро устаревает сетевая инфраструктура? Одинаков ли этот срок для оборудования, которое обслуживает разные сегменты сети (офисные сети, магистральные сети передачи данных, сети, используемые для связи ЦОДов)?

Андрей Фролов: Телекоммуникационное оборудование устаревает довольно быстро — как правило, данный период составляет от трёх до пяти лет. За это время могут появиться новые решения или выйти обновления к уже имеющимся. Другое дело, что речь идет о моральном износе и на самом деле системы могут сохранять работоспособность существенно дольше. Любой, кто занимается строительством или эксплуатацией сетей, сможет привести пример коммутатора либо маршрутизатора, который прослужил лет десять и может проработать еще столько же. И если заказчика оборудование устраивает, то он может использовать его очень долго — пока это «железо» не станет препятствием для реализации других проектов. Вот тогда и начинается модернизация сетевой инфраструктуры, внедряются новые системы, поддерживающие современные технологии.

В настоящее время при построении сетевой инфраструктуры ЦОДов в основном одновременно используются технологии передачи данных Ethernet, Fibre Channel и DWDM. Существует еще Infiniband — и несмотря на то, что пока этот стандарт не получил широкого распространения, многие специалисты считают, что у него большие перспективы: эта высокоскоростная шина позволяет увеличивать пропускную способность, снижать задержки в работе приложений, повышать надежность сети.

Сроки морального и физического устаревания оборудования в трех обозначенных сегментах различаются. Парк оборудования Ethernet серьезно обновляется каждые два­три года, DWDM — три-­пять лет, а Fibre Channel — в пределах четырёх-­­шести.

Насколько актуальна технология DWDM в проектах строительства сетей для связи ЦОДов?

Мы регулярно используем это оборудование в проектах объединения центров обработки данных и уже накопили немалый опыт. Реализация таких проектов серьезно отличается от традиционного применения DWDM в решениях для операторов связи или при построении широкополосных городских сетей MetroEthernet.

Решения на базе данной технологии пользуются спросом, и интерес к ним будет увеличиваться. Объясняется это прежде всего ростом числа компаний, которые задумываются об объединении нескольких ЦОДов или крупных производственных площадок — офисов, зданий, промышленных объектов и т. д. У заказчиков растёт инфраструктура и объём данных, сами дата­-центры расширяются в своих масштабах — соответственно они сталкиваются с проблемой физической ограниченности имеющегося ЦОДа, появляется необходимость повышения надежности инфраструктуры за счёт физического разнесения серверов и рабочих мест на разные площадки. Иногда срабатывают сразу оба фактора.

Но для высококачественной реализации подобных проектов — даже на фазе подготовки технического задания, не говоря уже о проектировании, — недостаточно компетенций только по данной технологии. Необходимы знания и опыт сразу в нескольких областях: в построении оптических и высокопроизводительных LAN-­сетей, в создании серверной архитектуры и систем по управлению и мониторингу, а также инженерных систем ЦОДа. Очевидно, что у заказчиков практически нет специалистов с таким уровнем компетенций и опытом применения оборудования от разных производителей. Даже среди системных интеграторов выбор ограничен. Таким образом, большая часть нашей работы — это технический консалтинг для заказчиков, в том числе объяснение специфики и разницы в практическом применении технологии DWDM в различных сетях.

С чем связаны эти различия? Что важно — особенности оборудования, его настройка или дальнейшая эксплуатация?

Основное различие состоит в том, с каким приоритетом решаются разнообразные задачи. Для операторов связи главное — обеспечить максимальную пропускную способность на большее расстояние при минимуме затрат. Все остальные вопросы для них второстепенны.

Для корпоративного заказчика, который поставил перед собой задачу объединить ЦОДы, на первом месте надежность. А вот максимальное количество поддерживаемых каналов и «дальнобойность» уже не приоритетны. Действительно, центр обработки решает ключевые задачи обеспечения бизнеса, и если важные сервисы не работают, то перестают функционировать и бизнес-­процессы. Особенно эта задача актуальна для банков, где на счету каждая транзакция. Так что вопрос простоя ИТ­-систем или их выхода из строя является серьезным риском.

Можно выделить и ряд других моментов. Для операторов расстояние, на котором DWDM­-платформа обеспечивает связь без промежуточных усилителей сигнала, чаще всего имеет огромное значение. Дело в том, что чем меньше точек восстановления сигнала между абонентами, тем ниже прямые и эксплуатационные затраты. А так как мобильные операторы в рамках своих задач соединяют города, области, регионы, страны и даже континенты, речь может идти о десятках точек и узлов связи. У корпоративного заказчика стоит задача объединения двух-­трёх, реже четырёх-­пяти площадок, которые чаще всего сосредоточены в одном городе или регионе.

Критерии выбора оборудования также не совпадают. В первом случае предпочтение отдаётся той системе, у которой выше «дальнобойность» и ниже цена. Во втором — акцент делается на решения, обеспечивающие надежность и функциональность, а цена не является определяющим критерием.

Операторам для сокращения затрат важно, чтобы DWDM-­система могла поддерживать сотни пар волоконно­-оптических каналов. Для корпоративного заказчика это не актуально — ему нужно максимум два десятка или еще меньше. При этом для него существенно, чтобы оборудование занимало как можно меньше места в ЦОДе, особенно в том случае, если площади под него арендуются, — стоимость каждого стойко-­места обойдется за год в шестизначную сумму. Кроме того, каждая единица оборудования требует ещё энергомощностей и теплоотвода.

Существенно различаются и требования к типу и количеству пользовательских интерфейсов, которыми обладает DWDM­платформа. Корпоративным заказчикам нужно, чтобы среди этих интерфейсов были порты Fibre Channel — это стандарт для сетей хранения данных. Перспективен и Infiniband. Мы, например, используем его уже несколько лет, КРОК первым среди российских провайдеров публичных «облаков» перешел на эту технологию. Скорость передачи данных увеличилась в пять раз, при этом затраты на обслуживание сети остались на прежнем уровне. Соответственно все наши облачные заказчики могут теперь строить катастрофоустойчивые решения на больших скоростях.

Оператору связи если и нужна технология Fibre Channel, то с минимальным количеством портов. Infiniband у них в принципе не востребован, а вот поддержка стандарта SDH, который отвечает за транспортировку трафика, будет важна.

Если говорить о различиях в подходах к DWDM для операторов и для корпоративных заказчиков, то для вторых важным параметром являются вносимые оборудованием задержки, поскольку из-­за них могут существенно замедлиться приложения групповой работы и приложения для автоматизации бизнес-­процессов, что часто бывает критичным. Для операторов же этот параметр обычно не имеет большого значения, и им часто жертвуют, например, в пользу дешевизны.

Совпадает ли целевая аудитория у тех, кому выгоднее использовать DWDM и средства оптимизации трафика?

Целевые аудитории здесь разные, так как принципиально различаются задачи, решаемые этими технологиями. К DWDM обращаются в тех случаях, когда необходимо связать площадки, а оптимизация трафика может потребоваться независимо от того, сколько площадок у заказчика — одна или несколько.

Сеть, которая будет объединять ЦОДы, должна соответствовать целому ряду критериев, и главный из них — отказоустойчивость. В том случае, когда сетевая инфраструктура не отвечает данному требованию, ни о какой надежности инфраструктуры информационных технологий не может быть и речи. Оборудование DWDM должно реагировать в автоматическом режиме, если на канале пропал сигнал. И неважно, по какой причине это произошло: из-­за физического повреждения линии, из-­за неисправности мультиплексора или выхода из строя площадки в результате отключения электроснабжения, затопления, пожара, что тоже случается. Предполагается, что система автоматически переключается на работающий канал, чтобы остальные ЦОДы продолжали работать как единое целое и бизнес-­процессы не останавливались. При таком переключении счёт идёт на миллисекунды, потому что должна быть обеспечена гарантированная передача данных.

В чем состоит опыт КРОКа при реализации проектов внедрения DWDM?

Наш опыт в основном касается банковской сферы. Например, в рамках проекта для крупного российского банка мы объединили три площадки заказчика и два ЦОДа КРОКа, где размещено оборудование клиента. Для данного проекта наши специалисты подобрали топологию сети и определили набор оборудования, оптимальный для решения именно этой задачи. При этом мы рассмотрели практически все возможные сценарии, связанные с выходом из строя площадки, узла или физической линии. Под каждый из них оборудование было запрограммировано так, чтобы оно автоматически реагировало на тот или иной вид сбоя, в том числе когда они происходят одновременно. Мы придумали сценарии, где рассматривали явный саботаж сотрудников заказчика и даже попытки намеренно вывести оборудование из строя. Но в любом случае нам удалось обеспечить высочайший уровень отказоустойчивости — не стоит объяснять, насколько это важно для банка, ведь ущерб от потери даже одной транзакции может измеряться огромной суммой.

В своих проектах мы используем оборудование разных вендоров: Cisco, Huawei, Alcatel Lucent, MRV, X­Tera, российские системы КОНУС, регулярно тестируем и решения других производителей. Но больше всего проектов мы реализовали с компанией Ciena. Это один из лидеров производства DWDM­оборудования, они полностью перекрывают все возможные потребности заказчиков, от локальных сетей точка — точка в несколько километров до магистральных, протянувшихся на тысячи километров и имеющих большое количество узловых элементов. Оборудование отличается высокой отказоустойчивостью, низким энергопотреблением и небольшими размерами.