Техподдержка нового поколения: как РТК-Сервис сократил простои на сети DCN «Ростелекома»

Системный интегратор РТК-Сервис реализовал проект для «Ростелекома» по стабилизации сети DCN (Data Communication Network), построенной для управления транспортным оборудованием ECI (Ribbon), и создал возможность превентивно реагировать на потенциальные отказы оборудования. Нагрузка на транспортные сети операторов связи кратно растет вместе с количеством абонентов, поэтому критически важно не просто оперативно устранять аварии, а предотвращать их ещё до того, как они повлияют на качество связи.

Теперь «Ростелеком» может проводить профилактику серверов, дисковых массивов, коммутаторов и каналов связи, а также оперативно локализовывать любые неисправности. В результате среднее время недоступности сетевого элемента сократилось с нескольких дней до 1 – 2 часов, а сама сеть перешла из режима регулярных сбоев в состояние контролируемой и прогнозируемой работы.

Первым и самым трудоёмким этапом стала полная актуализация топологии: инженеры РТК-Сервис собрали данные со всей России, нарисовали новую схему и заполнили её реальными параметрами конфигурации. Сеть включала более четырёх тысяч элементов, в том числе коммутаторы, маршрутизаторы и конвертеры, от самых старых устройств 90-х годов до оборудования, установленного непосредственно перед 2022 годом. Весь этот разнородный «зоопарк» был объединён в единую систему управления.

Следующим шагом стало точечное устранение критических замечаний в каждом регионе. Инженеры интегратора систематически анализировали конфигурации, находили неверные настройки, конфликты, проблемы с резервированием и исправляли их. Важно, что оборудование при этом не заменялось. Работы велись исключительно на уровне конфигураций и схемных решений. Такой подход позволил уложиться в минимум затрат, используя только собственные ресурсы компании, и при этом заложить фундамент для превентивного реагирования. Однако самым значимым шагом стало решение, которое изначально вообще не входило в договор технической поддержки. Специалист РТК-Сервис проявил инициативу и развернул на сети систему мониторинга Zabbix. До этого момента оборудование DCN никто не контролировал в реальном времени, о выходе из строя коммутатора или жёсткого диска на сервере управления узнавали постфактум, когда проблема уже приводила к потере управляемости сетевыми элементами.

Внедрение системы мониторинга кардинально изменило ситуацию. Теперь инженеры РТК-Сервис в онлайн режиме видят состояние всех коммутаторов, каналов связи и серверов. Если начинают сыпаться жёсткие диски, система сигнализирует об этом за недели до потенциального краха. Если канал перешёл на резервный, это сразу заметно, и можно разобраться с причиной без потери управления. Если какой-то сетевой элемент показывает аномальное поведение, профилактика проводится до того, как произойдёт отказ. Благодаря возможности превентивно реагировать на возможные проблемы удалось вовремя заметить массовый выход из строя жёстких дисков на серверах, проработавших более пятнадцати лет, и заменить их без остановки системы управления.

По итогам проекта количество заявок по недоступности сетевых элементов сократилось в несколько раз. Но ключевой показатель, среднее время недоступности сетевого элемента, уменьшилось с нескольких дней до 1 – 2 часов. Достигнуто это за счёт двух факторов. Во-первых, точная схема сети позволяет оперативно локализовать отказ, не тратя дни на выяснение топологии. Во-вторых, система мониторинга даёт возможность узнать о проблеме ещё до того, как она переросла в аварию. При этом все работы выполнялись удалённо, без выезда на узлы связи, и практически незаметно для текущей эксплуатации.