Масштабирование ИТ-инфраструктуры для интернет-провайдера

DevOps-инженеры RedLab оптимизировали имеющиеся ИТ-ресурсы и внедрили набор инструментов и сценариев, нацеленных на автоматизацию разработки. В этой статье делимся кейсом.

О клиенте

Компания обеспечивает доступ к широкополосному интернету и цифровому телевидению в Краснодарском крае. Абоненты могут подключиться к сети со скоростью до 100 Мбит/с и смотреть 154 канала. Среди дополнительных опций: трансляция передач на трех независимых устройствах одновременно, интерактивное управление эфиром и наличие архива ТВ-вещаний за неделю.

О проекте

Для интернет-услуг провайдер использует технологию FTTB на базе скоростных волоконно-оптических магистралей с большим запасом пропускной способности. Однако недостаточная емкость ИТ-инфраструктуры приводила к снижению стабильности системы, что негативно влияло на удовлетворенность абонентов. Клиент хотел увеличить мощности программы и обеспечить ее бесперебойную работу.

Описание задачи

Из-за роста пользовательской базы и расширения спектра услуг требовалось модернизировать инфраструктуру. Команде RedLab предстояло оптимизировать имеющиеся ИТ-ресурсы и внедрить набор инструментов и сценариев, нацеленных на автоматизацию разработки.

Клиент сформулировал ряд функциональных требований к системе:

1. Повышенная доступность: обеспечение сбалансированной нагрузки и распределение трафика по сети.
2. Улучшенная производительность: добавление новых узлов, серверов и других компонентов для увеличения скорости выполнения задач.
3. Непрерывное развертывание: внедрение инструментов DevOps, позволяющие быстро и легко управлять разработкой ИТ-продукта.

Реализация

В ходе проекта инженеры RedLab провели следующие работы:

1. Перенесли систему с платформы Nomad на Kubernetes, что позволило автоматически масштабировать приложения и эффективно использовать ресурсы.
2. Создали личный GitLab, в котором настроили CI/CD. В нем же стали хранить инфраструктурный код Ansible и Terraform, чтобы отслеживать историю изменений в программе, контролировать проекты и репозитории.
3. Организовали управление сетевой инфраструктуры по принципу IaC (Infrastructure as Code) для 2.000 коммутаторов и 30.000 активных абонентов — удалось масштабировать сеть и применить изменения к сетевым устройствам без ручного вмешательства.
4. Для хранения секретных данных выбрали сервис HashiCorp Vault в режиме высокой доступности (HA). Единая авторизация теперь происходит через Keycloak OIDC.
5. Написали 30 Helm чартов, которые обеспечили повторяемость развертываний компонентов и помогли легко управлять зависимостями, версиями и конфигурациями системы.
6. Разместили автоматический учет оборудования в NetBox. Теперь найти информацию об устройствах, отследить их местоположение и историю стало проще.
7. Установили приватное облако на Opennebula с AutoDiscovery от Consul на 40 серверах, что привело к эффективному распределению ресурсов между различными виртуальными машинами.
8. Осуществили мониторинг и наблюдаемость ИТ-инфраструктуры на стеке Prometheus, Grafana, Alertmanager и NetXMS. Технологии помогают обрабатывать большое количество метрик в реальном времени, своевременно обнаруживать и устранять сбои.

Результат

Благодаря масштабированию ИТ-инфраструктуры удалось автоматизировать большинство рутинных операций и повысить производительность интернет-проекта. Провайдер смог предложить абонентам более стабильное и качественное обслуживание, тем самым удержать имеющихся клиентов и привлечь новых.

Источник.