Однако анализ трафика — это не только возможность, но и вызов. Серверы, собирающие данные о качестве обслуживания (QoE), генерируют огромные объемы информации, которые необходимо хранить годами. При этом операторам нужно не только обеспечить надежное и отказоустойчивое хранение, но и гарантировать высокую скорость обработки данных для оперативного построения отчетов. Потери данных недопустимы, а задержки в анализе могут привести к упущенным возможностям или ухудшению качества услуг.

В таких условиях важно найти решение, которое сможет эффективно справляться с этими задачами, обеспечивая баланс между производительностью, надежностью и экономической эффективностью.

Комплексное решение для анализа и хранения данных

С подобным вызовом столкнулась одна из телеком-компаний, которая ранее использовала решения на базе серверов с локальным хранением данных. Такой подход не обеспечивал необходимого уровня надежности, что периодически приводило к потерям данных при сбоях. Чтобы устранить эти проблемы, был выбран комплексный подход, который позволил не только повысить отказоустойчивость, но и значительно увеличить производительность системы.

В рамках этого подхода в компании было развернуто комплексное решение, включающее три ключевых компонента:

1. Серверы ITPOD — высокопроизводительные вычислительные мощности, обеспечивающие быструю обработку данных.
2. СХД ITPOD Storage — система хранения данных, гарантирующая отказоустойчивость и высокую скорость доступа к информации.
3. Программное обеспечение VAS Experts — платформа для анализа сетевого трафика, работающая поверх аппаратной инфраструктуры ITPOD.

Внедрением этого комплексного решения, включающего СХД ITPOD Storage и программное обеспечение VAS Experts, занималась компания ITGLOBAL.COM.

Серверы ITPOD: мощность и надежность для сложных задач

Специализированные высокопроизводительные серверные платформы от вендора ITPOD, входит в корпорацию ITG, разработаны для решения сложных, ресурсоемких задач и реализации высокотехнологичных проектов. Они оснащены мощными процессорами, оперативной памятью большой емкости и высокоскоростными накопителями, что позволяет эффективно обрабатывать большие объемы данных в режиме реального времени.

Для снижения энергопотребления в серверах ITPOD используются энергоэффективные компоненты и интеллектуальные системы управления. Это не только сокращает эксплуатационные расходы, но и делает решение более экологичным.

Не менее важным аспектом является надежность. Серверы ITPOD оснащены системами резервирования и дублирования ключевых компонентов, что минимизирует риск потери данных и прерывания рабочих процессов даже в случае выхода из строя отдельных элементов инфраструктуры.

Решение на базе серверов ITPOD легко масштабируемо благодаря модульной архитектуре. В систему можно добавлять дополнительные узлы, увеличивая ресурсы комплексного решения без простоев. Это особенно важно для телеком-операторов, которым необходимо оперативно адаптироваться к растущим и сложнопрогнозируемым нагрузкам.

Серверные платформы ITPOD поддерживают широкий спектр операционных систем, что позволяет устанавливать любое программное обеспечение, включая решения для аналитики данных и управления кластерами. Встроенные инструменты мониторинга и управления дают администраторам возможность отслеживать состояние оборудования, анализировать нагрузку на серверы и своевременно реагировать на возникающие проблемы.

СХД ITPOD Storage: отказоустойчивость, производительность, гибкость

Использование СХД ITPOD Storage в комбинации с серверами ITPOD полностью исключает риски потери данных, что было критически важно для конечного заказчика. Такая комплексная система обеспечивает надежное хранение информации даже в случае сбоев оборудования благодаря продуманной архитектуре, которая гарантирует сохранность данных при любых сценариях. СХД ITPOD Storage демонстрирует выдающиеся показатели производительности, позволяя обрабатывать большие объемы данных в режиме реального времени.

Системы хранения данных ITPOD обеспечивают высокую производительность за счет использования передовых технологий. Твердотельные накопители (SSD) с интерфейсом NVMe обеспечивают минимальные задержки и высокую пропускную способность, а гибридные конфигурации, сочетающие традиционные жесткие диски (HDD) и SSD, оптимизируют баланс между объемом хранения и скоростью доступа.

Система способна масштабироваться до поддержки петабайтов данных, обеспечивая надежное и эффективное хранение даже для самых требовательных нагрузок. Данные от серверов QoE делятся на две категории: оперативные и аппроксимированные. Оперативные данные, часто используемые для построения отчетов за короткие периоды времени, размещаются на высокопроизводительных СХД линейки ITPOD Full Flash, использующих только скоростные NVMe-накопители. Это обеспечивает мгновенную запись и доступ к информации для оперативного анализа. Аппроксимированные данные, предназначенные для анализа за длительные периоды, хранятся на более медленных дисках СХД ITPOD Hybrid, что позволяет экономить на хранении, не теряя общей производительности комплекса.

Одной из ключевых особенностей ITPOD является возможность вертикального масштабирования, позволяющая постепенно наращивать емкость хранилища без прерывания работы системы. СХД ITPOD поддерживает работу с файловыми и блочными протоколами доступа, включая современный протокол NVMe/TCP, который позволяет серверам работать с хранилищем на высоких скоростях и с минимальными задержками по Ethernet-сети.

Система также предлагает различные уровни защиты данных, такие как контроль доступа пользователей по ролевой модели, аудит и мониторинг действий пользователей. Использование технологий сжатия и дедупликации данных помогает существенно сократить потребности в объеме хранения. Для повышения надежности все системы имеют двухконтроллерную архитектуру и используют энергонезависимую память для защиты данных от потерь в случае нештатных ситуаций и полной потери питания. СХД способна выдержать одновременную потерю нескольких дисков и обеспечить полную консистентность данных при любых условиях.

Интерфейс администрирования через веб-консоль позволяет настраивать параметры системы, контролировать использование ресурсов, проводить диагностику устройств и автоматизировать процессы благодаря реализации на API.

Архитектура решения

Для решения поставленной заказчиком задачи была спроектирована масштабируемая архитектура, которая включает 20 серверов, отвечающих за обработку сетевого трафика. Эти серверы работают в связке с четырьмя all-flash системами хранения данных ITPOD Full Flash на NVMe-накопителях, обеспечивающими высокие показатели IOPS (операций ввода-вывода в секунду). Такие СХД предназначены для хранения оперативных данных, требующих максимальной скорости доступа, что позволяет оперативно строить отчеты и анализировать информацию в режиме реального времени.

Для хранения аппроксимированных данных, которые используются реже, но также требуют надежного хранения, в архитектуру включены две гибридные СХД ITPOD Hybrid. Эти системы сочетают в себе высокую емкость и экономическую эффективность, что делает их идеальным решением для долгосрочного хранения больших объемов информации.

Сеть и протоколы

Серверы и системы хранения данных (СХД) связаны выделенной сетью, обеспечивающей скорость передачи данных до 25 Гбит/с. Для подключения используется современный протокол NVMe over TCP, который позволяет достичь высокой производительности за счет эффективного использования ресурсов NVMe-накопителей. Этот протокол отличается низкими задержками, что критически важно для обработки данных в режиме реального времени, особенно при работе с оперативными данными и построении отчетов.

Программная часть

На серверах ITPOD используется российское программное обеспечение VAS Experts, которое обеспечивает анализ сетевого трафика и интеграцию с аппаратной частью. На серверах, выполняющих задачи QoE, установлена операционная система Oracle Linux, обеспечивающая стабильную работу и необходимые параметры для программного обеспечения по сбору и хранению статистики. Данные хранятся на логических пространствах Namespace, выделенных на СХД и подключенных к серверам по протоколу NVMe/TCP.

Такое решение позволяет оперативно обрабатывать данные и строить отчеты, что критически важно для телеком-операторов.

Результаты

Продукты ITPOD соответствуют требованиям производительности и отказоустойчивости, предъявляемым компаниями телеком-отрасли и многими другими организациями, где есть потребность в хранении и обработке больших объемов данных.

Внедрение комплексного решения позволило заказчику:

• Полностью исключить потери данных благодаря отказоустойчивой архитектуре.
• Увеличить скорость обработки и анализа данных, оперативно получать отчеты и строить графики.
• Оптимизировать затраты на хранение за счет разделения данных на «горячие» и «холодные».

Система на базе серверов ITPOD, СХД ITPOD Storage и программного обеспечения VAS Experts не только решила проблему хранения и обработки больших объемов данных, но и обеспечила высокую надежность, производительность и гибкость.

«Весь процесс — от проектирования до финальных тестов и настройки сети — занял несколько недель, — говорит Илья Борняков, генеральный директор ITPOD, корпорация ITG. В результате оператор получил отказоустойчивую, высокопроизводительную систему, способную в реальном времени обрабатывать колоссальные объемы данных без проседания производительности.

Мы уже внедряли подобное решение у одного из крупных телеком-операторов. На момент запуска данного проекта система обрабатывала 2,5 терабита данных в секунду, что уже было впечатляющим показателем. Однако теперь перед нами стояла амбициозная задача: увеличить пропускную способность до 5 терабит в секунду, чтобы обеспечить растущие потребности оператора в обработке и хранении данных», — продолжает Илья Борняков.

Благодаря внедрению этой архитектуры удалось:

• Увеличить пропускную способность системы до 5 терабит в секунду, что полностью соответствовало требованиям заказчика.
• Обеспечить высокую отказоустойчивость и надежность хранения данных, исключив потери информации даже при пиковых нагрузках.
• Достичь минимальных задержек при обработке данных, что особенно важно для анализа сетевого трафика в режиме реального времени.

Заключение

Этот проект стал ярким примером того, как современные технологии и грамотно спроектированная архитектура позволяют решать даже самые сложные задачи. Увеличение пропускной способности до 5 терабит в секунду, использование передовых протоколов и технологий хранения данных, таких как NVMe over TCP и all-flash СХД, сделало систему заказчика не только мощной, но и готовой к дальнейшему масштабированию.

Такие решения становятся ключевыми для телеком-операторов, которые стремятся оставаться конкурентоспособными в условиях растущих объемов данных и требований к качеству обслуживания.

■ erid:2W5zFJAVrRWРекламодатель: ООО «ИТПОД»ИНН/ОГРН: 7841073338/1187847111286Сайт: www.itpod.com