Как использование тестовых стендов снижает риски ИТ-проектов

Для каких компаний этот инструмент будет незаменимым решением, для каких – лишней тратой денег
Freepik
Freepik

В крупных ИТ-проектах перед реальным запуском системы компании создают «песочницу» – изолированную среду, где можно будет безопасно проверить работу всех компонентов. Подобный подход увеличивает затраты на внедрение, но в итоге страхует от критических сбоев, простоев и финансовых потерь в будущем.

Сложность корпоративных ИТ-решений растет с каждым годом – в том числе из-за стремительной трансформации и развития самих технологий. Параллельно увеличиваются и бюджеты на их разработку и внедрение. Принимая решение о старте ИТ-инициативы, руководство компаний беспокоится не только о технических рисках, но и о нецелевом расходовании средств – например, из-за скрытого сопротивления персонала или неверного выбора инструментов, отмечают авторы исследования Deloitte, охватившего 1400 финансовых директоров крупных организаций по всему миру. 

Чтобы минимизировать неопределенность, бизнес переходит на строгий язык цифр. Две трети компаний при запуске проектов опираются на жесткие числовые метрики успеха, из-за чего ИТ-специалистам приходится наглядно доказывать, что внедрение влияет на бизнес-показатели. Еще 27% респондентов используют методологии управления, предполагающие разделение проекта на отдельные этапы с контрольными точками и заранее прописанными критериями эффективности. Одним из инструментов, позволяющих свести к минимуму риски провала, стали специальные тестовые стенды или полигоны, говорится в исследовании Deloitte. Они, по сути, представляют собой выделенную инфраструктурную среду для безопасных экспериментов, где можно запускать сырой код, имитировать пиковые нагрузки и подключать сторонние сервисы без опасности нарушить реальные бизнес-процессы. Единой оценки этого рынка нет, разные аналитические агентства оценивают мировой рынок тестовых стендов (Test Benches) в $1,5–3,36 млрд в 2026 г.

Подобные тренды отмечают и российские эксперты. Заказчики ждут от вендоров не просто поставки лицензионных продуктов или решений, а полноценной защиты инвестиций перед топ-менеджментом, рассуждает директор департамента цифровых решений ИТ-компании «ЛАНИТ-Терком» Марат Немешев. «Порой мы выступаем не только как разработчики программного обеспечения (ПО), но и как полноценные продуктовые партнеры: анализируем рынок, успешные кейсы в России и за рубежом, чтобы показать не только техническую реализацию, но и будущий экономический эффект», – рассказывает он.

При старте новой ИТ-инициативы большинство команд выбирают путь коротких итераций, чтобы в сжатые сроки показать работающий MVP – минимально жизнеспособный продукт с ограниченным, но достаточным набором функций, рассказывает Немешев. Этот подход себя оправдывает, так как если пробный запуск не даст результата, то потери будут ограничены. Однако некоторые команды пытаются сразу построить идеальную интеграционную платформу. При попытке запустить такой проект риск не столько в возможной неудаче, сколько в том, что провал обнаружится сильно позже – когда ресурсы уже вложены. Рабочий прототип позволяет снизить эти риски, либо вообще их избежать, говорит Немешев.

Дополнительным фактором, влияющим на рост популярности тестовых стендов в России, стало массовое импортозамещение. По данным исследования CNews Analytics, ускорение импортозамещения и потребность бизнеса в оценке совместимости решений сформировали в стране новый сегмент рынка услуг по тестированию отечественного ПО и оборудования. 

Изменился и характер ИТ-аудита: заказчиков интересует не возможная отказоустойчивость, а симуляция конкретных аварийных сценариев, объясняет директор центра «Инфраструктура» компании «ЛАНИТ-Интеграция» Александр Чупрунов. Он связывает этот тренд с уходом западных игроков, прекращением официальной поддержки, увеличением числа кибератак и ужесточением требований регуляторов. 

Ситуация на реальных промышленных объектах осложняется тем, что там могут одновременно работать десятки разнородных систем, действовать жесткие ограничения информационной безопасности и сохраняться унаследованные решения предыдущих поколений, рассуждает руководитель объединенного блока разработки и обеспечения качества департамента инфраструктурных решений ЛАНИТ Денис Моисеенко. По отдельности компоненты работоспособны, но их взаимодействие может создать проблемы, говорит он. Кроме того, остаются вопросы эксплуатации, включая обновление системы, организацию резервного копирования и реагирование на инциденты. Задача пилота на стенде – проверить готовность продукта к выживанию в реальной целевой среде, сказал Моисеенко.

Потратить сейчас, чтобы не платить потом 

Развертывание тестового полигона или отдельной среды для проверки ИТ-решения может увеличить бюджет проекта на 5–15%, а в случае со сложной инфраструктурой – еще больше, рассуждает технический директор платформы Standoff 365 (испытательная платформа для специалистов по информационной безопасности, созданная компанией Positive Technologies) Олег Иванов. Итоговая стоимость зависит от масштаба системы, количества необходимых интеграций и глубины тестирования. Однако эти затраты окупаются при первом же инциденте, ведь использование полигонов критически важно для систем, где любая ошибка останавливает операционную деятельность, а один час простоя обходится компании в десятки миллионов рублей, рассуждает Иванов. 

Он приводит примеры из практики, где компании создают цифровые двойники своих ИТ-систем для поиска уязвимостей. Торговая сеть «Азбука вкуса» предоставляла реальное кассовое оборудование для тестирования рисков в программах лояльности и транзакционных цепочках. Сеть ресторанов питания развернула цифровую копию всей инфраструктуры, от кухонных модулей до платежных шлюзов, для предотвращения сценариев, связанных с возможными злоупотреблениями. В промышленном секторе НПП «Исток» задействовало свою IIoT-платформу (промышленного интернета вещей), позволив экспертам безопасно проверить устойчивость виртуального склада к внешнему вмешательству. 

Специалисты «ЛАНИТ-Интеграции» в ходе пилотного тестирования инфраструктуры у одного из клиентов электроэнергетической отрасли столкнулись с критической проблемой на почтовом сервисе, рассказал Чупрунов. Выяснилось, что при возможном инциденте реальное время восстановления почтового хранилища вместо согласованных четырех часов затягивалось более чем на сутки, а процесс миграции мог привести к дублированию писем и календарных встреч. Обнаружение скрытых дефектов и нестыковок на этапе пилота позволило вовремя скорректировать технические требования. Это сэкономило компании время и деньги, предотвратило серьезные аварийные простои и дорогостоящие сбои уже после запуска в эксплуатацию, отметил Чупрунов. 

В компании нефтегазовой отрасли при создании цифровых двойников бизнес-процессов «ЛАНИТ-Терком» столкнулся с тем, что у заказчика независимо друг от друга существовали две отдельные идеи, два инвестиционных проекта и две команды, говорит Немешев. Разработчики создали прототипы, которые бы позволили реализовать обе концепции, и провели полевой анализ на реальных площадках в удаленных локациях. Тестирование прототипов и общение с сотрудниками показали, что наличие двух решений в рамках одного сквозного бизнес-процесса приведет к постоянному и неудобному переключению между ними. В результате один проект поглотил другой, обе идеи упаковали в единое решение с общим интерфейсом. Это позволило избежать напрасных трат и защитить пользователей от лишних сложностей, резюмирует Немешев.

У одного из клиентов ЛАНИТ из финансовой сферы базовые проверки автоматизированной системы на стенде прошли успешно, но нагрузочные испытания на реальном объеме данных выявили проблему, рассказывает Моисеенко. Основной модуль обрабатывал операции 69 минут при допустимом требовании от заказчика не более 30. Команда выявила узкие места, скорректировала конфигурацию модуля и методы обработки входных и выходных данных. После изменений повторная нагрузочная проверка показала, что операции обрабатываются уже 24 минуты. «Время обработки в проверенном сценарии сократилось на 45 минут и уложилось в требования заказчика», – резюмировал Моисеенко. 

При оценке полигонов нужно считать не стоимость их организации, а объем предотвращенных потерь, говорит директор департамента развития продуктов «Группы Астра» Павел Мозгов. «Полигон – своеобразная страховка проекта: вы платите за нее один раз, но освобождаете себя от затрат на аварийные откаты, простои и риски неработоспособной инфраструктуры в продуктивной среде. При масштабном внедрении сэкономленная сумма может в разы превышать затраты на создание тестовой зоны», – отмечает он. Полигон, по его словам, позволяет избежать ошибок, которые масштабно повлияли бы на инфраструктуру предприятий и грозили остановкой бизнес-процессов. 

Отдельный случай – уязвимости нулевого дня, добавляет эксперт. Без тестовой зоны они реализовались бы сразу в продуктивной среде, а на полигоне в ходе тестовых сценариев можно зафиксировать аномальное поведение решения, идентифицировать его как потенциальный вектор атаки, успеть устранить до выхода в продуктивную среду и вовремя остановить развертывание, где риск для кибербезопасности был бы существенным. 

Обнаружение проблемы до промышленного запуска является ключевой задачей пилотного проекта, поэтому сам по себе сбой не означает непригодность решения, рассуждает Моисеенко. Необходимо локализовать и устранить причину сбоя, будь то дефект продукта, ошибка конфигурации, дефицит ресурсов, интеграционная проблема или ограничение архитектуры. 

Далее оценивается возможность исправления ситуации в допустимые сроки без удорожания продукта. Затем обязательны повторная проверка проблемного сценария и регрессионное тестирование для подтверждения сохранности остальных функций. Если же требования невыполнимы без изменения концепции, это становится основанием для пересмотра архитектуры или отказа от варианта. «Неудачный пилот тоже может быть полезен, поскольку предотвращает гораздо более дорогую ошибку при внедрении», – резюмирует Моисеенко.

Ключевой вывод тестирований на изолированных стендах – деградации системы опаснее полного отказа, говорит Чупрунов. Этот процесс проходит тихо и бесшовно из-за накопления тайм-аутов и запросов, что может привести к каскадным сбоям и остановке бизнес-процессов. При полном же отказе корректно настроенная система автоматически переводит работу на резервные узлы, что остается незаметным для пользователей, отмечает эксперт.

Тестовые полигоны развиваются по двум сценариям, говорит Немешев. Первый подразумевает моделирование пользовательского опыта, когда интегратор создает привычную для клиента оболочку. Сотрудники заранее видят рабочие места, их ожидания корректируются, что спасает проект от внутреннего конфликта и недовольства при внедрении. Второй сценарий заключается в полном повторении продуктивной инфраструктуры заказчика для приемо-сдаточных испытаний. Это требует дополнительных издержек в размере 3–5% от стоимости проекта, но защищает от ситуации, когда готовое решение не проходит проверку службы безопасности или архитекторов. 

Использование тестовых полигонов уместно при высокой цене ошибки: в распределенной инфраструктуре, при длительном цикле внедрения или чувствительном для бизнеса масштабе, говорит Мозгов. По его мнению, для небольшого или дочернего предприятия, где проблему можно быстро локализовать, полигон – избыточная роскошь. В таких случаях затраты на его организацию и поддержку не окупаются из-за малого масштаба рисков, а также высокой скорости реакции и без тестовой зоны. Эксперт отмечает, что полигон имеет смысл только там, где потенциальная ошибка стоит дороже, чем его создание.

При этом, говорит Иванов, не всегда требуется создавать полную копию инфраструктуры организации. В зависимости от задач можно использовать типовые полигоны, воспроизводить отдельные критичные компоненты или проводить ограниченное пилотное тестирование, отмечает он. Выбор подхода должен определяться прежде всего потенциальными последствиями ошибок и стоимостью их устранения после внедрения.

Человеческий фактор 

Любой крупный ИТ-проект затрагивает интересы сотрудников, и от их готовности осваивать инструменты зависит судьба внедрения. Немешев рекомендует до начала разработки продукта сымитировать готовящиеся изменения и взаимодействия пользователей. «Иногда мы выясняем: менее оптимальное, но более привычное решение сработает лучше, поскольку, если кардинально изменить взаимодействие с системой, пользователей придется заставлять в ней работать, а это негативно скажется на процессах», – рассуждает Немешев.

Также пилотный проект проверяет способность команд к совместной работе. «Если на этапе прототипа заказчик жестко бюрократизирован и требует избыточного документального покрытия каждого шага, мы закладываем это в планирование ресурсов на последующие этапы для предотвращения критических ошибок», – уточняет Немешев.

Полигон служит инструментом быстрой проверки и обратной связи по новому функционалу, соглашается Мозгов. Когда нет уверенности в реакции пользователей и сотрудников, пилотная группа позволяет в сжатые сроки убедиться в работоспособности внедрения и соответствии ожиданиям. Это дает возможность принять взвешенное решение о масштабировании функционала, его доработке или отказе от внедрения. «По сути полигон – это возможность встретить проблему в контролируемых условиях, а не лицом к лицу в бою», – говорит Мозгов.