Особенности предприятий топливно-энергетического комплекса обусловлены территориальной распределенностью филиалов и объектов, климатическими, ландшафтными и многочисленными иными условиями. Все это необходимо учитывать при организации процесса эксплуатации комплексов ИТ-инфраструктуры. Мы попросили представителей предприятий ТЭК поделиться подходами к решению этой задачи и выяснили, какие перспективы у модульных решений в сегменте ТЭК на российском рынке. Есть ли спрос на них, каков потенциал решений, разработанных по принципу модульности?
В круглом столе принимают участие:
Какие критерии и требования к инженерным системам существуют в вашей компании с точки зрения надежности и бесперебойности работы ИТ-инфраструктуры, в том числе на удаленных площадках? Находят ли модульные решения применение в ИТ-хозяйстве вашей компании?
Александр АНТОНОВ
Удаленные площадки должны быть оснащены приборами, которые интегрированы в производственную систему. Это позволяет осуществлять мониторинг и собирать данные. Мы используем внутренние модульные решения для тепловых пунктов, расположенных вдоль теплотрасс. Установленные приборы агрегируют и передают данные в информационную систему. Для этого используем мини-контейнер, сочетающий в себе генератор, набор приборов, интерфейсов и средства передачи данных. Такой микромодуль функционирует автономно.
Если говорить о предъявляемых к таким решениям требованиях, то их несколько. Первое – высокая бесперебойность работы. На удаленные площадки не наездишься – нет достаточного количества персонала. Второе – длительное время автономной работы. Третье – минимальные требования к регламентному обслуживанию. Четвертое – возможность функционирования в широком температурном диапазоне, в разных климатических условиях.
Андрей ГОРШКОВ
Да, мы стараемся использовать модульные решения с полным резервированием как логики внутри «железа», так и ресурсов по энергопитанию. Главный критерий, которого мы придерживаемся при выборе решений любого вендора, – это стандартизация оборудования. Основные требования к поставщикам: доступность оборудования на удаленных площадках, наличие сервисных контрактов, в соответствии с которыми нам своевременно предоставляется замена, и, конечно, надежность. Цена – не всегда решающий фактор, поскольку соотношение цена/качество – сложно оцениваемый критерий. Многое зависит от особенностей производства.
Андрей ГРИШИН
Система должна быть надежна, устойчива и безотказна при любых возможных инцидентах. В первую очередь мы применяем дублирование основных и резервных каналов связи. В случае инцидента можем переключиться с основного на резервный канал, пусть и с меньшей пропускной способностью, но при этом не потерять сервисы. На удаленных площадках обеспечивается канальное резервирование. На случай перебоев с электроэнергией установлены емкие источники энергопитания, которые позволяют поддерживать основное оборудование при отключении электроснабжения: на участках, где отсутствует персонал, продолжительностью до трех суток, а на участках с персоналом – на период до 12 часов. С учетом опыта эксплуатации эти два направления относятся к основным, требующим внимания с точки зрения надежной работы ИТ-инфраструктуры. Наша сеть протяженная – 400 км вдоль трассы газопровода. Доступ к ресурсам обеспечивается со всех площадок.
Андрей ДЕДЮХИН
Стандартные требования – географическое разнесение основных кабельных каналов, гарантированное электропитание любым способом, подключение на наших производственных площадках дублирующего оборудования для формирования бесперебойного электропитания. В этих целях применяются различные устройства – от стандартных дизель-генераторов до источников бесперебойного питания, которые позволяют сгладить переход на энергетические генераторы. Модульные решения у нас также применяются, в частности для дата-центров.
Максим КОРЕПАНОВ
Пока модульные решения не используем, у нас оборудовано два ЦОД (основной и резервный), которые находятся в корпусах административных зданий. Требования определены политиками информационной безопасности, регламентами построения сети передачи данных (отраслевыми и внутренними), рядом стандартов и предписаниями головной организации. Главными приоритетами я бы назвал надежность, непрерывность производственного процесса и соответствие всем нормативным актам.
Минсалих НАЗИПОВ
Требования к системам обусловлены сферой деятельности и спецификой компании. В первую очередь следует выделить отказоустойчивость, масштабируемость, безопасность, возможность изменений, управляемость и приемлемую стоимость владения. ИТ-инфраструктура не должна мешать бизнес-процессам и при этом работать без сбоев. Причинами сбоев могут быть выход оборудования из строя и ошибки, допускаемые пользователями или программами. Чтобы избежать ошибок по причине выхода из строя оборудования, используется несколько подходов: дублирование или объединение нескольких экземпляров устройств в кластер. Расширить возможности дублирования помогает виртуализация. Для защиты от ошибок пользователя и сбоев в программном обеспечении используется система резервного копирования и восстановления данных.
Наше производство достаточно компактное, поэтому модульные решения пока не применяем. Но по мере развития производственных мощностей может возникнуть потребность в таких решениях.
Гарольд НОВИКОВ
Бесперебойная работа ИТ-инфраструктуры – основа эффективной деятельности нашего предприятия, как и любой другой компании ТЭК, поскольку оказывает непосредственное влияние на скорость и точность принятия управленческих решений в технологической, производственно-хозяйственной и экономической сферах деятельности. От этого во многом зависит стабильность бизнес-процессов локального и корпоративного уровней. При проектировании и в процессе развития ИТ-инфраструктуры ключевыми критериями выбора решений в сегменте инженерных систем являются максимальная надежность, удобство эксплуатации, доступность и стоимость сервисного обслуживания, стоимость владения в рамках жизненного цикла. В последнее время стратегическим и особо важным фактором стала независимость от импорта.
Аубекир ТЕМИРБУЛАТОВ
В группе компаний «Россети» выработан ряд стандартов, в частности применительно к ИТ-инфраструктуре. Среди основных критериев я бы выделил повышение доступности, надежности и безопасности. В рамках программы по сокращению издержек для госкомпании большое значение имеет снижение стоимости содержания ИТ-инфраструктуры. Наши стандарты постоянно совершенствуются. К слову, недавно в группе компаний «Россети» утверждена новая политика в сфере ИТ, соответственно в рамках этой политики будем развиваться. В настоящее время разрабатываем программы достижения целей, определенных этим документом, выбираем решения.
Что касается модульных решений, то не могу сказать, что мы их широко применяем, хотя сейчас прорабатывается возможность их использования, прежде всего в рамках программы снижения издержек. Кроме того, по мере расширения деятельности компании такие решения придутся весьма кстати. Параллельно изучаем вопрос более эффективного использования внутренних ресурсов большой территориально распределенной компании.
В силу масштабов нашей страны предприятия ТЭК расположены в самых разных местах с точки зрения климата, ландшафта, удаленности от транспортной и иной инфраструктуры. Как это сказывается на особенностях эксплуатации комплексов ИТ-инфраструктуры? Какие решения используете в своей компании, в том числе для эксплуатации в экстремальных условиях?
Александр АНТОНОВ
Мы используем такие автономные модули, которые, условно говоря, позволяют контролировать движение теплоносителей, их параметры. Автономная единица подключается к теплотрассам и передает данные. Особенность в том, что мы можем обслуживать оборудование с продолжительными интервалами, поскольку оно в состоянии функционировать автономно длительный период времени. В последние полгода вплотную занялись этой темой, что было обусловлено курсом на цифровизацию. Для трубопроводов характерно такое понятие, как тепловые потери, одним из источников которых может быть состояние инфраструктуры. Одновременно приходится контролировать множество других факторов на разных участках теплотрассы, чтобы понимать, где и почему может произойти сбой, возникнуть ошибка. Для формирования энергетического баланса мы внедряем модульные решения, поскольку математические расчеты указывают на порядок тепловых потерь, но не дают точных значений.
Андрей ГОРШКОВ
Самое важное для нас – это наличие каналов связи. Поскольку площадки удаленные, каналы связи резервируются. В качестве основного канала используем оптоволокно, в качестве резервного – беспроводные радиорелейные каналы, предоставленные нашими партнерами. Соответственно локальных критически важных узлов инфраструктуры у нас нет, так как все это вынесено на площадки ЦОД наших партнеров.
Андрей ГРИШИН
Принципиальный момент состоит в том, что оборудование должно быть такого класса и такой производительности, чтобы гарантировать надежность. Если речь идет о телекоммуникационном оборудовании, то имеются в виду устройства операторского класса. Поскольку инфраструктура распределенная, мы делаем ставку на построение беспроводных сетей, Wi-Fi, используем технологии, позволяющие уменьшить эксплуатационные затраты. Отказались от использования кабельных систем на удаленных контрольных пунктах вдоль газопровода, в вахтовых поселках также переходим на беспроводные технологии.
Что касается климатических условий, то наша компания базируется на Таймыре, известном своими ветрами. Низкие температуры, ветровые нагрузки требуют усиленного контроля за сооружениями связи, мачтовыми конструкциями, фундаментами. Температурные перепады, как мы говорим – переход через ноль, в межсезонье, когда температура «плавает», наличие конденсата в радиорелейном оборудовании требуют своевременного проведения профилактических работ, чтобы снизить отказы устройств в продолжительный зимний период. Узкие места известны, и в летний период все делается для того, чтобы обеспечить бесперебойность работы систем и оборудования.
Андрей ДЕДЮХИН
Мы изначально проектируем и строим комплексы с учетом жестких условий, прежде всего климатических. Объекты нашей инфраструктуры представлены на большой территории – от районов европейской части страны до Сибири. В частности, мы применяем контроллеры, которые работают в широком диапазоне температур – от –60 до +80 0С.
Максим КОРЕПАНОВ
Применительно к ИТ-инфраструктуре все оборудование эксплуатируется внутри помещений, поэтому особых требований, специфичных для региона, мы не выдвигаем. Однако для линий передачи данных (у нас удаленных объектов много), особенно там, где нет полноценной инфраструктуры, например отсутствуют быстродействующие каналы, там, где есть оборудование радиорелейной связи, существуют дополнительные требования.
Минсалих НАЗИПОВ
При проектировании ИТ-инфраструктуры мы учитывали, что комплексы, возможно, придется эксплуатировать в экстремальных условиях, например при высоких температурах. На предприятии ведется мониторинг объектов. Контроль осуществляется в автоматическом режиме. При отклонении от заданных параметров работы ответственным сотрудникам направляются сообщения. Резкое отклонение температурных параметров приводит к износу оборудования. Чтобы не допустить этого, мы на этапе проектирования ИТ-инфраструктуры позаботились о создании оптимального микроклимата, рассчитывали потребности теплообмена. Несмотря на это, бывают отклонения, и благодаря оперативной реакции автоматики и специалистов мы находим решения, которые позволяют избежать проблем. Большое значение имеет проактивный мониторинг, в частности для своевременного определения узких мест в ИТ-инфраструктуре. При регулярном отслеживании таких участков снижается вероятность того, что в результате расширения бизнеса придется перестраивать ИТ-инфраструктуру компании в целом.
Гарольд НОВИКОВ
Филиалы нашего предприятия рассредоточены на огромной территории – от заполярного Ямала до субтропического черноморского побережья. В таких условиях на передний план, безусловно, выходят высокая надежность, возможность централизованного дистанционного контроля и управления всеми сегментами и системами ИТ-инфраструктуры. Для достижения требуемых характеристик используются резервирование и дублирование ключевых элементов, компонентов или систем. Для ряда инженерных систем, работающих в экстремальных условиях арктического климата, применены собственные ноу-хау, облегчающие эксплуатацию и обслуживание инженерных систем. Большое внимание уделяется своевременному и качественному техническому обслуживанию оборудования.
Аубекир ТЕМИРБУЛАТОВ
В условиях Северного Кавказа эти вопросы для нас не столь актуальны, как для коллег в северных или дальневосточных регионах. Едва ли у нас есть опыт работы в экстремальных условиях. Производственные площадки расположены компактно. Тем не менее мы делаем ставку на централизацию ресурсов, чтобы повысить доступность сервисов, скорость обслуживания, минимизировать оборудование, которое выходит за пределы нашей компетенции.
Какие технические показатели надежности критичны при эксплуатации удаленных составляющих ИТ-инфраструктуры вашей компании? Какие преимущества модульных решений можете привести?
Александр АНТОНОВ
Преимущества модульных решений в том, что они компактны, их легко поменять, доставить, просто эксплуатировать и ремонтировать, можно разместить в любой точке пространства. Такие автономные единицы обеспечивают необходимую среду для работы. И в этом, возможно, их основное преимущество.
Андрей ГОРШКОВ
Для нашей компании в приоритете такой показатель, как доступность сервисов, приближенный к трем девяткам. Применительно к модульным решениям особых преимуществ, на мой взгляд, нет, если сравнивать с другими решениями.
Андрей ГРИШИН
Среди критичных показателей стоит выделить время устранения отказа, которое сводится к минимуму в зависимости от удаленности объектов. Бесперебойность электроснабжения должна быть гарантирована, для этого на удаленных площадках, где нет персонала, обеспечивается тройное резервирование. С учетом трудностей, возникающих с доставкой грузов в такие районы, необходимо наличие определенного запаса имущества и приборов на местах. При возможности резервируем ответственное оборудование, что позволяет быстро произвести его физическую замену.
Андрей ДЕДЮХИН
Прежде всего, это бесперебойность предоставления услуг, непрерывность оказания сервисов на базе нашей ИТ-инфраструктуры. С учетом этого строятся сети, выбирается серверное оборудование, дублируется передача информации. Преимущества модульных решений очевидны, в частности, это применение двух источников питания на стандартном сетевом и серверном оборудовании, использование нескольких каналов связи серверного оборудования с основной инфраструктурой.
Максим КОРЕПАНОВ
В первую очередь устойчивость к сбоям в электропитании, непрерывность работы в условиях погодных катаклизмов и суровых климатических условий, иными словами, бесперебойность функционирования ИТ-инфраструктуры.
Минсалих НАЗИПОВ
Для начала мы уточнили требования к надежности, способы определения ее целевых параметров, показатели, обеспечили мониторинг и контроль. Для управления рисками разработана стратегия повышения параметров надежности. Прогнозный расчет оценки надежности выполняется на основе информации об аналогичных системах и компонентах, а также путем экспертной оценки.
Мы присматриваемся к модульным решениям. Нам неоднократно их предлагали, но стоимость показалась высокой, и ситуация в экономике не самая благоприятная для приобретения подобных решений. Состояние рынка не способствует наращиванию производства, созданию дополнительных производственных площадок. В то же время для предприятий, имеющих удаленные подразделения и участки, альтернативы модульным решениям, на мой взгляд, нет.
Гарольд НОВИКОВ
В составе предприятия более десятка удаленных филиалов, поэтому руководство предприятия придает особое значение надежности и бесперебойности ИТ-инфраструктуры. В таких условиях важнейшими параметрами становятся надежность и качество корпоративной сети передачи данных. Для решения этих задач созданы резервные каналы связи с применением спутниковых технологий.
Аубекир ТЕМИРБУЛАТОВ
По мере развития и внедрения технологии smart grid, «умных» управляемых подстанций, в частности, функционирующих без персонала, данная тема становится актуальной для нашей компании. Тем более сейчас, когда одним из приоритетов в стране становится использование новых технологий в традиционных отраслях и сферах деятельности. Если говорить о конкретных критичных показателях, то я бы выделил доступность – точка должна быть доступна для важных объектов энергетики. В числе преимуществ модульных решений стоит отметить низкую стоимость обслуживания, проектирования и высокие темпы развертывания решений. Возможно, закупка модуля обойдется дороже по сравнению с выбором и сборкой отдельных необходимых компонентов, но не факт. Нужно анализировать каждый конкретный случай. На стадии эксплуатации понесенные затраты можно будет компенсировать.
Как на вашем предприятии организована эксплуатация удаленных элементов ИТ-инфраструктуры? Каковы преимущества выбранной модели?
Александр АНТОНОВ
У нас есть специальные бригады, которые по графику объезжают эти точки, проводят регламентные работы. Данный бизнес-процесс предусмотрен на энергетических предприятиях регламентами, определяющими порядок оценки состояния теплотрасс, котельных и т. д. В регламент добавляются тепловые узлы, на них ставится оборудование соответствующего класса, для точки указывается определенный интервал маршрута мониторинга. Члены бригад проходят обучение, инструктаж: что смотреть, что делать в случае нештатной ситуации.
Андрей ГОРШКОВ
Как правило, мы отдаем предпочтение облачным распределенным решениям, которые не привязаны к какой-либо точке. Доступность, прозрачность и масштабируемость – основные преимущества в данном случае. При этом всегда четко регулируется управление спросом на производительность. Если нам надо нарастить потенциал, то в случае использования облачных решений это не представляет трудностей.
Андрей ГРИШИН
На каждую систему есть регламенты, четко прописывающие порядок действий, которые необходимо осуществлять персоналу, и порядок работы с документами и пользователями через систему. Регламентация процессов идет постоянно, что обеспечивает возможность контроля их выполнения. Кроме того, в соответствии с регламентом эскалации отказов, инцидентов, аварий персонал представляет, какие действия он должен выполнить в случае потери связи и доступа к сервисам. Действия регламентируются как организационно, так и технически. В момент нештатной ситуации при потере доступа к ответственным сервисам обеспечивается массовая смс-рассылка специалистам и руководителям, что позволяет своевременно отреагировать на изменение ситуации.
Андрей ДЕДЮХИН
Удаленных объектов в настоящее время у нас нет, хотя не исключаю, что в ближайшем будущем такие объекты могут появиться, сейчас инфраструктура меняется. В этом направлении мы ведем работу, выбираем подходящие модели эксплуатации удаленных элементов.
Максим КОРЕПАНОВ
На удаленных объектах ИТ-инфраструктура минимальная (развернуты серверы и файловые хранилища, позволяющие минимизировать трафик). Специфических требований мы не предъявляем. Но в перспективе планируем развивать сети и обеспечивать централизацию сервисов в дата-центрах.
Гарольд НОВИКОВ
Эксплуатация удаленных сегментов ИТ-инфраструктуры нашего предприятия осуществляется по иерархической схеме. Вопросы пользовательского сегмента, безотлагательные проблемы текущей эксплуатации решаются на месте вахтовым персоналом. Задачами круглосуточного мониторинга и администрирования вычислительного и инженерного оборудования центров обработки данных занимается специализированный отдел системно-технической инфраструктуры в составе службы информационно-управляющих систем предприятия. Такая модель организации труда позволяет добиться высокой степени доступности информационно-управляющих систем и систем класса вертикально интегрированных решений ПАО «Газпром» в целом.
Аубекир ТЕМИРБУЛАТОВ
Богатым опытом в этой сфере поделиться не можем. Правда, недавно мы унифицировали узлы связи на удаленных объектах, где нет ИТ-персонала. При выходе аппаратуры из строя на объект отправляется универсальный модуль, который устанавливается сотрудниками, не имеющими специального образования, и инфраструктура продолжает функционировать.
Применяете ли вы конвергентные системы и решения высокой заводской готовности?
Андрей ГОРШКОВ
Конвергентные решения используются нашими партнерами, которые предоставляют нам вычислительные мощности, в центрах обработки данных. У себя на площадках мы такие решения не применяем. Большую часть сервисов и мощностей в настоящее время потребляем по моделям SaaS и IaaS.
Андрей ГРИШИН
Если говорить об информационных системах, то типовые продукты вендора для подразделений логистики, бухгалтерии мы дорабатываем силами собственных программистов с учетом потребностей бизнеса. В сегменте оборудования связи за основу берем то, что дает производитель, покупаем готовые решения. Однако потребности внутренней эксплуатации вызывают желание что-то улучшить, упростить вопросы контроля, оптимизировать расходы исходя из внутренних условий.
Решения высокой заводской готовности – это веление времени, они весьма перспективны. Предпосылки для их использования, на мой взгляд, уже созданы. Группа компаний «Норильский никель» рассматривает вопрос о создании в норильском промышленном районе единых дата-центров. Перевод туда всех сервисов, их унификация для предприятий, работающих в регионе, оказание услуг через единый центр обслуживания обеспечат повышение безотказности систем. Не менее важно и то, что в одном месте аккумулируются кадровый, технический потенциал, что позволяет, не размывая ресурсов, решать самые сложные вопросы, при этом снижать затраты на содержание инфраструктуры. Реализация такого подхода отвечает интересам бизнеса.
Андрей ДЕДЮХИН
Можно утверждать, что мы, как говорится, заточены на применение таких решений. Вендоры, поставщики ЦОД предлагают конкретные технические решения. Мы стараемся воспользоваться их предложениями. В то же время, на мой взгляд, не стоит переоценивать потенциал подобных решений. У каждого вендора своя информационная составляющая развития, и если она совпадает с нашей – замечательно, если нет, то, к сожалению, методом проб и ошибок приходится искать то, что нужно именно нам. Стоит заметить, что вендоры предпочитают умалчивать об отрицательных сторонах подобных решений. А если бы такая информация предоставлялась, наше взаимодействие было бы продуктивнее и результативнее.
Максим КОРЕПАНОВ
Готовых модульных решений мы пока не применяем. Если говорить о конвергентных решениях, то используем V-блоки.
Гарольд НОВИКОВ
Центры обработки данных нашего предприятия разработаны без применения конвергентных решений. Это обусловлено и дороговизной подобных решений как экономического компонента в деятельности компании, и иными аспектами, имеющими финансово измеримый результат. В силу сложностей текущей эксплуатации необходимо обеспечивать отказоустойчивость в условиях значительной удаленности сервисных компаний. Работа с большими объемами данных невозможна без интегральной аналитики и системы управления рисками.
Аубекир ТЕМИРБУЛАТОВ
Пока мы такие системы и решения не применяем, и на то есть объективные причины. Если говорить о перспективе, то вопрос нужно рассматривать в контексте импортозамещения. Но это уже другая тема. Отмечу лишь, что таких решений отечественного производства пока, к сожалению, не много.