DCDE-2026: новые вызовы, новые решения

 

На организованном «ИКС-Медиа» 13-м ежегодном форуме Data Center Design & Engineering (DCDE) около тысячи делегатов собрались, чтобы обсудить новые вызовы, стоящие перед отраслью ЦОДов. «Мы находимся в точке турбулентности, когда ЦОДы подвергаются сегрегации», — заявил Леонид Юль, руководитель по развитию бизнеса ЦОД компании IEK. Для классических решений проектирование в расчете на 15-летний жизненный цикл — это норма. Но высоконагруженные ЦОДы, в том числе для ИИ, на такой срок проектировать и прогнозировать режимы их эксплуатации сложно. И причина вовсе не в некомпетентности цодостроителей.

 

«Развитие искусственного интеллекта сейчас на развилке. Предсказать, что будет востребовано, какая будет нужна мощность, никакие эксперты не смогут. Может быть, через год мы будем здесь обсуждать постоянный ток», — поделился оценками Денис Горяченков, директор департамента системной интеграции и энергетических решений компании ДКС.

 

Текущую ситуацию с высоконагруженными ИТ-стойками в ЦОДах управляющий директор Uptime Institute в России и СНГ Алексей Солодовников назвал технологическим хаосом. «Это направление характеризуется полным отсутствием единых подходов и стандартов. Скажем, водяные разъемы на входе в серверы сегодня у всех производителей разные», — констатировал А. Солодовников, заметив, что производители, включая Nvidia, начинают экспериментировать с количеством плеч питания (вместо привычных двух появляются три или четыре).

 

Однако главный вызов — в мощности стоек, которая быстро растет. «Nvidia приоткрыла завесу на пару лет вперед. Нас там ждет 600 кВт на стойку и существенно другой конструктив», — предупредил А. Солодовников, вызвав оживление в зале.

 

В условиях такой неопределенности живут и российские цодостроители. Генеральный директор «Ди Си квадрат» Александр Мартынюк привел пример, который раньше был невозможен: пока заказчик четыре месяца согласовывал конфигурацию для ИИ, мощность стойки «сама собой» выросла с 80 до 136 кВт. «Проектировщик сейчас сталкивается с неизвестностью, которая не позволяет аккуратно всё посчитать», — констатировал А. Мартынюк. Эксперт рекомендует переходить к «адаптивному проектированию»: если раньше объект сдавали как готовый продукт, то теперь в него должна быть заложена возможность реализации нескольких вариантов инженерных систем. 

 

Эксперты также советуют не экономить на высоте помещений, предусматривая возможность подведения жидкостного охлаждения под фальшполом, и на бетоне, учитывая постоянно растущую нагрузку на перекрытия. Будущее ЦОДов наступает в виде глубоких фундаментов и гибких контрактов, где слово «переделка» написано жирным шрифтом.

 

 

Проектировщики должны обеспечивать возможность замены инженерного оборудования. «В работающем ЦОДе кабельные лотки поменять невозможно. Поэтому они должны служить как можно дольше. Это справедливо и для труб водоснабжения. Все остальное заменить можно», — поделился опытом технический директор IXcellerate Сергей Вышемирский.

 

Помимо сложностей с проектированием рост мощностей стоек и ЦОДов в целом привел к тому, что отрасль столкнулась с дефицитом электроэнергии. Эта проблема и пути выхода из сложившейся кризисной ситуации сквозной нитью проходили буквально через все дискуссии конференции. «ИКС-Медиа» готовит подробный материал по этой теме, но главное, что показала прошедшая конференция, – все стороны готовы к компромиссу. И регуляторы, и энергетики, и ЦОДы, и вендоры настроены на то, чтобы прислушиваться к мнениям и нуждам друг друга, искать пути разрешения конфликтов. Это касается как принимаемых законодателями решений, так и позиции ЦОДов, например по внедрению технологий локальной генерации и размещению объектов в энергопрофицитных регионах. Если еще год назад подобные идеи воспринимались негативно, то сейчас цодостроители рассматривают такие сценарии как вероятные. Согласно опросу, проведенному в ТГ-канале «ИКС», почти по трети представителей отрасли рассматривают именно эти пути для электроснабжения своих будущих объектов.

 

 

«Дефицит электроэнергии, рост мощности стоек и необходимость эффективного отвода тепла», — перечислила болевые точки рынка ЦОДов председатель совета директоров Сlivet Russia Вероника Сильвестрова. Классические чиллеры с компрессорами на масляных подшипниках потребляют слишком много энергии. Поэтому Clivet разворачивает производство нового поколения холодильных машин и уже второй год выпускает на своих заводах в Китае энергоэффективные чиллеры с воздушным охлаждением на магнитных подшипниках. В следующем году аналогичную линейку запустят итальянские заводы компании. «Машины с магнитными подшипниками имеют большую мощность, энергоэффективны, но их цена не выходит за пределы разумного», — подчеркнула В. Сильвестрова.

 

 

В сегодняшней ситуации особую ценность имеет география производства. Clivet входит в китайский холдинг Midea, но сохраняет заводы в Италии (где мощности по производству чиллеров увеличиваются втрое), а также использует площадки в Чехии и Сербии.

 

Еще один путь повышения энергоэффективности — максимально задействовать фрикулинг. Директор по развитию TICA в Европе Константин Григорьев представил безмасляный чиллер с фрикулингом — холодильную установку, сочетающую технологию свободного охлаждения с использованием компрессоров, не требующих масляной смазки.

 

Особое внимание компания уделяет тестированию продукции. Как рассказал К. Григорьев, в Китае строят крупнейший в Азии лабораторный кластер с камерами, способными одновременно поддерживать заданные температуру и влажность при тестировании климатического оборудования мощностью более 2–2,5 ГВт. «Камер такой мощности сегодня нет ни в Китае, ни в Европе и только в Америке есть одна», — сообщил он. 

 

Для сегмента высокопроизводительных вычислений, где простой серверной стойки обходится в миллионы рублей, наличие локального производителя с собственным складом запчастей и круглосуточной сервисной службой становится критическим фактором. «Дата-центр — это много оборудования, которое иногда ломается. Может произойти всё что угодно. Нужно быстро отреагировать», — подчеркнул Александр Котляр, генеральный директор компании «ТехноФрост». У компании также есть испытательная лаборатория, где проводятся как тепловые, так и акустические испытания чиллеров мощностью до 1200 кВт и прецизионного оборудования до 300 кВт.

 

 

ЦОДы нередко расширяют под новые ИИ-нагрузки. Добавляют стойки, ИБП, меняют схемы ввода. И тогда, как констатирует Д. Горяченков, основной вопрос состоит в том, выдержит ли существующая низковольтная инфраструктура ту мощность, которую ЦОД наконец получил. Дело в том, что щиты, коммутационная аппаратура и архитектура распределения часто остаются от первоначального проекта, но расчетные токи расходятся с реальными. 

 

Последние аварии и инциденты неизменно развиваются по следующей логике: сложная схема питания → неточная оценка токов → срабатывает «не тот» аппарат → отказ части ЦОДа или всего объекта. Точка отказа находится не там, где ждали. 

 

ДКС предлагает системный подход: от выбора автоматических выключателей (с учетом реальных токов КЗ и источников питания) до архитектуры низковольтной части и ее интеграции в общий мониторинг. Низковольтная инфраструктура — не та зона, которую можно «доутвердить потом». Самые дорогие отказы сегодня происходят именно здесь. 

 

 

Разделение ответственности между несколькими поставщиками энергооборудования превращает стройку в долгострой. «Люди начинают искать ошибки не у себя, а у смежных служб», — отметил директор по развитию отрасли ЦОД компании ПСМ Антон Гущин. Он привел пример, когда в одном из проектов из-за нестыковок пусконаладка заняла более полугода.

 

«Нужно выбирать поставщиков, которые способны брать на себя ответственность, имеют опыт и могут отвечать за комплексное решение, а не только за свою узкую часть», — резюмировал А. Гущин. Лидер российского рынка ДГУ для ЦОДов переходит в статус интегратора энергосистемы.

 

 

ЦОД мало спроектировать и построить. Надо еще доказать потенциальным клиентам, что он надежен.

 

В ходе конференции DCDE было объявлено о первой в России сертификации проектов ЦОДов согласно отечественной модели классификации. Компании Т-ЦОД-1 и Т-ЦОД-2 (входят в экосистему Т-Банка) получили сертификаты класса А на проекты своих дата-центров в Доброграде (Владимирская область) и Серпухове. Процесс оценки документации занял два месяца — рекордно короткий срок для столь сложной инфраструктуры.

 

Разработанная АНО «Координационный совет по ЦОДам и облачным технологиям» модель классификации включает четыре класса — от A (высший) до D (минимальный). Класс A подразумевает непрерывность работы информационных систем при единичном отказе любого компонента инженерных систем. Оценка проводится по четырем группам критериев: энергоснабжение, холодоснабжение, телеком-инфраструктура и физическая безопасность. Конкретные параметры различаются в зависимости от класса. Директор по развитию бизнеса iKS-Consulting Дмитрий Горкавенко подчеркнул, что модель является общественным достоянием: «Она публична в полном виде — скачайте и используйте для самоклассификации, аудита своей инфраструктуры или составления технического задания на проектирование».

 

Сертификация ЦОДов Т-Банка стала пилотным проектом. По словам ведущего консультанта iKS-Consulting Дениса Патрикеева, на сроки и сложность влияют пять факторов: полнота исходной документации, сложность инфраструктуры (одна площадка или несколько), доступность ключевых сотрудников заказчика, требования к итоговым материалам и необходимость выездных проверок. 

 

Первая сертификация показала: модель не просто работает, но и помогает специалистам дата-центров по-новому взглянуть на свою инфраструктуру и получить ценные замечания от независимых экспертов. Работающий аналог международных стандартов, адаптированный к российским реалиям, будет способствовать укреплению технологического суверенитета страны и дальнейшему развитию отрасли цодостроения.