Цод в строительстве это что

Российский рынок коммерческих ЦОДов сейчас находится в активной стадии развития. Строятся новые дата-центры, модернизируются старые, также наблюдается тенденция укрупнения центров за счет проведения сделок слияния и поглощения в данной сфере. Причиной этому служит повышающийся спрос на услуги центров обработки данных и облачных сервисов, как со стороны коммерческих организаций, так и со стороны предприятий госсектора. Особенно остро это ощущается сейчас, в период распространения коронавирусной инфекции и значительного увеличения пропускной способности сетей связи из-за выросшего спроса. Многим компаниям текущих возможностей катастрофически не хватает.

Часть I. Анализ рынка, мотивация, разработка плана, составление технического задания.

Анализ рынка коммерческих центров обработки данных

Так, в 2019 году рынок коммерческих ЦОДов продемонстрировал динамичный рост как по увеличению количества стойко-мест – на 12,3% относительно 2018 года (см. Рис. 1), так и по показателям прибыли – за последние 5 лет прибыль дата-центров возросла более чем в 2,5 раза (см. Рис. 2).

Как устроен дата-центр — экскурсия по ЦОД DataPro

Рис. 1. Динамика роста числа стойко-мест в РФ (2015-2019 гг.), тыс. ед.

Рис. 2. Динамика выручки на рынке коммерческих ЦОДов в РФ (2015-2019 гг.), млрд руб.

По аналитическим прогнозам, такая тенденция роста сохранится и в ближайшей перспективе. «Основные усилия игроков рынка будут направлены на закрепление качественных показателей услуг ЦОД и совершенствование достигнутых отношений с корпоративными клиентами. Помимо этого, ожидается дальнейшее качественное обновление инфраструктурного базиса, которое, в частности, предполагает уход с рынка неконкурентоспособных компаний» 1 .

Заметно усиливается влияние крупных игроков рынка. Так, в 2019 году компания «Ростелеком» приобрела DataLine, упрочив еще больше свою лидерскую позицию в данном сегменте. А годом ранее, осенью 2018, компания МТС выкупила один из крупнейших в России ЦОД «Авантаж», и продолжила увеличивать базу в 2019 году.

В целом тенденция наращивания мощностей и укрупнения будет прослеживаться и в ближайшем будущем. Компании осознают важность и перспективность коммерциализации облачных сервисов, услуг коллокации и стремятся успеть захватить большую долю рынка. По итогам 2019 года лидерами по количеству стойко-мест стали «Ростелеком-ЦОД», IXcellerate и DataPro (см Рис. 3).

Рис. 3. Рейтинг ключевых участников рынка коммерческих ЦОД в РФ по итогу 2019 года

Основными потребителями услуг дата-центров являются компании, в которых информация и скорость ее передачи становятся ключевыми факторами работоспособности, когда от IT-инфраструктуры зависит стабильность бизнеса в целом. Это банки и логистические центры, медицинские учреждения и госструктуры, оперирующие колоссальными массивами данных. Телекоммуникационные компании также являются одними из основных потребителей услуг. Дата-центры необходимы как интернет-провайдерам, операторам платного ТВ, ОТТ-сервисам, операторам голосовой связи, так и телеканалам с целью оптимизации IT-инфраструктуры, бесперебойности, управляемости и масштабируемости предоставляемых услуг.

Pro Hi-Tech в ЦОД Tier III. Дизельные ИБП, продвинутое охлаждение Schneider и многое другое

Зачем нужен собственный ЦОД?

Большинство компаний задумываются о создании собственных ЦОДов, а многие – такие, как мы – уже построили. При этом побудительными мотивами к реализации проекта выступают такие факторы, как:

• Рост количества оборудования в связи с увеличением потребляемых ресурсов и отсутствие достаточных площадей для его размещения;
• Необходимость объединения имеющихся серверов в единый ресурс;
• Необходимость централизованного управления данными и другим оборудованием;
• Предупреждение непредвиденных ситуаций, которые могут вывести из строя дорогостоящее оборудование.

Наша компания 18 лет успешно функционирует на телеком-рынке. Основное направление деятельности – услуги телевидения. За это время и технологии, и потребности в услугах ТВ претерпели значительные изменения. Для наших целей мощностей обычных серверных уже стало недостаточно.

За эти 18 лет нашим абонентам вместо 6 каналов в сети стало доступно более 200 каналов, в том числе в таких форматах, как HD, UltraHD и 4K. Естественно, для этого требуется более функциональное оборудование с высоким уровнем отказоустойчивости.

Услуги, предоставляемые сегодня, требуют значительных вложений, как в информационные технологии, так и в профессиональное оборудование, которое сможет обеспечить надежность передачи сигнала и высокий уровень изображения, осуществить безопасное хранение большого объема данных. В связи с этим и было принято решение о создании собственного ЦОДа как для реализации своих нужд, так и для коммерческих целей. В данной статье мы делимся своим опытом создания.

Наличие собственного ЦОДа обеспечивает полный контроль над данными и сервисами, а также рабочей средой. Возведение и оснащение дата-центра – достаточно дорогостоящий проект, требующий тщательной предварительной подготовки и проработки всех нюансов. Поскольку ЦОД – это сложный инженерный объект, состоящий из строго интегрированных между собой систем, от их слаженной и эффективной работы зависит жизнеспособность дата-центра, а соответственно и всей бизнес-структуры, которую он обслуживает. На разработку концепции собственного ЦОДа, продумывание всех деталей и тонкостей, определение перспектив его дальнейшего использования у нашего генерального директора, Миронова Вячеслава Анатольевича, ушли сотни часов работы, так как только он мог видеть всю картину целиком (полный функционал системы для наших нужд и дальнейшее ее развитие). Результатом этого труда стало возведение нашего ЦОДа.

Рассмотрим основные этапа строительства с учетом личного опыта по созданию современного центра обработки данных для нужд и целей телекоммуникационного оператора.

Основные этапы:

1. Составление технического задания (ТЗ);
2. Проектирование и разработка технической документации;
3. Строительство;
4. Сдача в эксплуатацию.

Строительство ЦОДа: этап 1. Составление ТЗ

На данном этапе важно определить назначение дата-центра, цель его создания и какие функции должны выполняться в процессе его эксплуатации, в том числе и в будущем. Прорабатываются технические характеристики, архитектура ЦОДа, показатели качества и технико-экономические требования. В ТЗ также определяется порядок работ, срок их окончания, указываются ожидаемые результаты.

В разработке ТЗ для строительства дата-центра могут принимать участие:

• Технический директор;
• Руководитель службы эксплуатации;
• IT-инженер;
• Инженеры-проектировщики;
• Представители генерального подрядчика;
• Руководитель компании;
• Другие заинтересованные службы.

Согласованность и достаточная координация между структурами позволит избежать ошибок на этапе проектирования, задвоения или реализации ненужных функций, сократить и оптимизировать бюджет на реализацию проекта. Поэтому разработку технического задания необходимо проводить консолидировано, с перекрестной проверкой каждого раздела всеми заинтересованными службами, и имея единого технического специалиста, отвечающего за выпуск финального документа, – архитектора решения. Важно также до начала составления технического задания четко разграничить зоны компетенции всех подразделений и авторов документа, а также назначить ответственного исполнителя.

Одной из основных проблем на этапе разработки ТЗ выступает не только затратная часть на реализацию проекта, но и закладывание в проект перспективы на будущее. Отрасль IT чрезвычайно быстро развивается и претерпевает значительные изменения в достаточно короткие промежутки времени. При реализации проекта сегодня нужно всегда смотреть в будущее: новые запросы и требования клиентов, возможность дальнейшего масштабирования ЦОДа, увеличение нагрузки на оборудование, повышение энергоемкости и энергобезопасности, теплоотдачи, использование помещения в долгосрочной перспективе. Необходимо заложить резерв на дополнительное оснащение электроэнергией помещения, кондиционирование и пр. Оборудование должно быть рассчитано на долгий срок эксплуатации, с высоким уровнем запаса мощности, без быстрого морального износа.

Следующая проблема, с которой столкнется любая компания, строящая ЦОД с нуля – это, конечно же, высокая стоимость реализации проекта. В среднем оснащение и оборудование 1 кв. м современного дата-центра по оценке специалистов может обойтись более 250 тыс. руб. Поэтому необходимо заранее просчитывать коммерческую составляющую.

С одной стороны, необходимо просчитать экономию от сокращения издержек при использовании ресурсов других коммерческих ЦОДов. Это могут быть как разовые, так и ежемесячные издержки: подключение, аренда юнитов или стоек, организация перемычек и стыков, затраты на медиалогистику: доставка и обработка сигнала и пр.

Также необходимо помнить о возможном росте цен на услуги ЦОДов со временем. Приведем данные ориентировочной стоимости таких услуг в Москве от разных компаний (см. Табл. 1).

Таблица 1. Стоимость некоторых услуг коммерческих ЦОДов в Москве

Услуги коммерческого ЦОДа Стоимость услуг

Инсталляция (согласование проекта, ввод кабеля)	40 000 – 90 000 руб.
Аренда места под кабель	10 000 – 50 000 руб./мес.
Аренда юнита	2 000 – 5 000 руб./мес.
Аренда стойко-места	40 000 – 125 000 руб./мес.
Кроссировка (перемычки)	3 000 – 15 000 руб./мес.
Медиалогистика — энкодирование из SDI в IP — upscale/downscale — плейаут	15 000 – 30 000 руб./мес. 10 000 – 20 000 руб./мес. 40 000 – 100 000 руб./мес.
И другие услуги

В целом, ежемесячные затраты на услуги коммерческих ЦОДов могут достигать от нескольких сотен тысяч рублей до миллиона в зависимости от потребностей клиента.

С другой стороны, строительство собственного дата-центра – это возможность получения дополнительной прибыли от использования свободных мощностей вашего ЦОДа, коммерциализация услуг по работе с сигналами и потоками, осуществление кодирования, конвертации сигнала, мультиплексирования, размещение плейаутов и реализация перегона контента, услуги коллокации для партнеров. Таким образом, если сравнить все затраты на строительство собственного ЦОДа (порядка от 100-150 млн. руб. для небольшого дата-центра площадью около 100 кв. м) и экономию от его использования вместо услуг стороннего ЦОДа (до 10 млн руб. в год), а также возможность получения дополнительной выручки за счет арендаторов (если у вас 10 клиентов, то сумма может составить порядка 40 млн руб. в год), то срок окупаемости строительства будет около 3-х лет, а дальше уже пойдет получение прибыли.

Для более детальной проработки вопроса на данном этапе также используется сценарный метод анализа: производится просчет пессимистичного, реалистичного и оптимистичного сценариев развития, прорабатываются бизнес-планы и финансово-экономические показатели с долгосрочной перспективой по разному пути возможного развития. Это дает более полное понимание всех возможностей и угроз.

Для более точного понимания возможных затрат на строительство собственного ЦОДа можно также воспользоваться онлайн-сервисом » Калькулятор капитальных затрат » от компании Schneider Electric (см. Рис. 4). Выбирая необходимые параметры, начиная от проектной мощности ЦОДа, типа системы охлаждения и вентиляции, до уровня резервирования, программа посчитает примерные расходы на материалы, инженерное оборудование, проектирование и установку систем, черновую отделку помещений. Это даст более полное понимание в общей картине затрат, а также возможность сравнить разные типы систем и оборудования по стоимостным издержкам.

Рис. 4. Онлайн-калькулятор расчета затрат на строительство ЦОД от Schneider Electric

После проведения всех изучений, составляется комплексная таблица сравнений, взвешиваются все «за» и «против». Только после этого можно переходить к следующему этапу строительства дата-центра.

Во второй части статьи Александр Лебедев расскажет о проектировании и разработке технической документации, строительстве ЦОДа и введении его в эксплуатацию.

1 — iKS-Consalting, отчет «Российский рынок коммерческих дата-центров 2018-2023 гг.»

Источник www.cableman.ru

Что такое ЦОД (Центр Обработки Данных)

Колоссальный рост информационных технологий привел к тому, что не осталось ни одной компании, которая бы не обрабатывала и не хранила данные о своей деятельности. Запросы бизнеса к обеспечению сохранности информации постоянно растут, что требует все больше ресурсов, а значит и к работе центров обработки данных предъявляются все более жёсткие требования. На сегодняшний день получение услуг коммерческих ЦОД является стратегически важным решением для многих компаний, оперирующих огромным массивом информации. В данной статье будут рассмотрены объекты, имеющие высокие уровни надежности и отказоустойчивости.

ЦОД что это?

В первую очередь — это объект, где сервера и/или ИТ-инфраструктура размещены с целью обеспечения непрерывного функционирования. Дата-центры существовали в той или иной форме с момента появления компьютеров.

В те дни, когда компьютеры были размером с серверный зал, в центре обработки данных мог размещаться всего один суперкомпьютер. Со временем размеры ИТ-оборудования уменьшились, а потребности в обработке информации начали увеличиваться – началось объединение нескольких серверов в целях увеличения вычислительной мощности.

Большое количество серверов и сопутствующего оборудования может размещаться в стойке, зале, в целом здании или в группах зданий. Сейчас современный объект может включать в себя тысячи мощных и небольших серверов, работающих 24 часа в сутки. Его основная задача состоит в обеспечении защищенного пространства с требуемыми условиями микроклимата (постоянные параметры температуры и влажности), гарантированным электроснабжением. Дата-центры, обеспечивающие высокий уровень надежности и отказоустойчивости, должны гарантировать бесперебойную работу оборудования 24/7/365.

Основные составляющие:

• Объект (Здание) – место или «выделенное пространство», предназначенное для размещения ИТ-оборудования. Особое внимание уделяется дизайну для оптимизации пространства и контролю параметров микроклимата.
• Инженерная инфраструктура — оборудование, обеспечивающее надежную поддержку самого высокого уровня безотказной работы. Институт Uptime Institute выделяет четыре уровня (Tier). Каждый уровень соотносится с определенной коммерческой функцией и устанавливает соответствующие требования к электропитанию, охлаждению, техническому обслуживанию и безотказности работы.
• Системы безопасности – систему контроля и управления доступом.
• Система управления зданием (BMS): позволяет осуществлять постоянный и централизованный контроль и управление объектом, включая влажность и охлаждение.
• ИТ-инфраструктура: фактические сервера для ИТ-операций и хранения данных компании. Сюда входят серверы, кабели и стойки, а также различные элементы информационной безопасности, такие как брандмауэры.
• Служба эксплуатации: квалифицированный персонал, осуществляющий круглосуточный мониторинг и периодическое обслуживание систем (как ИТ, так и инфраструктуры).

Основные системы инженерной инфраструктуры:

Энергообеспечение

Бесперебойную подачу электропитания в коммерческом объекте решают подводом нескольких силовых линий и установки автоматизированных систем, с помощью которых можно дистанционно проверять работу энергетических установок, а в случае аварий – переключать источники на резервные каналы.

В случае остановки подачи электропитания от внешних городских электросетей, в коммерческий объект имеются системы, способные поддерживать питание критической нагрузки как в краткосрочном, так и в долгосрочном режиме. На небольшой промежуток времени работу серверов обеспечивает источник бесперебойного питания (ИБП). Как правило, ИБП необходим на время просадки напряжения или на время старта ДГУ. Дизель-генераторная установка включаются по команде от системы мониторинга напряжения на городском вводе, и работает до появления стабильного напряжения питания от городских сетей. Обычно, генераторная установка имеет запас топлива для бесперебойной работы от 4-х до 24 часов.

Охлаждение

Надлежащее охлаждение позволяет серверам, сетевому оборудованию и другим устройствам функционировать должным образом без перегрева.

Безопасность

Дата-центры соответствуют высоким требованиям безопасности. Для ограничения доступа к данным организовывается периметр безопасности как внутри помещений ЦОД, так и на прилегающей территории, с использованием систем контроля и управления доступом, биометрических систем, контроля видеонаблюдения.

Противопожарная система

Немаловажную роль в безопасности играет наличие противопожарной системы, оснащённой датчиками раннего обнаружения пожара в серверных залах и местах размещения инженерных систем, системы устранения пожара.

Преимущества ЦОД

Надежность

Инженерные системы, размещенные на площадке, имеют резервирование, которое для большинства компаний слишком дорого для установки и обслуживания. Резервирование в системах охлаждения, питания и связи обеспечивают бесперебойную работу, которая важна для любого бизнеса. Непрерывное время безотказной работы означает постоянный доступ к данным клиента и серверам.

Энергоэффективность

Размещая ИТ-инфраструктуру в одном месте и управляя техническими возможностями сторонней площадки, экономится большое количество энергии по сравнению с размещением оборудования в собственных помещениях.

Затраты

Аутсорсинг – это недорогое решение в сравнении со строительством и обслуживанием собственного объекта. Если ИТ-отдел клиента будет все финансировать – отдельное помещение, резервируемые системы, круглосуточное наблюдение, то придется выделять большую часть общего бюджета на поддержание работы серверов. Аутсорсинг позволяет сокращать капитальные расходы, и основные средства направлять на развитие бизнеса.

Масштабируемость

Когда клиент выделяет часть своего офисного пространства для размещения серверных шкафов и другого ИТ-оборудования, по мере роста бизнеса расширение такого помещения становится затруднительным. Аутсорсинг позволяет компании гибко расширять свои требования, оплачивая только необходимое пространство и мощность, и только тогда, когда это необходимо.

Управление рисками

В деятельности любой компании могут наступать непредвиденные события, но когда сервера с критически важной информацией размещены в коммерческом ЦОД, то это никак не влияет на непрерывность бизнеса. Ущерб от подобных инцидентов зависит от специфики деятельности компании и от того, насколько критическую роль играют для ее бизнеса ИТ-сервисы.

Согласно аналитическому отчету iKS-Consulting, максимальный уровень потерь для компаний, занимающихся брокерскими услугами, – составляет почти $6,5 млн в час. В тройку отраслей, которым остановка предоставления ИТ-сервисов наносит наибольший ущерб, вошли также энергетика (ущерб $2,8 млн) и телекоммуникации ($2,0 млн).

По мере все более глубокой цифровизации большинства отраслей стоимость подобного простоя будет только возрастать. Поскольку ИТ из функционально поддерживающего бизнес-процессы компании инструмента становится базисом взаимодействия с клиентами и партнерами, такие ситуации будут все чаще приводить к серьезным репутационным потерям.

Использование колокейшн — хорошая стратегия для обеспечения бесперебойной работы во время чрезвычайной ситуации.

Дополнительные услуги

Многие площадки являются экосистемой поставщиков. Количество сетевых провайдеров, узлов обмена трафика, сетей доставки контента, облачных провайдеров варьируется, что позволяет клиенту принимать оптимальные решения.

Почему DataSpace

• Надежный партнер. Проводимые ежегодные финансовые аудиты подтверждают финансовую стабильность компании.
• Сертифицирован на соответствие международным стандартам безопасности и надежности Uptime TIER III.
• Здание и земельный участок являются собственностью компании DataSpace.
• DataSpace отвечает передовым требованиям безопасности, благодарю чему ИТ-инфраструктура клиентов надежно защищено от любых происшествий.
• На протяжении нескольких лет DataSpace является основной площадкой для крупных финансовых учреждений России, требования которых к устойчивости и безопасности очень высоки.
• DataSpace ответственно подходит к осуществлению своей деятельности и страхует свои риски и риски клиентов на сумму до 10 000 000 Долларов США.
• Постоянное профессиональное развитие команды специалистов, обеспечивающих эксплуатационную устойчивость, позволяет DataSpace занимать лидирующие позиции на рынке. А значит, клиенты могут быть спокойны за бесперебойную работу своего оборудования.

ЦОД DataSpace DataSpace — ведущий оператор коммерческих ЦОД в России, обеспечивающий гарантированный уровень услуг и высочайший уровень надежности и безопасности. ул. Шарикоподшипниковская, д. 13 стр. 62, Москва, 115088, Россия

Источник www.dataspace.ru

Как построить модульный ЦОД за три месяца и не наступить на грабли

Этот модульный ЦОД мы построили меньше, чем за три месяца. В первых числах ноября начали монтаж на площадке, а в конце декабря уже сдали его в эксплуатацию.

В общих чертах запрос от заказчика именно таким и был: очень быстро нарастить вычислительные мощности под свой ИТ-проект там, где дополнительного места совсем нет. Решено было построить модульный ЦОД. И сделать это недорого. Спустя год готов рассказать, как это было. Как мы делали полную предварительную сборку и разборку ЦОДа на площадке в Сибири.

Как поливали его водой из мойки «Керхер» и разогревали, как духовку.

Заодно поделюсь нашим опытом обхода граблей при строительстве модульных дата-центров. А также расскажу о некоторых граблях, на которые мы все-таки наступили, но в каске.

Суровая правда жизни: начало подготовительных работ

Для тех, кто не особо следит за строительными технологиями ЦОД, краткая справка о модульных решениях:

а) для них не требуется разрешение на капитальное строительство;

б) их можно быстро поставить где угодно, хоть посреди леса, лишь бы было электричество и каналы связи;

в) они как конструктор лего — можно разобрать и перевезти на новое место дислокации. И относительно легко, при необходимости, нарастить.

Что касается именно этого проекта, то основные критичные характеристики для заказчика — обоснование «некапитальности» сооружения и демонстрация возможности неоднократной сборки и разборки. Плюс возможность наращивания ИТ-мощностей в дальнейшем.

Кроме того, в проекте требовалось выполнить монтаж внешних инженерных сетей (КЛ-0,4кВ, сети связи, водоснабжение, водоотведение) и модернизировать существующую электрощитовую. Она находилась в административном здании, от которой выполнялось подключение МЦОД.

Когда начали работу, выяснилось, что на площадке под асфальтом «захоронен» цокольный этаж старого здания, о котором никто, включая заказчика, не знал. В итоге спроектировали бетонную площадку, взяв категорию грунта «Строительный мусор». Разработали котлован, выполнили отсыпку щебнем и песчаной подушкой. Дополнительно залили 300 мм армированного бетона. Таким образом исключили риски перепада плотности грунта под модульным зданием.

Бетонное основание под МЦОД

Внешние сети — как это было

Первые «грабли» состояли в том, что у заказчика не оказалось актуальной версии геоподосновы. Нашелся только архивный файл. Более того, отсканирован он был не в масштабе, и нам было сложно понять привязку коммуникаций и самого модульного ЦОДа. В итоге в наши расчеты все же закралась ошибка в 2,5-3 метра. Из-за нее пришлось сначала убрать одно крытое парковочное место на территории, а потом его восстанавливать.

Работы по устройству внешних коммуникаций шли параллельно с подготовкой бетонного основания. Одновременно заказчик совместно с МОЭСК модернизировал трансформаторную подстанцию РУ-0,4кВ. Это все, конечно, добавило нам головной боли.

Прокладка коммуникаций

Электрощитовую в административном здании мы реконструировали ночью. Требовалось поэтапное отключение линий электропитания всего административного здания, а в нем — потребители I особой категории. Например, в этом же здании находились серверы одной довольно крупной авиакомпании. Естественно, подключали резервный источник питания — мобильный ДГУ — на случай форс-мажорной ситуации. Успели, кстати, за одну ночь все сделать.

Когда закончили работы с коммуникациями, встал вопрос о восстановлении асфальта на парковке. Начали этот вопрос прорабатывать и поняли, что «старый» асфальт положен на все тот же строительный мусор, а мы-то свои траншеи засыпали по правилам! Что произойдет, если положим асфальт? Правильно, в лучшем случае он начнет трескаться на границах разных зон.

Посоветовались со специалистами и сделали решение по легкому бетону. Забетонировали тонким слоем площадку, и уже на бетон положили новый асфальт.

Примерно вот так шли работы

Ну что сказать, год прошел — асфальт в хорошем состоянии.

Испытание водой и жарой

Одним из ключевых требований заказчика было провести предварительные испытания МЦОД на производстве и показать, что модульное здание соответствует основным требованиям. Пока мы занимались подведением коммуникаций, модульная конструкция уже была в производстве в Новосибирске. Дальше нам нужно было продемонстрировать заказчику возможность сборки и разборки ЦОДа. И вот тут началось самое интересное.

Обычно бывает предсборка модульных ЦОД на производстве, но это не наш случай. Заказчик требовал, чтобы модульное здание было собрано полностью — с фальшполом, с освещением, с общей электрикой и даже с пандусом. План был такой: полностью собрать модульное здание, провести предварительные испытания, разобрать здание, привезти в Москву и затем собрать еще раз.

Для того, чтобы все это провернуть, разместили модуль в огромном крытом цехе на площадке производителя.

Оба снимка сделаны на площадке производителя 3 октября

Приехала целая делегация — и наши инженеры, и представители заказчика. Многочасовые испытания шли два дня. Проводили проверку геометрических параметров модульного здания и помещений, отсутствия возможных «мостиков холода», отклонений высот фальшпола. Контролировали степень освещенности машинного зала на соответствие ТЗ. Еще была проверка на герметичность — поливали ЦОД водой из мойки «Керхер» под давлением.

Но самое необычное испытание — на теплопотери. Для этого мы арендовали тепловые пушки, и с утра в ЦОДе их запустили. Нагрев шел около двух с половиной часов. Температура внутри здания была на 50 градусов выше, чем снаружи. Жара стояла такая, что зайти в ЦОД было тяжело.

Представители заказчика с тепловизором проходили вдоль стен и смотрели, нет ли тех самых «мостиков холода» — мест, где теряется тепло. Это было… эпично. Но зато мы точно были уверены, что нагрев и охлаждение ЦОД будет полностью предсказуем в «боевых» условиях.

История с фальшполом

После того, как испытания успешно прошли, примерно за неделю модульное здание было разобрано. Подрядчик погрузил его в фуры, и часть из них сразу выехала в Москву. Выезжали фуры по очереди, чтобы мы могли сразу с колес выгружать и начинать монтаж. Так мы избежали аренды склада. Можно сказать, это грабли, на которые мы не наступили.

Модульная конструкция готовится к отправке из Новосибирска в Москву. 29 октября

Интересная история была с фальшполом. Если кто не в курсе, фальшпол — важная подсистема в ЦОД. Он держит все технологическое оборудование, и от его качества сборки и жесткости во многом зависит надежность ЦОДа.

14 ноября — сборка основных конструкций уже завершена. Занимаемся фальшполом.

В проекте у нас были предусмотрены ИБП весом под тонну, да еще и кондиционеры по 900 кг каждый. Подрядчик посчитал нагрузки и попытался убедить нас в том, что, мол, «не извольте сумлеваться, выдержит!»

Но слова «должен выдержать» нас не убедили.

Что мы сделали? Разработали рамы, усиливающие фальшпол под кондиционерами и ИБП. Для бесперебойников это была одна длинная мощная конструкция. Под фальшпол ее опускало человек пять или шесть.

Рамы для ИБП

А под кондиционеры мы сделали раму с ножками. Ножки эти вставали в паз — в существующие металлические фермы основания модульного ЦОДа.

И тут снова «грабли» — из-за спешки ребята-сварщики приварили ноги от другой рамы. Ноги получились короткими, и рама оказалась не на уровне фальшпола. А на следующий день уже все расписано — кондиционеры приезжают, заключен договор на такелажные работы… Звоним нашему инженеру (не просто инженеру, а с большой буквы «И» который). Пара звонков «мужикам» — и за ночь вопрос удалось решить.

Переварили ножки, и раму мы установили. И так как все считали наши ребята, мы спокойны — двукратный запас по прочности там точно есть.

Заказчику все тоже понравилось, кстати.

26 ноября — работа идет полным ходом.

ДГУ заказывали?

Самое большое зло в этом проекте — сжатые сроки. ЦОД и так сложное сооружение, а тут нужно было уложиться в считанные недели. На сборке работало две смены. Одни люди выходили, другие заходили на объект. И так семь дней в неделю.

Конечно, не обходилось без накладок. Например, лежит материал в доступе у монтажников. Они его берут, но об экономии думать уже некогда. В итоге нашим инженерам-проектировщикам приходилось с ходу определять потребности и докупать расходники. Каждый день и час был на счету.

При сборке кондиционеров был вопрос в качестве пайки медных труб. Когда мы уже подключили кондиционеры и начали испытания, обнаружилось несколько утечек в фреонопроводе. Отдельная история была — найти места этих утечек. Они ведь часто микроскопические.

Или, вот, например, дизель-генераторная установка (ДГУ). Заказчик говорит: у нас установка есть, привезем. Привозят и тут же выясняется, что ДГУ не соответствует их же собственным требованиям! Наигрались мы с ней в итоге: дорабатывали и в части хранения топлива, в части конструкции модуля. Ставили шумопоглощающие маркизы, которые направляют звук в землю, катализатор и глушитель.

Каждый день было перепланирование работ — если что-то успевали быстрее сделать, план сразу переигрывали. Честно говоря, заказчик, да и мы сами, не до конца верили, что успеем за 3 месяца. Но все получилось, успели. Чистая стройка заняла вообще около месяца. Перед самым Новым годом ЦОД запустили.

И напоследок вот, как это было, — три месяца работы в одном видео:

Источник habr.com