Строительство цод что необходимо

C развитием масштабов бизнеса ключевым фактором работоспособности предприятия становится надежность ИТ-инфраструктуры. На определенном этапе требуются более отказоустойчивые и производительные решения — именно тогда возникает необходимость расширить серверную комнату до масштаба ЦОДа. Мы рассмотрим, каковы ключевые этапы создания центра обработки данных и с какими подводными камнями можно столкнуться при построении этого комплекса. Полную версию статьи читайте в апрельском номере журнала CNews.

По большому счету центр обработки данных (ЦОД) является увеличенной копией и логическим продолжением серверной комнаты. Но его принципиальное отличие — комплексное оснащение всем спектром инженерных систем и применение специальных мер по обеспечению работы ИТ-инфраструктуры предприятия в том режиме, который ему необходим. Как показывает практика, на сегодняшний день собственный ЦОД требуется большинству крупных территориально-распределенных компаний, в которых высока зависимость бизнеса от организации ИТ. Например, свои дата-центры строят многопрофильные банки, операторы связи, крупные ритейлеры, транспортные компании и промышленные холдинги и т.д.

Как мы строим ЦОДы

Прежде всего нужно просчитать все возможные риски и оценить, нужен ли вообще предприятию ЦОД. Во-первых, необходимо понять, сможет ли компания в ближайшие 5 лет выделить на строительство и эксплуатацию центра порядка 15 млн долл.

Типичная ошибка большинства предприятий в том, что они не могут просчитать полную стоимость внедрения ЦОД и, как правило, закладывают в бюджет только строительство. На самом деле на возведение дата-центра приходится примерно 20% от общей стоимости проекта, а 80% бюджета уйдет на дальнейшую эксплуатацию. При проектировании решения стоит задуматься, как скоро потребуется увеличение общей производительности ЦОД и его «пропускной способности» и, самое главное, во сколько обойдется модернизация. Часто, пытаясь сэкономить на начальном этапе, компании ориентируются на дешевые, но плохо масштабируемые решения. Но рано или поздно наступает момент «насыщения» инфраструктуры, и выясняется, что для ее расширения требуются затраты, сопоставимые с первоначальными.

Еще одна типичная ошибка на первоначальном этапе – некорректное проектирование ЦОД. Как показывает практика, успех строительства центра напрямую зависит от проработки технического задания. Уже на этой стадии следует найти профессиональную компанию, которая построит data-центр. Привлечение специализированных предприятий на стадии разработки технического задания целесообразно, так как необходимо предусмотреть сотни параметров, и ошибки в проектировании могут обернуться многомиллионными убытками или неоправданными затратами. «Заниматься возведением центра своими силами не имеет смысла – слишком много здесь узких мест, которые по силам лишь профессионалам», – считает директор Data-Fort IBS Денис Калинин. – Одной теории недостаточно, нужен опыт строительства и эксплуатации. Здесь любой вопрос, вплоть до высоты потолка или глубины второго пола, имеет критическое значение, и ошибка чревата полной неработоспособностью центра в дальнейшем».

При выборе территории под строительство ЦОД необходимо учитывать климатические условия

Кроме того, на начальном этапе при проектировании необходимо грамотно выбрать поставщика оборудования. Как отмечают эксперты, также надо учитывать, что вся техника задержится как минимум на полгода на российской таможне, а некоторое оборудование может не дойти до адреса и вернуться назад к поставщику. Все это обусловлено тем, что к высокотехнологичному оборудованию таможенные органы предъявляют высокие требования. Специалисты компании BCC считают, что где бы ни строился ЦОД – в Европе, России или даже Африке – следует придерживаться единого подхода к построению его архитектуры по принципу «от бизнес-процессов – к железу и ПО», и это главное условие успешного проекта. ВСС представляет грамотную архитектуру комплексного ЦОД в виде пирамиды, где вершиной является уставная бизнес-задача (например, если заказчик оператор связи – то «обслуживание абонентов», если сеть гипермаркетов – то «продажа товаров покупателям» и т.д.), а нижние уровни подчинены ее решению.

Внедрение ЦОД в России имеет свои особенности. Довольно часто его эффективному строительству и функционированию мешает отсутствие нормальных рыночных условий и развитой инфраструктуры. При выборе территории под строительство ЦОД необходимо учитывать климатические условия, возможные проблемы с электричеством, логистикой и транспортной инфраструктурой, с завозом необходимых материалов. При проектировании нужно правильно рассчитать электропотребление, понять, как подвести к зданию электроснабжение. Например, г-н Калинин отметил, что на территории Москвы строить ЦОД бессмысленно, поскольку сегодня действуют запреты на подключение к энергоресурсам столицы. «Если у вас нет готовой электрической емкости, то за подключение ЦОДа к сети потребуется сумма, практически равная стоимости строительства», – сообщил он.

Впрочем, в Подмосковье или других субъектах РФ надо учитывать другие аспекты: для кого строится дата-центр (где находится центральный офис), нужна ли доступность, насколько важно нахождение собственной службы на территории ЦОД. По мнению экспертов IBS, наилучшим местом строительства ЦОД для предприятия с головным офисом в столице является Подмосковье либо города центрального округа, поскольку именно такое расположение обеспечивает надежные каналы связи и хорошие подъездные пути.

Определившись с местом расположения ЦОД, нужно правильно выбрать помещение. Здесь главное – площадь, необходимая для ЦОД, и инфраструктура вокруг здания. Как уже было отмечено, нужно выяснить, какие энергоресурсы будут подключены к ЦОД, площадь необходимо рассчитать с учетом перспектив развития компании.

В случае если предприятие только арендует помещение, важно проверить наличие охраны и транспортной инфраструктуры. Само помещение должно располагаться либо в отдельном специальном знании, либо в бизнес-центре. В целях снижения вероятности затопления, пожара и других бедствий для размещения дата-центра нельзя использовать подвальные помещения.

Источник: www.cnews.ru

Что такое ЦОД и для чего они нужны?

Многие крупные современные компании, которые оперируют терабайтами информации, зачастую всю заботу о своих серверах доверяют специальным дата-центрам. Давайте разберёмся вместе, что это за волшебное место, как устроен центр обработки данных (ЦОД) и в чем суть его работы.

Что такое центр обработки данных?

ЦОД или дата-центр — здание (или комплекс зданий), предназначенное для размещения серверного и сетевого оборудования с последующим подключением клиентов к интернету.

Чтобы расположенное в нём «железо» работало 24/7, в дата-центрах созданы максимально благоприятные условия — о них мы поговорим немного позже ;).

ЦОДы в определённой форме существуют ещё с середины прошлого века. Тогда в дата-центре мог размещаться всего один компьютер (вспомните размеры первых вычислительных машин!), а компания не могла обратиться к его владельцу и просто так арендовать ресурсы этого компьютера.

В посте «Дата-центры в фактах и цифрах» мы уже рассказывали, что «отцом» современных ЦОДов считают компьютер ЭНИАК, который использовался в военное время для расчётов полёта бомб, хранения боевых кодов для ядерного оружия и составления прогнозов погоды. Но, конечно же, с течением времени размер оборудования уменьшался, а вот спрос на такие мощности наоборот рос.

И зачем вообще нужен дата-центр? Кто его использует?

Самая главная функция ЦОД — обеспечить стабильную и безотказную работу размещённого в нём оборудование. Кроме постоянного доступа к сайтам любой дата-центр предоставляет защищённые каналы связи, по которым происходит обмен данными.

Арендуя полноценный выделенный сервер в ЦОДе, вы получаете полностью закреплённую за вами физическую машину. Обычно это не самое дешёвое удовольствие, из-за чего оборудование в дата-центрах используют в основном для крупных и сложных проектов. К примеру хостинг-провайдеры или банков, которые работают с мобильными сервисами, и онлайн-приложений с клиентскими службами.

Для клиентов ЦОД — финансовая выгода, потому что им не нужно покупать отдельное помещение, дорогостоящее оборудование и нанимать персонал. Достаточно просто арендовать помещение или серверное оборудование в уже существующем центре обработки данных.

Хорошо, а какие бывают ЦОДы?

Самая основная категория разделения дата-центров — по уровню надёжности и безопасности центры обработки данных. Здесь выделяются четыре категории: Tier 1, Tier 2, Tier 3 и Tier 4. Что это такое?

Тier — это показатель надёжности, разработанный сертификационной организацией Uptime Institute, который присваивается ЦОДам.

Давайте рассмотрим каждую категорию подробнее.

Tier I

Это базовый уровень надёжности с отказоустойчивостью 99,67%. В случае ошибок и отказов работа ЦОД прерывается. В требованиях уровня Tier 1 не предусмотрено обязательное использование источников бесперебойного питания и возможность резервирования данных. Сам стандарт достаточно сильно устарел.

Tier II

Так же, как и в 1 уровне, работа ЦОД может быть прервана из-за ошибок и отказов. Однако этот уровень предусматривает улучшенные условия размещения оборудования: резервные источники электроснабжения, фальшполы, избыточные системные ресурсы, улучшенные системы охлаждения. Отказоустойчивость для этого стандарта — 99,75 %.

Tier III

Основное преимущество и отличие от первых двух стандартов в том, что ЦОД этого уровня не нужно останавливать для ремонта и профилактических работ. Это очень удобно для организаций, которые ведут круглосуточное взаимодействие со своими клиентами. Для соответствия Для соответствия Tier 3 ЦОД должен иметь полное резервирование всех систем жизнеобеспечения. Отказоустойчивость этого уровня — 99,98%. REG.RU в том числе, предлагает аренду выделенных сервероы или размещение в дата-центре Tier III. .

Tier IV

На сегодняшний день это наивысший уровень надёжности ЦОД с отказоустойчивостью 99,99%. В требования этого стандарта входит двойное резервирование и полное дублирование всей системы. Этот уровень надёжности ЦОД рекомендован военным и финансовым организациям особой важности.

Ок, а как устроен дата-центр?

Основа любого дата-центра — инженерные системы — сложное профессиональное оборудование, которое недоступно для покупки в локальную серверную. Если представить, что ЦОД — живой организм, то можно выделить пять главных систем:

1. Электроснабжение. Самый главный источник жизни дата-центра, от которого зависит стабильность и бесперебойность работы ЦОДа. Для того, чтобы ваши сайты работали 24/7 здание подключают к электросети по нескольким независимым «вводам», устанавливают системы бесперебойного питания, а также подключают дополнительный дизельный генератор на случай полного отключения.
2. Кондиционирование. Логично, что машина, которая работает 24 часа в сутки, 7 дней в неделю и 365 дней в году может перегреваться. Поэтому помещение машинного зала должно очень хорошо охлаждаться — для этого используют профессиональные прецизионные кондиционеры.
3. Безопасность. Также один из важных пунктов. Задача каждого ЦОДа не только разместить оборудование, но и обеспечить как безопасность данных, так и их конфиденциальность. Сюда можно отнести систему контроля доступа, видеонаблюдение, пожарную сигнализацию, систему экстренного пожаротушения и другие.
4. Передача данных. Стабильный и бесперебойный процесс передачи данных важен для любого дата-центра. Для обеспечения бесперебойной передачи данных используют как выделенные каналы, так и общедоступные интернет-сети с широкой полосой пропускания.
5. Диспетчеризация. За всеми системами ведётся круглосуточное наблюдение, а устранение обнаруженных проблем происходит по заранее разработанным алгоритмам. Это исключает ошибки и позволяет решать проблемы максимально быстро.

Если вам интересно посмотреть, как устроена работа центра изнутри, можете посмотреть видео-экскурсию в дата-центр REG.RU:

А в чём плюсы размещения оборудования или заказа сервера в ЦОДе?

Размещение сервера в дата-центре обеспечивает компании несколько существенных преимуществ:

• меньший уровень затрат по сравнению с обустройством собственной профессиональной серверной, а также отсутствие необходимости перемещения инженерной инфраструктуры при переезде в новый офис
• постоянный доступ к данным и минимальный уровень рисков отключения электричества, проблем с интернет-соединением и сбоев в работе оборудования
• надёжность, производительность и постоянное совершенствование IT-инфраструктуры дата-центра, которая содержит в себе большое число разнообразных технических элементов — маршрутизаторов, коммутаторов, устройств безопасности, систем хранения данных, серверов, контроллеров доставки приложений, систем вентиляции и охлаждения, кабелей для подключения к внешним сетевым операторам.

Также в дата-центрах круглосуточно работают специалисты, которые могут выполнить все необходимые операции с серверами. В качестве альтернативы возможно использование удалённого управления.

Немного о необычных дата-центрах

Дата-центры сооружаются не только в городах, но и в местах с особыми природными и геологическими условиями, благодаря которым безопасность ЦОД достигает надёжного уровня. Если бы вы увидели фотографию такого здания, вы бы наверняка не догадались, что это дата-центр.

Например, один из ЦОД Microsoft расположен под водой. Главная фишка дата-центра в том, что можно использовать гидрокинетическую энергию для питания и естественного охлаждения.

Или другой пример необычных центров хранения — бывший ядерный бункер Cyberbunker в Нидерландах. В 1998 он превратился в самый укреплённый дата-центр, который специализируется на хранении данных и веб-хостинге.

Если вам интересно узнать больше о необычных ЦОДах, не забудьте посмотреть нашу подборку самых впечатляющих местах, где живёт интернет.

Не забывайте, что в REG.RU вы сможете подобрать физический сервер для проектов любой сложности. Творите и создавайте будущее вместе с нами!

Источник: www.reg.ru

Построение современного ЦОДа с нуля. Часть I

Российский рынок коммерческих ЦОДов сейчас находится в активной стадии развития. Строятся новые дата-центры, модернизируются старые, также наблюдается тенденция укрупнения центров за счет проведения сделок слияния и поглощения в данной сфере. Причиной этому служит повышающийся спрос на услуги центров обработки данных и облачных сервисов, как со стороны коммерческих организаций, так и со стороны предприятий госсектора. Особенно остро это ощущается сейчас, в период распространения коронавирусной инфекции и значительного увеличения пропускной способности сетей связи из-за выросшего спроса. Многим компаниям текущих возможностей катастрофически не хватает.

Часть I. Анализ рынка, мотивация, разработка плана, составление технического задания.

Анализ рынка коммерческих центров обработки данных

Так, в 2019 году рынок коммерческих ЦОДов продемонстрировал динамичный рост как по увеличению количества стойко-мест – на 12,3% относительно 2018 года (см. Рис. 1), так и по показателям прибыли – за последние 5 лет прибыль дата-центров возросла более чем в 2,5 раза (см. Рис. 2).

Рис. 1. Динамика роста числа стойко-мест в РФ (2015-2019 гг.), тыс. ед.

Рис. 2. Динамика выручки на рынке коммерческих ЦОДов в РФ (2015-2019 гг.), млрд руб.

По аналитическим прогнозам, такая тенденция роста сохранится и в ближайшей перспективе. «Основные усилия игроков рынка будут направлены на закрепление качественных показателей услуг ЦОД и совершенствование достигнутых отношений с корпоративными клиентами. Помимо этого, ожидается дальнейшее качественное обновление инфраструктурного базиса, которое, в частности, предполагает уход с рынка неконкурентоспособных компаний» 1 .

Заметно усиливается влияние крупных игроков рынка. Так, в 2019 году компания «Ростелеком» приобрела DataLine, упрочив еще больше свою лидерскую позицию в данном сегменте. А годом ранее, осенью 2018, компания МТС выкупила один из крупнейших в России ЦОД «Авантаж», и продолжила увеличивать базу в 2019 году.

В целом тенденция наращивания мощностей и укрупнения будет прослеживаться и в ближайшем будущем. Компании осознают важность и перспективность коммерциализации облачных сервисов, услуг коллокации и стремятся успеть захватить большую долю рынка. По итогам 2019 года лидерами по количеству стойко-мест стали «Ростелеком-ЦОД», IXcellerate и DataPro (см Рис. 3).

Рис. 3. Рейтинг ключевых участников рынка коммерческих ЦОД в РФ по итогу 2019 года

Основными потребителями услуг дата-центров являются компании, в которых информация и скорость ее передачи становятся ключевыми факторами работоспособности, когда от IT-инфраструктуры зависит стабильность бизнеса в целом. Это банки и логистические центры, медицинские учреждения и госструктуры, оперирующие колоссальными массивами данных. Телекоммуникационные компании также являются одними из основных потребителей услуг. Дата-центры необходимы как интернет-провайдерам, операторам платного ТВ, ОТТ-сервисам, операторам голосовой связи, так и телеканалам с целью оптимизации IT-инфраструктуры, бесперебойности, управляемости и масштабируемости предоставляемых услуг.

Зачем нужен собственный ЦОД?

Большинство компаний задумываются о создании собственных ЦОДов, а многие – такие, как мы – уже построили. При этом побудительными мотивами к реализации проекта выступают такие факторы, как:

• Рост количества оборудования в связи с увеличением потребляемых ресурсов и отсутствие достаточных площадей для его размещения;
• Необходимость объединения имеющихся серверов в единый ресурс;
• Необходимость централизованного управления данными и другим оборудованием;
• Предупреждение непредвиденных ситуаций, которые могут вывести из строя дорогостоящее оборудование.

Наша компания 18 лет успешно функционирует на телеком-рынке. Основное направление деятельности – услуги телевидения. За это время и технологии, и потребности в услугах ТВ претерпели значительные изменения. Для наших целей мощностей обычных серверных уже стало недостаточно.

За эти 18 лет нашим абонентам вместо 6 каналов в сети стало доступно более 200 каналов, в том числе в таких форматах, как HD, UltraHD и 4K. Естественно, для этого требуется более функциональное оборудование с высоким уровнем отказоустойчивости.

Услуги, предоставляемые сегодня, требуют значительных вложений, как в информационные технологии, так и в профессиональное оборудование, которое сможет обеспечить надежность передачи сигнала и высокий уровень изображения, осуществить безопасное хранение большого объема данных. В связи с этим и было принято решение о создании собственного ЦОДа как для реализации своих нужд, так и для коммерческих целей. В данной статье мы делимся своим опытом создания.

Наличие собственного ЦОДа обеспечивает полный контроль над данными и сервисами, а также рабочей средой. Возведение и оснащение дата-центра – достаточно дорогостоящий проект, требующий тщательной предварительной подготовки и проработки всех нюансов. Поскольку ЦОД – это сложный инженерный объект, состоящий из строго интегрированных между собой систем, от их слаженной и эффективной работы зависит жизнеспособность дата-центра, а соответственно и всей бизнес-структуры, которую он обслуживает. На разработку концепции собственного ЦОДа, продумывание всех деталей и тонкостей, определение перспектив его дальнейшего использования у нашего генерального директора, Миронова Вячеслава Анатольевича, ушли сотни часов работы, так как только он мог видеть всю картину целиком (полный функционал системы для наших нужд и дальнейшее ее развитие). Результатом этого труда стало возведение нашего ЦОДа.

Рассмотрим основные этапа строительства с учетом личного опыта по созданию современного центра обработки данных для нужд и целей телекоммуникационного оператора.

Основные этапы:

1. Составление технического задания (ТЗ);
2. Проектирование и разработка технической документации;
3. Строительство;
4. Сдача в эксплуатацию.

Строительство ЦОДа: этап 1. Составление ТЗ

На данном этапе важно определить назначение дата-центра, цель его создания и какие функции должны выполняться в процессе его эксплуатации, в том числе и в будущем. Прорабатываются технические характеристики, архитектура ЦОДа, показатели качества и технико-экономические требования. В ТЗ также определяется порядок работ, срок их окончания, указываются ожидаемые результаты.

В разработке ТЗ для строительства дата-центра могут принимать участие:

• Технический директор;
• Руководитель службы эксплуатации;
• IT-инженер;
• Инженеры-проектировщики;
• Представители генерального подрядчика;
• Руководитель компании;
• Другие заинтересованные службы.

Согласованность и достаточная координация между структурами позволит избежать ошибок на этапе проектирования, задвоения или реализации ненужных функций, сократить и оптимизировать бюджет на реализацию проекта. Поэтому разработку технического задания необходимо проводить консолидировано, с перекрестной проверкой каждого раздела всеми заинтересованными службами, и имея единого технического специалиста, отвечающего за выпуск финального документа, – архитектора решения. Важно также до начала составления технического задания четко разграничить зоны компетенции всех подразделений и авторов документа, а также назначить ответственного исполнителя.

Одной из основных проблем на этапе разработки ТЗ выступает не только затратная часть на реализацию проекта, но и закладывание в проект перспективы на будущее. Отрасль IT чрезвычайно быстро развивается и претерпевает значительные изменения в достаточно короткие промежутки времени. При реализации проекта сегодня нужно всегда смотреть в будущее: новые запросы и требования клиентов, возможность дальнейшего масштабирования ЦОДа, увеличение нагрузки на оборудование, повышение энергоемкости и энергобезопасности, теплоотдачи, использование помещения в долгосрочной перспективе. Необходимо заложить резерв на дополнительное оснащение электроэнергией помещения, кондиционирование и пр. Оборудование должно быть рассчитано на долгий срок эксплуатации, с высоким уровнем запаса мощности, без быстрого морального износа.

Следующая проблема, с которой столкнется любая компания, строящая ЦОД с нуля – это, конечно же, высокая стоимость реализации проекта. В среднем оснащение и оборудование 1 кв. м современного дата-центра по оценке специалистов может обойтись более 250 тыс. руб. Поэтому необходимо заранее просчитывать коммерческую составляющую.

С одной стороны, необходимо просчитать экономию от сокращения издержек при использовании ресурсов других коммерческих ЦОДов. Это могут быть как разовые, так и ежемесячные издержки: подключение, аренда юнитов или стоек, организация перемычек и стыков, затраты на медиалогистику: доставка и обработка сигнала и пр.

Также необходимо помнить о возможном росте цен на услуги ЦОДов со временем. Приведем данные ориентировочной стоимости таких услуг в Москве от разных компаний (см. Табл. 1).

Таблица 1. Стоимость некоторых услуг коммерческих ЦОДов в Москве

Услуги коммерческого ЦОДа Стоимость услуг

Инсталляция (согласование проекта, ввод кабеля)	40 000 – 90 000 руб.
Аренда места под кабель	10 000 – 50 000 руб./мес.
Аренда юнита	2 000 – 5 000 руб./мес.
Аренда стойко-места	40 000 – 125 000 руб./мес.
Кроссировка (перемычки)	3 000 – 15 000 руб./мес.
Медиалогистика — энкодирование из SDI в IP — upscale/downscale — плейаут	15 000 – 30 000 руб./мес. 10 000 – 20 000 руб./мес. 40 000 – 100 000 руб./мес.
И другие услуги

В целом, ежемесячные затраты на услуги коммерческих ЦОДов могут достигать от нескольких сотен тысяч рублей до миллиона в зависимости от потребностей клиента.

С другой стороны, строительство собственного дата-центра – это возможность получения дополнительной прибыли от использования свободных мощностей вашего ЦОДа, коммерциализация услуг по работе с сигналами и потоками, осуществление кодирования, конвертации сигнала, мультиплексирования, размещение плейаутов и реализация перегона контента, услуги коллокации для партнеров. Таким образом, если сравнить все затраты на строительство собственного ЦОДа (порядка от 100-150 млн. руб. для небольшого дата-центра площадью около 100 кв. м) и экономию от его использования вместо услуг стороннего ЦОДа (до 10 млн руб. в год), а также возможность получения дополнительной выручки за счет арендаторов (если у вас 10 клиентов, то сумма может составить порядка 40 млн руб. в год), то срок окупаемости строительства будет около 3-х лет, а дальше уже пойдет получение прибыли.

Для более детальной проработки вопроса на данном этапе также используется сценарный метод анализа: производится просчет пессимистичного, реалистичного и оптимистичного сценариев развития, прорабатываются бизнес-планы и финансово-экономические показатели с долгосрочной перспективой по разному пути возможного развития. Это дает более полное понимание всех возможностей и угроз.

Для более точного понимания возможных затрат на строительство собственного ЦОДа можно также воспользоваться онлайн-сервисом » Калькулятор капитальных затрат » от компании Schneider Electric (см. Рис. 4). Выбирая необходимые параметры, начиная от проектной мощности ЦОДа, типа системы охлаждения и вентиляции, до уровня резервирования, программа посчитает примерные расходы на материалы, инженерное оборудование, проектирование и установку систем, черновую отделку помещений. Это даст более полное понимание в общей картине затрат, а также возможность сравнить разные типы систем и оборудования по стоимостным издержкам.

Рис. 4. Онлайн-калькулятор расчета затрат на строительство ЦОД от Schneider Electric

После проведения всех изучений, составляется комплексная таблица сравнений, взвешиваются все «за» и «против». Только после этого можно переходить к следующему этапу строительства дата-центра.

Во второй части статьи Александр Лебедев расскажет о проектировании и разработке технической документации, строительстве ЦОДа и введении его в эксплуатацию.

1 — iKS-Consalting, отчет «Российский рынок коммерческих дата-центров 2018-2023 гг.»

Источник: www.cableman.ru