- Последние несколько лет были непростыми для экономики страны. Но отрасль ЦОДов продолжает устойчиво расти. Какие отраслевые тенденции вы бы выделили? Каким стал 2022 г. для GreenBushDC?
Последние социально-политические события также оказали влияние на отрасль. С одной стороны, негативное – усложнился доступ к современным технологиям. С другой – позитивное: часть клиентов начала переносить свои системы из-за рубежа в Россию, вырос спрос на услуги коммерческих ЦОДов. Но есть задержки с вводом новых площадок, что обусловлено увеличением сроков поставки технологического оборудования в Россию. Поэтому имевшийся в Москве дефицит стойко-мест сохраняется.
Если говорить про GreenBushDC, то для нас год был насыщен событиями. Мы доработали наши серверные залы, в частности, построили современную систему распределения электроэнергии на базе шинопроводов. Также построили несколько ВОЛС, улучшив связность ЦОДа. Были организованы две новые ВОЛС: до М9 и соединение с магистральной сетью МТС. Сейчас строится еще одна линия – до М10. Наконец, самое главное, провели сертификацию ЦОДа на соответствие Tier III Facility от Uptime Institute, убедились, что надежность объекта соответствует самым высоким мировым требованиям.
- Вы упомянули дефицит площадей в большинстве московских ЦОДов. А какова ситуация у вас?
У нас ситуация иная. Она обусловлена тем, что до завершения сертификации мы старались не привлекать в ЦОД «тяжелых» клиентов, дабы снизить риск их отключения в процессе сертификации. Сейчас у нас уникальное предложение на рынке: клиентам для размещения оборудования доступны четыре зала мощностью по 500 кВт. Суммарно 2 МВт. Таких объемов сейчас в Москве практически нет.
- А если перевести в стойки?
Если считать в стандартных пятикиловаттных стойках, то это 100 стоек на зал, если в десятикиловаттных – 50 стоек. Наша инженерная инфраструктура позволяет устанавливать и более мощные стойки, до 20 кВт. Но полагаю более корректным оценивать емкость ЦОДа, исходя из мощности. Как правило, этот ресурс заканчивается быстрее, чем площадь.
- Ваш ЦОД прошел долгий путь сертификации на соответствие Tier III. Чем были вызваны сложности?
Старт строительства ЦОДа GreenBushDC относится к началу 10-х годов. Сертификат на проект (Tier III Design) был получен в 2015 г. Но всем этим занимался предыдущий владелец. В 2021 г. ЦОД был куплен группой компаний МТС, и мы начали изучать состояние нового актива. В том же году провели испытания всех инженерных систем, проверили их готовность к сертификации. Весной 2022 г. совместно с экспертами Uptime Institute провели сертификацию. Да, нам потребовалось некоторое время, чтобы убедиться, что инфраструктура ЦОДа соответствуют высоким требованиям МТС и Uptime Institute и что мы сможем гарантировать необходимый клиентам SLA.
Считаю, это даже хорошо, что сертификацию провели мы сами, а не предыдущий владелец. Это позволило нам убедиться, что все работает должным образом, дало возможность провести тренировку команды эксплуатации при работе объекта в автономном режиме. Да и для клиентов новый сертификат более убедителен, чем если бы он был получен предыдущим собственником.
В свое время по рынку ходило множество слухов, связанных с GreenBushDC. Безусловно, мы о них тоже знали и перед покупкой внимательно проанализировали возможные проблемы. Большая часть слухов не подтвердилась, а некоторые действительно имевшие место проблемы мы успешно решили.
Например, говорили о плохой связности: дескать, у ЦОДа всего один линк. Судите сами. Сегодня на площадке присутствуют семь телеком-операторов, до основных точек обмена трафиком проложены шесть ВОЛС по географически разнесенным маршрутам. Дополнительные вновь построенные ВОЛС имеют емкость по 128 волокон, а значит, подключать клиентов мы можем целыми волокнами. Наконец, имеется высокоскоростное подключение к сети МТС с ее практически неограниченными ресурсами магистральной связности по всей России.
Еще говорили о низкой нагрузочной способности перекрытий. Мы перед покупкой провели детальное обследование, в том числе с бурением, и убедились, что перекрытия способны выдержать 1250 кг на кв. м, что соответствует требованиям Uptime Institute.
- Традиционно большинство коммерческих ЦОДов в Москве строились в пределах МКАД. ЦОД GreenBushDC находится за МКАД. В чем преимущества (и недостатки – если есть) такого расположения?
Большинство ЦОДов, расположенных в Москве, испытывают серьезные трудности с подключением к
электросетям. Так сложилось, что все ресурсы для подключения столь энергоемких объектов, как ЦОДы,
уже исчерпаны. Кроме того, возникают вопросы с нецелевым использованием земельных участков и т.п.
Наш ЦОД находится в Зеленограде, на территории ОЭЗ «Алабушево». Земля у нас в собственности, целевое
использование подтверждено, общая мощность присоединения к сетям – 18,6 МВт, и мы не испытываем тех
проблем, который могут возникнуть у объекта, находящегося в пределах МКАД.
Важный момент – транспортная доступность. Даже если ЦОД находится внутри третьего транспортного
кольца, то с учетом московского трафика добраться до него не всегда можно быстро. Зеленоград хорош
тем, что сюда идут и обычная дорога, и платная, поэтому в случае необходимости можно «долететь»
быстрее, чем внутри Москвы.
Сегодня очень актуально создание георазнесенных, катастрофоустойчивых систем. Если основная система
находится в Москве, то резервную правильно располагать на удалении, чтобы обеспечить независимость в
плане как энергетики, так и связности. Наша площадка в Зеленограде видится едва ли не идеальным
местом для размещения такого резерва.
Отмечу и плюсы нахождения в особой экономической зоне. Статус резидента ОЭЗ дает нам существенные
экономические преимущества: нулевые таможенные пошлины и нулевой НДС на ввозимое на территорию
компании импортное оборудование, пониженную ставку на прибыль, льготы по налогам на фонд оплаты
труда, налогу на имущество. Кроме того, мы имеем дополнительную физическую защиту: первый периметр
безопасности – самой ОЭЗ, второй – собственно ЦОДа.
Пожалуй, единственный минус расположения ЦОДа – большое расстояние до точек обмена трафиком. До М9 – 74 км, до магистральной сети МТС – 67 км. Это расстояние важно с точки зрения задержки сигнала при выполнении процедур синхронной репликации. Но для большинства систем такое удаление вполне приемлемо.
- Насколько уход из России почти всех основных зарубежных поставщиков инженерного оборудования затруднил эксплуатацию ЦОДа GreenBushDC? Как компания решала возникшие проблемы?
Тема острая. Да, сложности с поставками возникли у всех. Мы справляемся с этими вызовами частично
импортозамещением, частично – зарубежными аналогами. Для эксплуатируемых систем (ДИБП, ДГУ, система
охлаждения и пр.) заключены сервисные контракты, и наши партнеры выполняют все свои обязательства.
Они нашли способы поставки запчастей и расходных материалов. Поэтому мы не видим существенных рисков
с точки зрения эксплуатации имеющихся систем.
На текущий момент в коммерческой эксплуатации находится один модуль (А2) общей мощностью 6 МВт (ИТ-мощность – 3 МВт). В ближайших планах – строительство еще двух модулей (А1 и А3). Для них мы переделали проекты, которые были разработаны еще предыдущим собственником. Мы ушли от решений тех вендоров, которые, к сожалению, не могут исполнять свои сервисные обязательства, сделали проекты более вендоронезависимыми. Потребовалось пересмотреть и подход к выбору технологий. В частности, планируем использовать схемы электропитания на базе статических ИБП и литий-ионных АКБ.
Мы ориентируется в основном на российские решения. Планируем установить отечественные системы охлаждения. ИБП также рассматриваем российские. Правда, АКБ, видимо, придется брать китайские – литий-ионные аккумуляторы у нас пока не выпускают.
Российские решения не обеспечивают столь же высокую энергоэффективность, как западные. На их базе сложно построить ЦОД с коэффициентом энергоэффективности PUE, равным, скажем, 1,3. Но с показателем 1,5 вполне можно, а это и есть среднемировой уровень.
-
Вы ориентируетесь на услуги colocation. Какие тенденции вы видите в области предоставления таких услуг?
Из тенденций отмечу рост мощности, потребляемой стойкой. Если пять лет назад стандартом было 5 кВт на стойку, то сейчас мы видим решения на 10, 12, 14 и даже 20 кВт. Вместе с ростом энерговооруженности стойки растут и требования к отводу тепла от нее. Также мы фиксируем тренд к повышению температуры в машзалах, что положительно сказывается на экономике ЦОДов.
Отдельно стоит упомянуть появление у клиентов интереса к стойкам OCP. Сейчас мы как раз тестируем такое решение, проверяем его в разных режимах, в том числе при повышенной температуре. Преимущества OCP – более плотная компоновка ИТ-оборудования, возможность дальнейшего повышения средней температуры в зале, а значит, снижение затрат на охлаждение.
-
Какие преимущества дает ЦОДу нахождение в составе группы компаний МТС?
Во-первых, отмечу доступ к клиентской базе МТС – мы можем предлагать свои услуги более широкому кругу лояльных заказчиков – и к системе закупок МТС. Увеличение масштаба закупок дает существенную экономию при приобретении оборудования.
Во-вторых, доступ ко всей магистральной сети МТС. А это десятки тысяч километров оптики и точки обмена трафиком по всей России. Благодаря надежности и развитости коммуникаций мы можем предоставлять нашим клиентам отличные по качеству и составу услуги связи.
В-третьих, мы пользуемся всеми наработками МТС в области строительства ЦОДов. Компания активно развивает направление модульных ЦОДов, edge-ЦОДов, в том числе в регионах. В них обкатываются новые технологические решения. И эти наработки будут использованы в новых модулях GreenBushDC. В частности, это переход от больших чиллеров (которые, к сожалению, сейчас малодоступны) к чиллерам средней мощности, что позволяет получить более гибкую и эффективную систему охлаждения, например, меняя количество активных чиллеров в зависимости от степени заполнения ЦОДа.
-
Ну и традиционный вопрос о планах развития.
Как я уже говорил, в планах на 2023–2024 гг. – строительство модулей А1 и А3. После ввода их в эксплуатацию мощность ИТ-нагрузки нашего ЦОДа достигнет 9 МВт. Хотя для новых модулей выбраны другие технические решения, они будут не хуже, а скорее, лучше модуля А2. ЦОД станет еще более привлекательным для клиентов.
Как ЦОД, входящий в группу компаний МТС, мы планируем развернуть кластер MTC Cloud для предоставления нашим клиентам комбинированных услуг: вместе с colocation они смогут на той же площадке оперативно получить и облачные ресурсы. Это особенно удобно, когда требуется быстрое увеличение вычислительной мощности или ресурсов хранения. Облачный кластер собираемся запустить в эксплуатацию уже в следующем квартале.
Оригинал статьи
