ЦОД Facebook

Продукт

Показатель эффективности использования энергии PuE второго по счету в США ЦОД Facebook лежит в пределах 1,06-1,08. На его строительство ушло 16 месяцев и 1,2 млн часов рабочего времени около 2 тыс. специалистов.

Разработчики: Meta Platforms
Технологии: ЦОД

Компания Facebook построила первый собственный центр обработки данных в штате Орегон. Кроме проектирования ЦОД и последующей организации его администрирования, специалистам компании пришлось решать специфические проблемы, связанные с переходом на собственную инфраструктуру. (По материалам ОСП)

В Facebook рассказали о том, как проводилось предварительное тестирование всей программной инфраструктуры компании под нагрузкой. Для этого в Вирджинии, в противоположном от Орегона районе США, был арендован гигантский кластер действующих серверов.

Тот факт, что Facebook смогла позволить себе построить собственный ЦОД, красноречиво показывает, насколько крупной стала компания. Он также свидетельствует о том, насколько велика у быстрорастущих сайтов социальных сетей потребность в минимизации перебоев в работе.

Специалистам Facebook еще не приходилось тестировать свой сервис уведомления о новостях, поисковый механизм и баннерную сеть вне прежней инфраструктуры, состоящей из двух центров обработки данных. Как подчеркнул представитель компании Санджив Кумар, необходимо было позаботиться о том, чтобы весь программный стек Facebook мог безупречно работать и развиваться в новых условиях без прерывания повседневной деятельности пользователей социальной сети.

«Мы решили смоделировать третий центр обработки данных еще до того, как новые серверы в Прайнвилле были введены в эксплуатацию. Тестовому проекту мы дали название Triforce», — рассказывает Кумар.Рынок аутсорсинга информационной безопасности в России: особенности развития и перспективы. Обзор TAdviser 6.3 т Facebook арендовала в Вирджинии кластер серверов и сконфигурировала его в качестве своего «третьего региона». Специалисты компании разработали программный пакет под названием Kobold, который, по словам Кумара, позволил быстро создавать и расформировывать кластеры, проводить тестирование под нагрузкой и испытания мощности без влияния на пользовательский трафик и с аудиторским контролем каждого из этапов.

Благодаря Kobold специалисты компании смогли загрузить образы необходимого программного обеспечения на десятки тысяч серверов и ввести их в эксплуатацию меньше чем за месяц.

«До начала прохождения рабочего трафика Facebook через новый ЦОД прошло меньше двух месяцев, — отметил Кумар. — Обычно рабочий трафик в компаниях налаживается вручную большим количеством людей, и этот процесс занимает несколько недель. Нам же теперь для этого достаточно всего одного человека, который выполняет необходимые действия меньше чем за 10 минут».

19 апреля 2012 года Facebook сообщил об открытии второго ЦОД на территории США, объект разместился в городке Форест-Сити в штате Северная Каролина. Он уже находится под нагрузкой и его мощности задействованы для обслуживания реальных пользователей социальной сети. Еще один американский ЦОД Facebook находится в Принвиле, штат Орегон.

Новый ЦОД объединяет два здания. В эксплуатацию пока введено только одно из них, его строительство началось в ноябре 2010 года. Второе помещение будет задействовано до конца года, оно станет зеркальным повторением первого. За прошедшие 16 месяцев с момента начала строительства было потрачено свыше 1,2 млн часов рабочего времени около 2 тыс. специалистов.

В октябре 2011 года Facebook объявил о создании организации Open Compute Project (OCP), которая должна способствовать внедрению в ЦОД различного рода современных технологий. Особенно важным аспектом развернутой программы стало повышение энергоэффективности. Представители Facebook заявляют, что ЦОД в Форест-Сити имеет множество достоинств, и они по праву могут им гордиться. Три наиболее примечательны:

  • ЦОД в Форест-Сити и Принвиле считаются одними из самых энергоэффективных в мире. Показатель эффективности использования энергии в них PuE (Power utilization Effectiveness) лежит в пределах 1,06-1,08;

  • это первое крупномасштабное внедрение веб-серверов OCP второго поколения, которые в свою очередь одни из первых построены на базе новых процессоров Intel Sandy Bridge;

  • в ЦОД в Форест-Сити пройдет первые нагрузочные испытания разработанная OCP система воздушного охлаждения. Ее дизайн предполагает функционирование вычислительной инфраструктуры за пределами типичных для ЦОД значений параметров температуры и влажности.

Напомним, в конце прошлого года Facebook сообщал о намерении построить ЦОД за пределами США. Предположительно, серверная ферма будет расположена в городе Лулео на севере Швеции, в 100 километрах от Полярного круга. Такое расположение позволит охлаждать оборудование воздухом с улицы: средняя годовая температура в этом районе составляет около 2 градусов Цельсия.



Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Крок (27)
  IXcellerate (Икселерейт) (25)
  Linx (Связь ВСД) ранее Linxdatacenter (19)
  DataSpace (ДатаСпейс Партнерс) (15)
  Инфосистемы Джет (15)
  Другие (469)

  Талмер (Talmer) (2)
  Тегрус (Tegrus) ранее - Merlion Projects (2)
  Тринити (1)
  DataSpace (ДатаСпейс Партнерс) (1)
  Центр информационной безопасности Барнаул (1)
  Другие (15)

  IXcellerate (Икселерейт) (3)
  Селектел (Selectel) (2)
  Linx (Связь ВСД) ранее Linxdatacenter (2)
  Beeline Cloud (DataFort) (1)
  ТрансТелеКом (ТТК) (1)
  Другие (16)

  Equinix (3)
  ITglobal.com (ИТглобалком Рус) (1)
  Prof-IT Group (Проф-ИТ Групп) (1)
  SMART Technologies (1)
  T8 НТЦ (1)
  Другие (7)

  Селектел (Selectel) (1)
  IXcellerate (Икселерейт) (1)
  Ростелеком (1)
  Другие (0)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  IXcellerate (Икселерейт) (5, 32)
  Linx (Связь ВСД) ранее Linxdatacenter (3, 17)
  DataSpace (ДатаСпейс Партнерс) (2, 17)
  ТрастИнфо (2, 17)
  Inoventica (Коммуникации для инноваций) (1, 14)
  Другие (251, 116)

  Ростелеком (2, 2)
  Linx (Связь ВСД) ранее Linxdatacenter (2, 1)
  DataSpace (ДатаСпейс Партнерс) (1, 1)
  DataPro (ДатаПро) (1, 1)
  Другие (0, 0)

  IXcellerate (Икселерейт) (2, 3)
  Селектел (Selectel) (1, 2)
  Linx (Связь ВСД) ранее Linxdatacenter (1, 2)
  Центр взаимодействия компьютерных сетей Московский Internet Exchange (ЦВКС MSK-IX, МСК-IX) (1, 1)
  DataSpace (ДатаСпейс Партнерс) (1, 1)
  Другие (2, 2)

  Equinix (2, 3)
  IXcellerate (Икселерейт) (1, 1)
  ММТС-9 (М9) Московская междугородная телефонная станция N9 (1, 1)
  Селектел (Selectel) (1, 1)
  Казтелепорт (Kazteleport) (1, 1)
  Другие (2, 2)

  Селектел (Selectel) (1, 1)
  Ростелеком (1, 1)
  IXcellerate (Икселерейт) (1, 1)
  Другие (0, 0)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2021 год
2022 год
2023 год
Текущий год

  ЦОД IXcellerate Moscow One - 31
  ЦОД ТрастИнфо - 17
  ЦОД DataSpace - 17
  ЦОД Inoventica - 14
  ЦОД КРОК Компрессор - 12
  Другие 124

  ЦОД Ростелеком Москва - 1
  ЦОД Linx Datacenter Москва - 1
  ЦОД DataSpace - 1
  ЦОД Linx Datacenter СПб - 1
  ЦОД Ростелеком Новосибирск - 1
  Другие 1

  ЦОД Селектел - 2
  ЦОД IXcellerate Moscow One - 2
  ЦОД Linx Datacenter Москва - 2
  ЦОД IBS DataFort - 1
  ЦОД IXcellerate Moscow South - 1
  Другие 3

  ЦОД Equinix SP3 Сан-Паулу - 2
  ЦОД ОБИТ - 1
  ЦОД Kazteleport в Алматы - 1
  ЦОД Equinix DX-1 Дубай - 1
  ЦОД ММТС-9 (М9) - 1
  Другие 3

  ЦОД Селектел - 1
  ЦОД Ростелеком Новосибирск - 1
  ЦОД IXcellerate Moscow One - 1
  Другие 0