Data центр: Рассказываем, что такое дата-центры и как они устроены?

04.05.1985 alexxlab

Содержание

Рассказываем, что такое дата-центры и как они устроены?

Многие крупные современные компании, которые оперируют терабайтами информации, зачастую всю заботу о своих серверах доверяют специальным дата-центрам. Давайте разберёмся вместе, что это за волшебное место, как устроен центр обработки данных (ЦОД) и в чем суть его работы.

Что такое центр обработки данных?

ЦОД или дата-центр — здание (или комплекс зданий), предназначенное для размещения серверного и сетевого оборудования с последующим подключением клиентов к интернету.

Чтобы расположенное в нём «железо» работало 24/7, в дата-центрах созданы максимально благоприятные условия — о них мы поговорим немного позже ;).

ЦОДы в определённой форме существуют ещё с середины прошлого века. Тогда в дата-центре мог размещаться всего один компьютер (вспомните размеры первых вычислительных машин!), а компания не могла обратиться к его владельцу и просто так арендовать ресурсы этого компьютера.

В посте «Дата-центры в фактах и цифрах» мы уже рассказывали, что «отцом» современных ЦОДов считают компьютер ЭНИАК, который использовался в военное время для расчётов полёта бомб, хранения боевых кодов для ядерного оружия и составления прогнозов погоды. Но, конечно же, с течением времени размер оборудования уменьшался, а вот спрос на такие мощности наоборот рос.

И зачем вообще нужен дата-центр? Кто его использует?

Самая главная функция ЦОД — обеспечить стабильную и безотказную работу размещённого в нём оборудование. Кроме постоянного доступа к сайтам любой дата-центр предоставляет защищённые каналы связи, по которым происходит обмен данными.

Арендуя полноценный выделенный сервер в ЦОДе, вы получаете полностью закреплённую за вами физическую машину. Обычно это не самое дешёвое удовольствие, из-за чего оборудование в дата-центрах используют в основном для крупных и сложных проектов. К примеру хостинг-провайдеры или банков, которые работают с мобильными сервисами, и онлайн-приложений с клиентскими службами.

Для клиентов ЦОД — финансовая выгода, потому что им не нужно покупать отдельное помещение, дорогостоящее оборудование и нанимать персонал. Достаточно просто арендовать помещение или серверное оборудование в уже существующем центре обработки данных.

Хорошо, а какие бывают ЦОДы?

Самая основная категория разделения дата-центров — по уровню надёжности и безопасности центры обработки данных. Здесь выделяются четыре категории: Tier 1, Tier 2, Tier 3 и Tier 4. Что это такое?

Тier — это показатель надёжности, разработанный сертификационной организацией Uptime Institute, который присваивается ЦОДам.

Давайте рассмотрим каждую категорию подробнее.

Tier

Это базовый уровень надёжности с отказоустойчивостью 99,67%. В случае ошибок и отказов работа ЦОД прерывается. В требованиях уровня Tier 1 не предусмотрено обязательное использование источников бесперебойного питания и возможность резервирования данных. Сам стандарт достаточно сильно устарел.

Tier II

Так же, как и в 1 уровне, работа ЦОД может быть прервана из-за ошибок и отказов. Однако этот уровень предусматривает улучшенные условия размещения оборудования: резервные источники электроснабжения, фальшполы, избыточные системные ресурсы, улучшенные системы охлаждения. Отказоустойчивость для этого стандарта — 99,75 %.

Tier

III

Основное преимущество и отличие от первых двух стандартов в том, что ЦОД этого уровня не нужно останавливать для ремонта и профилактических работ. Это очень удобно для организаций, которые ведут круглосуточное взаимодействие со своими клиентами. Для соответствия Для соответствия Tier 3 ЦОД должен иметь полное резервирование всех систем жизнеобеспечения. Отказоустойчивость этого уровня — 99,98%. REG.RU в том числе, предлагает аренду выделенных сервероы или размещение в дата-центре Tier III. .

Tier IV

На сегодняшний день это наивысший уровень надёжности ЦОД с отказоустойчивостью 99,99%. В требования этого стандарта входит двойное резервирование и полное дублирование всей системы. Этот уровень надёжности ЦОД рекомендован военным и финансовым организациям особой важности.

Ок, а как устроен дата-центр?

Основа любого дата-центра — инженерные системы — сложное профессиональное оборудование, которое недоступно для покупки в локальную серверную. Если представить, что ЦОД — живой организм, то можно выделить пять главных систем:

Электроснабжение. Самый главный источник жизни дата-центра, от которого зависит стабильность и бесперебойность работы ЦОДа. Для того, чтобы ваши сайты работали 24/7 здание подключают к электросети по нескольким независимым «вводам», устанавливают системы бесперебойного питания, а также подключают дополнительный дизельный генератор на случай полного отключения.
Кондиционирование. Логично, что машина, которая работает 24 часа в сутки, 7 дней в неделю и 365 дней в году может перегреваться. Поэтому помещение машинного зала должно очень хорошо охлаждаться — для этого используют профессиональные прецизионные кондиционеры.
Безопасность. Также один из важных пунктов. Задача каждого ЦОДа не только разместить оборудование, но и обеспечить как безопасность данных, так и их конфиденциальность. Сюда можно отнести систему контроля доступа, видеонаблюдение, пожарную сигнализацию, систему экстренного пожаротушения и другие.
Передача данных. Стабильный и бесперебойный процесс передачи данных важен для любого дата-центра. Для обеспечения бесперебойной передачи данных используют как выделенные каналы, так и общедоступные интернет-сети с широкой полосой пропускания.
Диспетчеризация. За всеми системами ведётся круглосуточное наблюдение, а устранение обнаруженных проблем происходит по заранее разработанным алгоритмам. Это исключает ошибки и позволяет решать проблемы максимально быстро.

Если вам интересно посмотреть, как устроена работа центра изнутри, можете посмотреть видео-экскурсию в дата-центр REG. RU:

А в чём плюсы размещения оборудования или заказа сервера в ЦОДе?

Размещение сервера в дата-центре обеспечивает компании несколько существенных преимуществ:

меньший уровень затрат по сравнению с обустройством собственной профессиональной серверной, а также отсутствие необходимости перемещения инженерной инфраструктуры при переезде в новый офис
постоянный доступ к данным и минимальный уровень рисков отключения электричества, проблем с интернет-соединением и сбоев в работе оборудования
надёжность, производительность и постоянное совершенствование IT-инфраструктуры дата-центра, которая содержит в себе большое число разнообразных технических элементов — маршрутизаторов, коммутаторов, устройств безопасности, систем хранения данных, серверов, контроллеров доставки приложений, систем вентиляции и охлаждения, кабелей для подключения к внешним сетевым операторам.

Также в дата-центрах круглосуточно работают специалисты, которые могут выполнить все необходимые операции с серверами. В качестве альтернативы возможно использование удалённого управления.

Немного о необычных дата-центрах

Дата-центры сооружаются не только в городах, но и в местах с особыми природными и геологическими условиями, благодаря которым безопасность ЦОД достигает надёжного уровня. Если бы вы увидели фотографию такого здания, вы бы наверняка не догадались, что это дата-центр.

Например, один из ЦОД Microsoft расположен под водой. Главная фишка дата-центра в том, что можно использовать гидрокинетическую энергию для питания и естественного охлаждения.

Проект Natick

Или другой пример необычных центров хранения — бывший ядерный бункер Cyberbunker в Нидерландах. В 1998 он превратился в самый укреплённый дата-центр, который специализируется на хранении данных и веб-хостинге.

Cyberbunker

Если вам интересно узнать больше о необычных ЦОДах, не забудьте посмотреть нашу подборку самых впечатляющих местах, где живёт интернет.

⌘⌘⌘

Не забывайте, что в REG.RU вы сможете подобрать физический сервер для проектов любой сложности. Творите и создавайте будущее вместе с нами!

Заказать сервер

Датацентр | это… Что такое Датацентр?

Толкование

Датацентр

Серверная стойка фонда Wikimedia

Дата-центр (от англ. data center) — специализированное здание (площадка) для размещения серверного и коммуникационного оборудования и подключения к каналам сети Интернет. Дата-центры подключены к различным узлам связи (каналам). Именно качество и ширина каналов влияют на уровень предоставляемых услуг, так как основным критерием оценки качества работы любого дата-центра является время доступности сервера (англ. центр хранения и обработки данных (ЦХОД) либо центр обработки данных (ЦОД).

Содержание

1 Типы дата-центров
2 Структура и описание дата-центра
3 Услуги дата-центров
4 Сетевая инфраструктура
5 Примечания
6 Ссылки
7 См. также

Типы дата-центров

Все дата-центры можно условно разделить на несколько типов:

Крупные дата-центры имеют свое здание, специально сконструированное для обеспечения наилучших условий размещения. Обычно они имеют свои каналы связи, к которым подключают серверы.
Средние дата-центры обычно арендуют площадку определенного размера и каналы определенной ширины (ширина канала измеряется его пропускной способностью в Mbps).
Мелкие дата-центры размещаются в неприспособленных помещениях. В общих случаях используется оборудование плохого качества, а также предоставляется самый минимум услуг.

Структура и описание дата-центра

Типичный дата-центр состоит из информационной инфраструктуры, включающей в себя серверное оборудование и обеспечивающей основные функции дата-центра — обработку и хранение информации; телекоммуникационной инфраструктуры обеспечивающей взаимосвязь элементов датацентра, а также передачу данных между датацентром и пользователями; инженерной инфраструктуры обеспечивающей нормальное функционирование основных систем датацентра. Инженерная инфраструктура включает в себя прецизионное кондиционирование для поддержание температуры и уровня влажности в заданных параметрах; бесперебойное и гарантированное электроснабжение обеспечивает автономную работу дата-центра в случаях отключения центральных источников электроэнергии, а также повышают качество электропитания; охранно-пожарная сигнализация и система газового пожаротушения; системы управления и контроля доступом.

Некоторые дата-центры предлагают клиентам дополнительные услуги по использованию оборудования по автоматическому уходу от различных видов атак. Команды квалифицированных специалистов круглосуточно производят мониторинг всех серверов. Необходимо отметить, что услуги датацентров сильно отличаются в цене и количестве услуг. Для обеспечения сохранности данных используются резервные системы копирования. Для предотвращения кражи данных, в дата-центрах используются различные системы ограничения физического доступа, системы видеонаблюдения. В корпоративных (ведомственных) дата-центрах обычно сосредоточено большинство серверов соответствующей организации.

Оборудование крепится в специализированных стойках. Как правило, в дата-центр принимают для размещения лишь оборудование в стоечном исполнении, то есть, в корпусах стандартных размеров, приспособленных для крепления в стойку. Компьютеры в корпусах настольного исполнения не удобны для дата-центров и размещаются в них редко. Датацентр представляет собой комнату, этаж или целое здание, обычно расположенные в пределах или в непосредственной близости от узла связи или точки присутствия какого-либо одного или нескольких операторов. Системы электропитания, вентиляции и пожаротушения дата-центра отличаются повышенной надёжностью и резервированием. Разумеется, должна быть предусмотрена физическая защита и особый режим допуска в технологические помещения. В ряде стран имеются специальные стандарты на оборудование помещений датацентров. В России пока такого стандарта нет, дата-центры оснащаются согласно требованиям для сооружений связи. Существует американский (ANSI) стандарт TIA-942^[1], несущий в себе рекомендации по созданию дата-центров, и делящий дата-центры на типы по степени надежности.

Фактически, TIA-942 воспринимается во всем мире как единый стандарт для дата-центров.

Услуги дата-центров

Виртуальный хостинг. Предоставление лимитированной части дискового места, процессорного времени, оперативной памяти клиенту для использования. Крупные датацентры обычно не предоставляют подобную массовую услугу из-за необходимости обеспечения техническо-консультационной поддержки. При использовании виртуального хостинга один физический сервер делится между множеством клиентов (сотни или тысячи). Каждому клиенту не гарантируется какое-либо выделение ресурса, но строго лимитируется максимальное. Клиенты не могут в большей степени конфигурировать сервер. Виртуальный хостинг имеет два основных преимущества: малую стоимость и легкость управления сайтами. По этим причинам виртуальный хостинг в основном используют частные лица.

VDS)-хостинг — Предоставление гарантированной и лимитированной части сервера (части всех ресурсов). Важная особенность данного вида хостинга — разделение сервера на несколько виртуальных независимых серверов реализуемых программным способом.
хостинг — Аренда сервера (Dedicated). Дата-центр предоставляет клиенту в аренду сервер в различной конфигурации. Крупные дата-центры в основном специализируются именно на подобных типах услуг. В зависимости от страны расположения дата-центра имеются различные ограничения на трафик.

Размещение сервера (Colocation). Размещение сервера клиента на площадке дата-центра за определенную плату. Стоимость зависит от энергопотребления и тепловыделения размещаемого оборудования, пропускной способности подключаемого к оборудованию канала передачи данных, а также размера и веса стойки.
Выделенная зона (Dedicated area). В некоторых случаях владельцы дата-центра выделяют часть технологических площадей для специальных клиентов, как правило, финансовых компаний, имеющих строгие внутренние нормы безопасности. В этом случае дата-центр предоставляет некую выделенную зону, обеспеченную каналами связи, электроснабжением, холодоснабжением и системами безопасности, а клиент сам создает свой ЦОД внутри этого пространства.

Сетевая инфраструктура

Сегодня коммуникации дата центра чаще всего базируются на сетях с использованием IP протокола. Дата центр содержит ряд роутеров и свитчей, которые управляют трафиком между серверами и внешним миром. Для надежности дата-центр иногда подключен к интернету с помощью множества разных внешних каналов от разных ISP.

Некоторые серверы в дата-центре служат для работы базовых интернет и интранет служб, которые используются внутри организации: почтовые сервера, прокси, DNS и т. п.

Сетевой уровень безопасности поддерживают: межсетевые экраны, IDS-системы и т. д. Также используются системы мониторинга трафика и некоторых приложений.

Примечания

↑ http://www.datadome.ru/images/3.pdf

Ссылки

Описание и фотографии одного из дата-центров компании Яндекс
Экскурсия по датацентру SafeData (Москва)
Правила оказания телематических услуг связи
Project Blackbox(рус.), SUN. com(англ.)
Статья — Телекоммуникационные шкафы в ЦОД и в СКС
Подборка статей по тематике коммерческих дата-центров
Коллекция полезных нормативов по строительству и эксплуатации дата-центров
Аналитическая статья — российские системные интеграторы, строящие Центры Обработки Данных (ЦОД)
Лист дата-центров Москвы и Санкт-Петербурга.
Лист российских топ-игроков бизнеса коммерческих дата-центров

См. также

Серверная комната

Wikimedia Foundation. 2010.

Поможем решить контрольную работу

Гродненский район Гродненской области
Зельвенский район Гродненской области

Полезное

ЦОД Центр Обработки Данных — цены на услуги дата центра в Москве

Облако VMware (RCloud by 3data)
Распределенное облако для катастрофоустойчивых решений
Подробнее
Облако OpenStack (RCloud by 3data)
Публичные облачные сервисы OpenStack для корпоративных заказчиков
Подробнее
Размещение оборудования (colocation)
Крупнейшая сеть дата-центров с премиальным уровнем сервиса
Подробнее
Миграция в облака
Перенос систем любой сложности на виртуальные серверы RCloud by 3data нашими силами
Подробнее
Бесплатный круглосуточный переезд
Перемещение вашего оборудования в дата-центры 3data нашими силами
Подробнее

3data HyperScale – новый уровень дистрибуции услуг ЦОД
23. 09.2022
Модернизировали машинный зал в дата-центре «БА81»
30.08.2022
Укрепили позиции в рейтинге крупнейших поставщиков услуг ЦОД в России по версии CNews Analytics
20.07.2022
3data и другие ведущие специалисты отрасли ЦОД делятся своими знаниями на обучающих курсах
27.06.2022
В 2023 году будет запущен первый коммерческий дата-центр в Краснодаре по франшизе 3data
31.05.2022
На конференции «ЦОД. Регион» объявили о подписании договора на строительство нового дата-центра в Иркутске по модели франшизы
28. 04.2022
Повышаем темпы строительства дата-центров и сохраняем высокое качество предоставления сервисов
24.03.2022
Строительство дата-центра во Владивостоке идет по графику
17.02.2022
В дата-центрах 3data уделяется особое внимание системам пожаротушения
28.01.2022
3data в 2021 году
27.12.2021
3data и GreenMDC сделали виртуальный тур по модульному дата-центру
30.11.2021
COVID-19: в период с 28 октября по 7 ноября дата-центры 3data работают в штатном режиме
28. 10.2021
Очередной дата-центр 3data заполнился клиентами
26.10.2021
Приняли участие в конференции и выставке «ЦОД. Москва»
14.09.2021
3data, T1 Cloud и Key Point подписали меморандум в ходе ВЭФ–2021 в целях цифровизации ДФО
02.09.2021
Установили третий дата-центр 3data в Московской области
25.08.2021
Вячеслав Фетисов посетил дата-центр 3data в Сынково
13.07.2021
Провели пикник 3data на территории флагманского дата-центра
07. 06.2021
Посетили Международный саммит Ассоциации участников отрасли ЦОД
31.05.2021
3data – партнер Универсиады «Ломоносов-2021» по Инноватике
20.04.2021
Все новости

Пресса о нас

Все публикации

02.09.2022, Коммерсантъ

Петербургская УК «Ареопаг» открывает в Москве цифровой коворкинг

На территории БЦ находится дата-центр 3data, поэтому арендаторам предоставляется возможность надежного хранения данных и широкий выбор облачных услуг.

11.08.2022, ИКС-Медиа

Квартиры для серверов

ИТ-директор 3data Валентин Соколово поделился своим мнением и рассказал, какие проблемы были обнаружены при тестировании стоек российского производства.

15.07.2022, CNews

Нехватка оборудования затормозит, но не остановит запуск новых ЦОД

Генеральный директор сети дата-центров 3data Илья Хала о современных тенденциях в техническом оборудовании для дата-центров.

23.06.2022, ComNews

Дата-центр во Владивостоке получил сертификат соответствия Tier III

Строящийся по модели франшизы 3data дата-центр во Владивостоке получил сертификат соответствия проектной документации стандарту Uptime Institute Tier Standard Operational Sustainability уровня Tier III.

02.06.2022, CNews

Alias Group и 3data запустят дата-центр

Инвестиционная компания Alias Group в партнерстве с сетью премиальных дата-центров 3data запустят первый в Краснодарском крае коммерческий дата-центр по модели франшизы.

Видео

Все видео

3data 2022. ЭКОСИСТЕМА УСЛУГ ДАТА-ЦЕНТРОВ
14.09.2022
ПОКАЗ ДАТА-ЦЕНТРА В ЭКСПРЕСС РЕЖИМЕ. Экскурсия по ЦОДу 3data
26.08.2022
АЙТИШНИКИ умеют еще и БЕГАТЬ. 3data на RunIT 2022
04.08.2022
Об ОБЛАКАХ и ДАТА-ЦЕНТРАХ на радио Premium. RCloud by 3data в эфире
21.06.2022
Работа ЦЕНТРА МОНИТОРИНГА в дата-центре. Ситуационный центр 3data
30.05.2022
Сделано в России? Готов ли российский бизнес к импортозамещению / Rasstriga.doc
25.04.2022
Илья Хала о 3data в передаче «proЦОД»
12.04.2022
Какая СИТУАЦИЯ с ОБЛАЧНЫМИ СЕРВИСАМИ прямо сейчас. Опыт RCloud by 3data
30.03.2022
ИТ ТУСОВКА DC Club 2022. Взгляд 3data
22.02.2022
НОВОГОДНИЕ дежурства В ДАТА-ЦЕНТРЕ. Работа 24/7 в 3data
29.12.2021
ВИДЕОПОКАЗ ДАТА-ЦЕНТРА. Экскурсия по ЦОДу 3data
19.11.2021
3data — СЕТЬ ДАТА-ЦЕНТРОВ шаговой доступности. 2021
10.09.2021
Стрим 3data c конференции «ЦОД. Москва»
09.09.2021
РАЗГРУЗКА и УСТАНОВКА модульного ДАТА-ЦЕНТРА. Новый ЦОД 3data
25.08.2021
ПРОИЗВОДИМ НОВЫЙ ДАТА-ЦЕНТР для Московской области. Третий модульный ЦОД 3data
30. 07.2021
Очень ПРОСТО об ОБЛАКАХ. Облачная платформа RCloud by 3data
25.06.2021
ПИКНИК в ДАТА-ЦЕНТРЕ. Открытие летнего сезона в 3data
09.06.2021
ДАТА-ЦЕНТРЫ В ШАГОВОЙ ДОСТУПНОСТИ. ИТ-инфраструктура рядом с вами
30.04.2021
В МИРЕ ДАТА-ЦЕНТРА. Фауна 3data
01.04.2021
ДЕВУШКА В IT (айти). Работа в дата-центре
26.02.2021

Блоги

Все записи

Облачные сервисы как основной инструмент цифровой трансформации экономики

14.11.2019

Данные – главный ресурс нового уклада Цифровой экономики. А главными инструментами «переработки и использования» данных являются цифровые сервисы.

Подробнее

Почему 3data называет свои дата-центры клубными?

28.02.2017

Нас часто спрашивают, почему мы называем свои дата-центры клубными? В чем заключается премиальный уровень сервиса и самое внимательное отношение к клиентам?

Подробнее

Data-центр — вопросы надежности | ITSec.Ru

В рубрику «Центры обработки данных (ЦОД)» | К списку рубрик | К списку авторов | К списку публикаций

Насколько безопасным может быть хранение данных в ЦОД и как выбрать оптимальный для бизнеса дата-центр, редакция журнала «Information Security/Информационная безопасность» выяснила у экспертов в области хранения данных, задав им следующие вопросы:

1.	На что в первую очередь необходимо обратить внимание при выборе надежного дата-центра?
2.	Кто несет ответственность за информацию в ЦОД?
3.	Какие интернет-каналы наиболее безопасны для дата-центра?
4.	Каковы основные типы рисков при использовании внешнего дата-центра и можно ли их минимизировать?

Валентин Зеленов

технический руководитель направления, «Открытые Технологии» (ответ на 1-й и 4-й вопросы)

Алексей Филатенков

начальник отдела ИБ, «Открытые Технологии» (ответ на 2-й и 3-й вопросы)

1. «Первая очередь» не может быть единичным понятием. Здесь нужно смотреть на целый комплекс вопросов, которые непосредственно влияют на совокупную надежность дата-центра. Безусловно, нужно обращать внимание на выбор территории. Здание дата-центра должно иметь надежный конструктив, с правильной физической организацией пространства. Очень важным является наличие резервированной инженерной инфраструктуры и комплекса систем безопасности. Обязательно проверяйте, как происходит эксплуатация и обслуживание дата-центра. Какие имеются регламенты и как они выполняются. Какие имеются алгоритмы отработки обслуживающим персоналом штатных и внештатных ситуаций и как часто проводятся тренировки.

2. Когда речь идет об ответственности хранения (целостность, доступность, защита от несанкционированного доступа), то здесь целиком и полностью ответственность лежит на операторе услуг, который не должен даже знать, что храниться на его IT-площадке. Если речь идет об ответственности за размещенный контент, то это зона ответственности владельца данных. Естественно, что правоохранительным органам гораздо легче найти и привлечь к ответственности не владельца контента (так как это вообще может быть виртуальный объект), а владельца инфраструктуры — оператора ЦОД. Это, на мой взгляд, тормозит развитие IT, в том числе и облаков.

3. Тут необходимо разделять каналы, по которым осуществляется обращение к сервисам, вынесенным на внешнюю площадку, и каналы управления этими сервисами. В первом случае их безопасность — это прежде всего их доступность. Тогда как во втором случае на первом месте стоит конфиденциальность. И методы решения этих задач разные. В первом случае может применяться резервирование канала доступа, во втором — его шифрование.

4. Рассмотрим, какие бывают типы рисков и как каждый из них можно минимизировать:

Недостаточный уровень обеспечения ИБ в дата-центре. Для минимизации данного риска нужно тщательно подходить к выбору дата-центра, проследить, чтобы в нем выполнялись все требования по обеспечению безопасности.
Получение персоналом дата-центра несанкционированного доступа к информации клиентов. Чтобы избежать этого, конфиденциальная информация должна быть зашифрована. Кроме того, необходимо мониторить и протоколировать действия персонала дата-центра. Для этого необходимо организовать дополнительные контуры физической безопасности для своего оборудования с удаленным мониторингом и контролем этого контура.
Отсутствие доступа к дата-центру. При переносе данных или сервисов на внешнюю площадку надежные каналы связи играют важнейшую роль. Поэтому необходимо удостовериться, что в дата-центре обеспечено надежное резервирование канала передачи данных.
Невозможность прямого физического контроля за инженерной инфраструктурой дата-центра. Нужно иметь возможность удаленного мониторинга критически важных инженерных систем дата-центра (систем электроснабжения и кондиционирования), а также параметров микроклимата.
Транспортная доступность. Территориальная удаленность создает дополнительные трудности с добавлением, ремонтом или заменой оборудования. Необходимо заранее продумывать количество поездок на площадку и степень зависимости от них. Также нужно сразу спланировать не менее двух альтернативных независимых друг от друга маршрутов. Как с использованием общественного транспорта, так и без него.

Олег Вейнер

начальник лаборатории доверенной среды ОАО «ЭЛВИС-ПЛЮС»

1. Нужно определиться, какой уровень надежности требуется и для чего: какие информационные системы будут разворачиваться во внешнем дата-центре? Каково приемлемое время простоя? Каков требуемый коэффициент отказоустойчивости?

Ориентиром для выбора ЦОД могут служить критерии стандарта TIA-942. Важно обратить внимание на планировку, потребляемую мощность, системы кондиционирования и пожаротушения. На клиентскую базу. Безусловно, на предлагаемые SLA, ИБ и каналы связи.

И все же на первое место я бы поставил вопросы личного доверия. Компетентность руководства и персонала, уровень знаний передовых технологий доверенных вычислений, отношение к клиентам и в конце концов комфортность вашего общения с сотрудниками дата-центра — то, что нужно принять во внимание уже во время первого знакомства с ЦОД.

2. Виды ответственности могут различаться. Это может быть ответственность перед владельцем бизнеса, административная или даже уголовная.

Уголовная ответственность может наступить за неправомерный доступ к компьютерной информации, за нарушение неприкосновенности частной жизни и мошенничество. При этом должны быть явно определены пострадавшие. Однако определение виновного лица будет зависеть от доказательной базы и возможности установить причинно-следственную связь.

Если мы говорим об ответственности перед владельцами бизнеса, то ее форма и границы должны быть указаны в SLA. Но и здесь доказательная база будет иметь решающее значение. Поэтому в том же соглашении должны быть четко прописаны критерии и механизмы объективной оценки уровня обслуживания, определены штрафные санкции.

3. Надежность магистрального оператора связи, его SLA с дата-центром, пропускная способность каналов до точек обмена трафиком (региональных и международных), а также число прямых пиринговых стыков сети дата-центра с провайдерами оказывают непосредственное влияние на параметры услуг, которые реально может гарантировать SLA с ЦОД.

Если говорить о конфиденциальности информации, передаваемой по интернет-каналам, то обычно дата-центры предлагают услуги защиты трафика с помощью VPN и SSL.

4. Что касается проблемы минимизации рисков, то необходимо решение триединой задачи: определение уровня доверия к руководству и персоналу внешнего ЦОД, использование технологий, построенных на доверенных стандартах Trusted Computing, и организация юридически корректных взаимоотношений с поставщиком услуг дата-центра. Последняя проблема стоит достаточно остро, ведь известны случаи несоблюдения SLA со стороны провайдера.

Николай Остаполец

директор департамента комплексных решений компании «Информзащита»

1. При выборе ЦОД можно руководствоваться двумя разными подходами. Первый -формальные требования, выдвигаемые международным регулятором Uptime Institute. Последний выполняет сертификацию ЦОД по четырем уровням, которые отличаются по допустимому времени простоя дата-центра. Этот подход особенно эффективен при выборе зарубежного ЦОД.

К сожалению, в России пока не так много дата-центров, прошедших обязательную сертификацию по международным рекомендациям. Поэтому отечественные реалии заставляют обращаться ко второму подходу — выбору по косвенным признакам. Например, по наличию нескольких площадок для дублирования инфраструктуры или по отзывам о работе компании-владельца ЦОД на профильных ресурсах.

2. Если говорить о данных, защищаемых в соответствии с законодательством РФ (например, персональные данные), то ответственность лежит на плечах оператора. Поскольку именно он осуществляет обработку данных, определяет ее цель, состав и непосредственно действия, осуществляемые с персональными данными.

При этом оператор вправе поручить обработку данных другому лицу на основании договора. Таким «лицом» является обычно внешний ЦОД. В этом случае ЦОД несет гражданско-правовую ответственность перед оператором. При этом ответственность перед субъектом продолжает нести оператор. Регулирует этот вопрос договор с ЦОД, в котором должны быть прописаны требования к защите информации, предъявляемые как оператором, так и законодательством.

Ответственность за безопасность информации, составляющей коммерческую тайну какой-либо организации, использующей услуги внешнего ЦОД, устанавливается на основе договорных отношений между организацией — владельцем информации и ЦОД.

3. Каналы ЦОД с точки зрения безопасности характеризуются по трем ключевым признакам: доступности, устойчивости к перехвату данных и устойчивости к подмене данных. Таким образом, о повышенном уровне безопасности дата-центров позволяют говорить несколько показателей. Чаще всего ими оказываются применение оптико-волоконных каналов и использование услуг нескольких провайдеров в рамках одного ЦОД.

4. При размещении инфраструктуры во внешнем ЦОД заказчик сталкивается с повышенными рисками, связанными с доступностью собственных данных. Наш опыт позволяет говорить о минимизации этих рисков при применении выделенных каналов и использовании средств защиты, в том числе криптографических.

Возникают и специфические облачные риски. Они сводятся к тому, что обработка данных нескольких заказчиков осуществляется на одном и том же оборудовании. Помочь в этой ситуации должны технологические меры со стороны владельца арендуемого ЦОД, а также специальные средства защиты для облачных сред.

Александр Трошин

технический директор «Манго Телеком»

1. Прежде всего дата-центр должен иметь достойную репутацию, причем акцент должен делаться именно на его надежности. Это должна быть действительно надежная площадка, на которой можно разместить соответствующее оборудование. И что самое важное, на которой поддерживаются все заявленные владельцами дата-центра и согласованные с клиентом условия, способствующие эксплуатации этого оборудования.

Естественно, дата-центр должен обеспечивать качественное электроснабжение, там должны быть системы резервирования электроснабжения, дизель-генераторные установки. Также там обязательно должны быть основной и резервный ввод от различных подстанций. Если все эти условия выполнены, одним из решающих факторов при выборе дата-центра должна быть его выгодная локация.

И наконец, я хотел бы отдельно отметить наличие основных и резервных линков до точек обмена трафиком, а также присутствие на площадке различных операторов передачи данных, телефонии и прочего. Это дает свободу выбора при организации резервных линков и позволяет, в случае отказа одного из каналов, переключиться на ресурсы другого поставщика.

2. За обеспечение доступа к физическому размещению несет ответственность сам дата-центр, он же и оборудует здания всеми необходимыми для этого средствами физической безопасности — системами контроля доступа, видеонаблюдения и пр. В принципе это должно обеспечить контроль физического доступа к размещаемому в дата-центре оборудованию. Что же касается логического доступа, то есть несанкционированного доступа к оборудованию извне, — это задача самого клиента дата-центра. Иными словами, он должен или суметь самостоятельно обеспечить защиту периметра от внешних угроз, или отдать эту функцию на аутсорсинг.

3. Имеющие резервирование, то есть те, которые могут обеспечить непрерывность предоставления услуг. Что же касается поступления внешних угроз в инфраструктуру, здесь, думаю, все интернет-каналы примерно равны.

4. Основной риск — это канал передачи данных. По сути, большинство выносных ЦОД, которые находятся вне инфраструктуры самого предприятия, должны быть надежно подключены и обеспечивать «пять девяток» и непрерывность доступа дата-центра к остальной инфраструктуре компании. Иначе ЦОД вообще теряет смысл.

Вообще, существует определенный класс сертификации дата-центров. Если выбранный дата-центр сертифицирован по этому классу, имеет подключение к инфраструктуре предприятия по основному и резервному каналам, причем эти каналы действительно задублированы/зарезервированы, то больших рисков я не вижу, кроме тех, что связаны с каналом передачи данных. Ведь все серьезные риски входят в условия сертификации дата-центра по совершенно четкой системе и минимизируются согласно тем же условиям.

Заур Абуталимов

ведущий специалист по маркетингу и рекламе, Cloude4Y »

1. Обеспечить абсолютную бесперебойность работы дата-центра невозможно, аварии есть, были и будут всегда, есть возможность минимизировать вероятность человеческой ошибки, но невозможно избавиться от выхода из строя конечного оборудования. Поэтому при выборе надежного ЦОД в первую очередь следует обратить внимание на наличие резервного оборудования, причем это касается не только самих серверов, но и каналов связи, системы охлаждения и электроснабжения. Также надежность дата-центра определяется следующими факторами:

наличие круглосуточной поддержки и доступа к оборудованию;
для обеспечения высокого качества связи желательно, чтобы дата-центр находился в том же регионе;
должно подходить как минимум два (лучше больше) оптоволокна от разных провайдеров и по разным маршрутам;
обязательно наличие промышленных ИБП от ведущих мировых производителей;
дата-центр не должен находиться в подвальном помещении или офисном здании;
доступ посетителей в здание дата-центра должен строго контролироваться и осуществляться только по пропускам;
обязательно должен осуществляться постоянный видеоконтроль как внутренних помещений, так и внешней территории дата-центра.

2. В случае colocation ответственность за информацию несет дата-центр, за исключением случаев, когда информация пропала по вине самого пользователя (например, пользователь сам отформатировал диски) или форс-мажорных обстоятельств.

3. У надежного дата-центра должно быть несколько каналов с собственной оптикой от разных провайдеров, которая обязательно должна быть проложена по разным маршрутам.

4. При использовании внешнего дата-центра можно выделить следующие риски:

краткосрочная потеря управляемости вашими информационными ресурсами;
привязка к одному дата-центру — финансовые потери в случае повышения стоимости услуг;
трудность перевода инфраструктуры на другую площадку -вероятность длительного простоя;
недостаток ресурсов у дата-центра под расширение вашей инфраструктуры;
утечка корпоративной информации;
доступ посторонних лиц к вашим системам.

Для того чтобы максимально снизить данные риски, необходимо иметь резервную площадку в другом дата-центре, где обязательно должны быть резервные копии ваших информационных систем и постоянный серьезный контроль лиц, имеющих доступ к вашим системам. Также существенно снизить риски, связанные с простоями, поможет организация ката-строфоустойчивых решений, обеспечивающих синхронную репликацию данных между дата-центрами.

Владимир Валькович

руководитель департамента технического развития и эксплуатации, Orange Business Services в России и СНГ

Ценность информации для корпоративных клиентов растет, и многие из них опасаются отдавать ее хранение и обработку стороннему провайдеру по соображениям безопасности и надежности. При этом если вопрос доступа к информации со стороны посторонних лиц скорее относится к психологическим аспектам, то обеспечение непрерывного доступа и сохранности информации целиком в руках провайдера услуги. Общепринятый стандарт TIA-942 включает 4 категории дата-центров, каждая из которых подразумевает широкий спектр условий, обеспечивающих надежность. И если категория Tier 4 пока не встречается в нашей стране в чистом виде, то соответствие дата-центра стандарту Tier 3 уже становится критерием выбора наиболее требовательных клиентов.

Дата-центр не может существовать в отрыве от инфраструктуры, поэтому важно знать, какие каналы передачи данных к нему подведены. Оптимальный вариант, когда ЦОД и магистральный канал управляются одной компанией. В этом случае клиент может получить расширенные гарантии надежности передачи данных, так как за все отвечает единый поставщик.

Факты о дата-центрах

Оценочное число серверов Google — 1 млн.

Доля мирового энергопотребления дата-центрами — 1,3%.

Энергопотребление дата-центров Google — 260 МВт (200 тыс. многоквартирных домов).

Общее количество дата-центров в мире — 500 тыс.

еВау — Феникс (США). Новейший дата-центр еВау — модульного типа: его серверы находятся в специальных контейнерах. За счет этого центр можно быстро ввести в эксплуатацию и расширять при необходимости.
Twitter — Солт-Лейк-сити (США). Замена арендованных серверов в собственном дата-центре происходит тяжело: Twitter в штате Юта борется с протекающей крышей и неудовлетворительным электроснабжением.
Apple — Мейден (США). Здесь находится один из самых больших «i-центров»: здание за миллиард долларов занимает площадь 46 тыс. м2 и продолжает расширяться, чтобы поддерживать сервис iCIoud.
Amazon — Сан-Паулу (Бразилия). Всемирно известный онлайновый магазин является первопроходцем в Южной Америке. Дата-центр построен здесь, чтобы сделать каналы передачи данных короче, а соединение — быстрее.
Facebook — Лулео (Швеция). Строительство первого дата-центра Facebook в Европе должно быть завершено к 2014 г. Поскольку он находится на Полярном круге, у него есть преимущество — естественное охлаждение.
Google — Хамина (Финляндия). Центр обработки данных Google в Финляндии использует для охлаждения воду из Балтийского моря. Таким образом снижается потребление энергии и не тратится пресная вода.
Microsoft — Дублин (Ирландия). Крупнейший центр обработки данных Microsoft за пределами США использует для охлаждения воздух окружающей среды. Это более экологично, чем применение искусственного охлаждения.

По материалам: chip.ua

сегодня и завтра / Хабр

Будущее дата-центров заключается в облачных решениях, гиперконвергентной инфраструктуре и более мощном оборудовании

Дата-центр — это помещение, которое предприятие использует для хранения критически важных для функционирования компании приложений и информации, поэтому по мере их усовершенствования и развития, важно продумать все детали относительно поддержания надежности и безопасности в течение длительного времени.

Оборудование в дата-центре

Обычно многие представляют, что дата-центр выглядит как огромный цельный механизм, однако, на самом деле центр обработки данных — это смесь технических элементов, таких как маршрутизаторы, коммутаторы, устройства безопасности, системы хранения данных, серверы, контроллеры доставки приложений и многого другого. Все эти компоненты необходимы IT для хранения и управления наиболее важными системами, которые крайне необходимы для непрерывной работы компании. Поэтому приоритетными задачами является надежность, производительность, безопасность и постоянное совершенствование дата-центра.

Инфраструктура дата-центра

В дополнение к техническому оборудованию, дата-центр нуждается также в значительной инфраструктуре объектов для постоянного поддержания в рабочем состоянии аппаратного и программного обеспечения. К ним относятся подсистемы питания, бесперебойные источники питания (ИБП), системы вентиляции и охлаждения, резервные генераторы и кабели для подключения к внешним сетевым операторам.

Архитектура дата-центра

Почти каждая крупная компания с большей долей вероятности имеет несколько геораспределенных дата-центров, т.е. в нескольких регионах. Таким образом это позволяет организации использовать более широкие возможности в поддержке и резервировании информации, а кроме того обеспечивать защиту от стихийных бедствий или техногенных катастроф, таких как наводнения, штормы и террористические угрозы. При создании архитектуры дата-центра всегда возникает большое количество противоречий, потому что существуют практически безграничные возможности. Вот некоторые из основных вопросов:

Требуются ли для бизнеса зеркальные центры обработки данных?
Насколько масштабна должна быть геораспределенность?
Какое время потребуется для восстановления в случае сбоя?
Сколько места потребуется в случае увеличения мощностей?
Арендовать ли частный дата-центр или использовать совместную колокацию/гермозону?
Какие требования к пропускной способности и мощности?
Какого провайдера выбрать?
Нужна ли охрана и в каких масштабах?

Ответы на эти вопросы помогут принять грамотное решение относительно того, сколько дата-центров необходимо построить и где. Например, фирма на Манхэттене, предоставляющая финансовые услуги, по всей вероятности, нуждается в непрерывной деятельности, поскольку любой перебой может стоить им несколько миллионов долларов. Скорее всего компания решит построить в непосредственной близости, в таких городах как Нью-Джерси и Коннектикут, два центра обработки данных, которые будут дублировать друг друга. Работу одного из дата-центров можно будет остановить без всяких перебоев в работе компании, потому что работа будет вестись при помощи другого дата-центра.

Однако, небольшая фирма, предоставляющая профессиональные услуги, может и не нуждаться в мгновенном доступе к информации, поэтому оптимальным решением для нее будет расположить основной дата-центр непосредственно в своем офисе и выполнять резервное копирование информации из всех своих филиалов на альтернативный сайт в ночное время. В случае сбоя начнется процесс восстановления информации, но здесь уже не будет такой срочности по сравнению с бизнесом, где данные нужные всегда в режиме реального времени, чтобы успешно конкурировать на рынке.

Хотя дата-центры часто ассоциируются лишь с огромными компаниями и поставщиками облачных услуг, на самом деле любая компания может иметь свой дата-центр. Для небольших предприятий дата-центр может представлять собой небольшое помещение, расположенное, например, в офисном пространстве.

Стандарты дата-центров

Для того, чтобы руководителям IT сферы было легче определиться с инфраструктурой дата-центра, Аме¬ри¬канс¬ким на¬ци¬о¬наль¬ным институтом стандартов (ANSI) и Ассоциацией телекоммуникационной промышленности (TIA) в 2005 году опубликованы стандарты для дата-центров, предусматривающие 4 уровня надежности. На официальном сайте утвержденных стандартов можно найти полное описание требований к каждому уровню дата-центров.

Технологии будущего

Наряду со всеми IT отраслями и технологиями, дата-центры также находятся в стадии значительного технического прогресса, поэтому центры обработки данных в будущем совершенно не будут похожи на современные дата-центры.

Предприятия среднего и малого бизнеса набирают обороты, становясь все более динамичными и децентрализованными, а значит и технологии, используемые в дата-центрах, должны становиться более гибкими и масштабируемыми. Также в настоящее время все большую популярность обретает виртуализация серверов, что создает новую нагрузку на сети и меняет характер трафика — традиционно для дата-центров был свойственен трафик «север-юг» (обмен данными между пользователем и дата-центром), а в последнее время все больше и больше объемов данных передаются внутри дата-центра, т.е. увеличивается трафик «восток-запад».

Приведем ключевые технологии, которые преобразуют традиционные строгие и статичные дата-центры в гибкие и манёвренные, что в следствие поможет им удовлетворить любые запросы цифровых организаций.

Публичные облака

Традиционно предприятия всегда строили свои собственные дата-центры, пользуясь при этом услугами поставщика хостинга или внешнего управления. Такой подход позволял изменить структуру собственности и экономическую составляющую действующего дата-центра, однако по-прежнему много времени уходило на внедрение и организацию технических решений. Однако, рост популярности облачных услуг и модели «Инфраструктура как Сервис» (IaaS), предоставляемой такими облачными провайдерами как Amazon Web Services или Microsoft Azure, открыли для бизнеса возможность обеспечить компанию виртуальным дата-центром в облаке путем пары кликов мышки. Данные аналитической компании ZK Research показали, что более 80% компаний планируют применение гибридного подхода, который подразумевает под собой как использование публичных облаков, так и частных дата-центров.

Программно-определяемая сеть (SDN)

Гибкость цифрового бизнеса напрямую зависит от его не самой гибкой составляющей – сети. SDN же может вывести динамику на новый уровень, неведомый ранее.

Гиперковергентная инфраструктура (HCI)

Одной из первоочередных задач любого дата-центра является создание корректного «микса» из серверов, хранилищ и сетей, чтобы поддерживать приложения с высокими требованиями. После развертывания инфраструктуры необходимо выяснить, как быстро масштабировать ее, не нарушив при этом работу приложения. HCI значительно упрощает работу, предоставляя простое в развертывании устройство, в основе которого лежат стандартные аппаратные средства, которые могут масштабироваться путем добавления дополнительных компонентов при развертывании. Ранее HCI в основном использовался для виртуализации рабочих столов пользователей, однако, в последнее время применять данный подход начали и в других бизнес-приложениях, таких как унифицированные коммуникации и базы данных.

Контейнеры

При разработке приложений зачастую приходится приостанавливать работу на время создания инфраструктуры, где данное приложение впоследствии будет запущено. Это может существенно помешать организациям перейти к модели DevOps. Контейнеры — это метод виртуализации всей рабочей среды, которая позволит разработчикам запускать приложения и их зависимости в автономной системе. Контейнеры очень легкие и могут быстро создаваться и удаляться, поэтому они идеально подходят для проверки работы приложений при определенных условиях.

Микросегментация

Стандартные дата-центры обладают всеми основные технологиями безопасности, поэтому, когда трафик движется в направлении Север-Юг, то он проходит через все инструменты защиты, делая работу безопасной. Рост трафика в направлении Восток-Запад означает, что трафик обходит фаерволы, системы предотвращения вторжений и другие системы безопасности, что в свою очередь позволяет быстро распространять вредоносное ПО. Микросегментация — это метод создания безопасных зон в дата-центре, где ресурсы изолируются друг от друга, поэтому, если где-то образуется брешь или утечка, ущерб минимизируется. Микросегментация обычно выполняется в программном обеспечении, что делает ее очень манёвренной.

NVMe

В современном мире, где вся информация уже полностью оцифрована, появляется необходимость в передаче данных на очень больших скоростях. Традиционные протоколы хранения данных, такие как интерфейс малых компьютерных систем (SCSI) и приложение передовых технологий (ATA), существуют уже несколько десятилетий и работают на пределе своих возможностей. NVMe — это протокол хранения данных, предназначенный для ускорения передачи информации между системами и твердотельными накопителями, что значительно повышает скорость передачи данных.

Графические процессоры (GPU)

Центральные процессоры (ЦПУ) снабжали мощностями инфраструктуру в дата-центре десятилетиями до того момента, пока эмпирический закон Мура не достиг своего предела. Кроме того, современные рабочие нагрузки, такие как аналитика, машинное обучение и IoT, обусловливают необходимость в новом типе вычислительных моделей, которые значительно превышают возможности существующих процессоров. Графические процессоры, использовавшиеся ранее только для игр, функционируют принципиально иначе, поскольку они способны обрабатывать множество потоков параллельно, что делает их идеальными для дата-центра будущего.

Дата-центры всегда занимали и будут занимать важное место в любом бизнесе, независимо от его величины. Однако способы развёртывания дата-центров и применяемые в них технологии претерпели колоссальные изменения. Чтобы внедрить идеальную схему работы дата-центра, помните, что мир становится всё более динамичными. Технологии, оказывающие влияние на происходящие в ИТ сфере важные изменения, и есть технологии будущего.

Адрес оригинальной статьи: How a data center works, today and tomorrow

цены на услуги ЦОД на сайте ITSOFT

дата-центр

Colocation в дата-центре
уровня надежности
Tier III NORD-4

Поюнитное размещение.

Аренда стоек. Аренда машинного зала

Подробнее

машинный зал сертифицированного дата-центра Tier III

Первый дата-центр
с умной поддержкой
в Telegram

Попробовать

Умная и заботливая
техподдержка

Сервис банковского уровня,
ответственный менеджмент и владелец.

Администрирование
Unix и Windows
серверов

От разового до полного обслуживания
Подробнее

Аренда
высокопроизводи-
тельных серверов

В любых конфигурациях

Размещение
нестандартного
серверного
оборудования

We speak English

Ведение переговоров
и консультации клиентов
на русском и английском языке

Всегда
рады вам

Свежий кофе собственной обжарки,
доброе отношение

Colocation размещение серверов

Стоимость размещения серверов включает аренду одного порта коммутатора Ethernet (режим подключения 100Mb/s full-duplex).

Подробнее

от

2 000 ₽

Аренда серверных стоек

Аренда от половины стойки 23U до целой стойки 47U.

Подробнее

от

54 000 ₽

Аренда

серверов

Аренда сервера, в отличие от обычного хостинга, позволяет получить максимальный уровень безопасности и надежности для вашего проекта.

20
штатных моделей,
сборка
под заказ

Подробнее

от

3 300 ₽

Выделенные серверы для 1С

Выделенный сервер 1С для удаленной работы вашего офиса.

Подробнее

от

11 540 ₽

Майнинг-отель

Размещение GPU-ферм и ASIC-майнеров в надежном дата-центре в Москве.

Подробнее

от

9 000 ₽

Выделенные серверы с GPU

Аренда сервера с GPU для быстрых вычислений

Подробнее

от

16 900 ₽

VDS / VPS аренда виртуальных серверов

Виртуальные машины построены на облаках и позволяют получить все преимущества облачной технологии, включая масштабируемость, гибкость и отказоустойчивость уровня Tier III.

Подробнее

от

200 ₽

Администрирование

Наши специалисты обеспечат надежную и бесперебойную работу Вашего оборудования. Решаем задачи любой сложности.

Подробнее

от

3 000 ₽

Мониторинг

Анализ и проверка состояния ваших сервисов, для предотвращения простоев в работе.

Подробнее

от

1 500 ₽

Серверы под виртуализацию

Готовые конфигурации выделенных серверных решений для виртуализации Подробнее

Лицензионное
ПО

Лицензионное ПО — Microsoft, VMWare, DrWeb Подробнее

Лицензии
связи

Если вы планируете предоставлять услуги связи — этот раздел для вас Подробнее

SSL—
сертификаты

SSL-сертификаты от «чтобы не ругался» до полной проверки компании Подробнее

Хостинг

Широкий спектр хостинга — от парковки сайта до специализированного под 1С-Битрикс. Подробнее

Все

услуги

Компания itsoft предоставляет широкий комплекс услуг дата-центра в г. Москве.

Вы можете разместить своё оборудование или арендовать у нас физические или виртуальные сервера под ваши задачи. Дополнительно вы можете заказать услуги администрирования серверов, лицензионное программное обеспечение, SSL-сертификаты, ip-телефонию, облачную АТС, лицензии связи и многое другое.

Мировые бренды доверяют нам сложные программно-аппаратные комплексы.

Услуги предоставляются по следующим адресам:

Общая информация о ЦОДе NORD

ЦОД NORD DataLine находится по адресу Коровинское шоссе, д. 41

Площадь дата-центра: 10763 м²
Общ. уст. мощность: 23200 кВА
Мощность стойки: от 6 кВт и выше
13 машинных залов
2216 коммерческих стоек

Инженерный комплекс энергоснабжения

Электроснабжение ЦОДов NORD организовано с резервированием по схеме 2N: электропитание от города (МКС ОАО «Мосэнерго», район № 21) подается по двум лучам на 6 понижающих трансформаторов.

Схема внутреннего энергообеспечения

Источники бесперебойного питания (ИБП) — внутри модулей ЦОД. ИБП APC-MGE Galaxy мощностью 500 кВт. Емкость батарей рассчитана на питание клиентских стоек и информационной инфраструктуры ЦОД в течение 5-6 минут (время, с хорошим запасом достаточное для пуска ДГУ).

Дизель-генераторные установки (ДГУ) в качестве источников резервного питания автоматически запускаются при отказе электросети «МосЭнерго».

Резервирование дизель-генераторных установок осуществляется по схеме N+1: для электроснабжения каждого ЦОД достаточно мощности двух генераторов, один является резервным.

Питание к каждой стойке в залах подается по 2 лучам. Бесперебойная подача электричества на оборудование клиентов в стойках обеспечивается использованием блоков распределения питания (PDU) и автоматических переключателей нагрузки (АВР).

Инженерный комплекс кондиционирования и климат-контроля

В NORD-4 работают кондиционеры Stulz Cyber Air. Благодаря чиллерной схеме ЦОД уровня Tier III NORD-4 сможет работать в режиме свободного охлаждения (free cooling).

Поддерживаемая рабочая температура в компьютерном зале от +24° С до +26° С и влажность — от 40% до 60% без конденсата.

Для поддержания заданных климатических условий в компьютерных залах установлены прецизионные двухконтурные кондиционеры с нижней подачей воздуха. Охлажденный воздух из кондиционеров подается под фальшпол, и далее через перфорированные плитки фальшпола выдувается в «холодные» коридоры между стойками. Кондиционеры в залах резервированы по схеме N+1 (один кондиционер на зал — резервный).

Система мониторинга контролирует температуру и влажность в залах с оборудованием Заказчика.

Сетевая инфраструктура

Бесперебойный доступ к оборудованию, размещенному в ЦОД, осуществляется посредством резервированных высокоскоростных каналов передачи данных с полосой пропускания до 10 Гб.

ЦОД объединены в волоконно-оптическое кольцо (пропускной способностью до 40 Гб/сек), включающие и точки присутствия на MMTC9 и ММТС10. Имеется 10 Гбит/с канал до MSK-IX.

В настоящее время мы предоставляем клиентам резервированные каналы или «темное волокно» до ММТС9, ММТС10. На основе сетей провайдеров возможна организация удаленного доступа клиентов к своему оборудованию, а так же создание виртуальных частных сетей (VPN) на основе технологии MPLS, что позволяет иметь превосходное качество сервиса, безопасность и надежность.

В ЦОД имеются точки присутствия 13 телекоммуникационных провайдеров.

Противопожарный инженерный комплекс

ЦОД оборудован автоматическими установками газового пожаротушения (АУГПТ). В состав АУГПТ входят световая и звуковая сигнализация, предупреждающая о пуске газа. АУГПТ состыкованы с системами охлаждения для отключения кондиционирующего оборудования в случае аварии, и системой разграничения физического доступа.

Машинные залы ЦОД защищены автоматической установкой газового пожаротушения, предназначенной для раннего обнаружения очага возгорания, выдачи сигнала о пожаре и автоматического тушения. В качестве огнетушащего вещества принят хладон 125, хранящийся в модулях типа МПГ (модуль пожаротушения газовый). Способ пожаротушения — объемный, путем заполнения защищаемого помещения парами хладона 125 до создания огнетушащей концентрации.

Для обнаружения загорания в защищаемых помещениях применяются дымовые датчики, размещаемые в рабочем пространстве зала и под фальшполом. Установка управляется охранно-пожарным прибором «РОСА-2SL».

Системы безопасности Дата-центра

В состав комплекса устройств охранного теленаблюдения входят стационарные цветные IP-видеокамеры внутреннего и внешнего исполнения, цифровые записывающие устройства, цветные видеомониторы. По запросу клиента возможна установка дополнительных видеокамер в залах.

В помещениях ЦОД установлены интегрированные системы охраны «ОРИОН» производства фирмы BOLID (Россия). Датчиками оборудованы как периметры, так и двери внутренних помещений ЦОД.

После постановки на охрану датчиков (всех датчиков ЦОД, или датчиков, находящихся в выбранном помещении, или одиночных датчиков) система начинает контролировать их состояние. При срабатывании датчика выдается звуковое сообщение, которое дублируется визуальными средствами. Сообщение о срабатывании датчика записывается в системный журнал

Клиенты Дата-центра

Качество работы

Положительные отзывы люди очень редко пишут, только если кого-то попросить лично об этом. За 8 лет в системе WebMoney у нас был всего один отзыв. Поэтому, отсутствие отзывов — хороший знак. А огромное количество положительных отзывов говорит об обмане.

Проверка связи:

Speedtest
Тестовый файл 100Мб
ping itsoft.ru
tracert itsoft.ru

Главная

Дата-центр

Meta объявляет о мегарасширении центра обработки данных Facebook в штате Юта

Работа выполняется на серверах в центре обработки данных Meta Eagle Mountain в Игл-Маунтин в пятницу, 30 сентября 2022 г. Meta расширяет центр обработки данных, увеличивая общий объем инвестиций до более чем 1,5 доллара США. миллиард. После завершения строительства центр будет представлять собой кампус площадью 4,5 миллиона квадратных футов.

Джеффри Д. Оллред, Deseret News

Материнская компания Facebook Meta объявила в пятницу о мегарасширении своего массивного центра обработки данных Eagle Mountain.

Meta уже построила пять зданий на участке, в нескольких милях к югу от центра города Игл-Маунтин, площадью 2,4 миллиона квадратных футов, в которых размещено оборудование для хранения и обработки данных для крупнейшей в мире платформы социальных сетей.

Планы расширения Фазы 3, обнародованные в пятницу, требуют еще двух гигантских сооружений, которые добавят около 2 миллионов квадратных футов к объекту и доведут общие капиталовложения Meta в проект Eagle Mountain до 1,5 миллиарда долларов, по данным компании.

В пятницу Мета также объявила о пожертвовании в размере 200 000 долларов в поддержку проекта восстановления стока Хоббл-Крик в округе Юта, организованного Управлением водного хозяйства Центральной Юты. Мета говорит, что пожертвование является частью более масштабных усилий по финансированию проектов по восстановлению воды, которые составляют 200% потребления воды на объекте Eagle Mountain. Meta также заявляет, что дизайн собственных центров обработки данных на 80% более эффективен с точки зрения использования воды, чем в среднем по отрасли.

«Мы очень рады расширять свое присутствие в Юте», — говорится в заявлении Дарси Нотангл, директора Meta по общественному и экономическому развитию. «Игл-Маунтин, штат Юта и Rocky Mountain Power с самого начала были выдающимися партнерами, и мы надеемся на продолжение этого прочного и плодотворного партнерства на долгие годы.

«Сегодняшнее объявление о расширении вместе с нашими пожертвованиями на проект восстановления реки Хоббл-Крик и программу «Переверни свою полосу» еще больше подчеркивают нашу приверженность Игл-Маунтин и округу Юта».

Менеджер по обработке данных Скотт Маклейн проходит мимо вентиляторной стены, используемой для охлаждения серверов, используемых в центре обработки данных Meta Eagle Mountain в Игл-Маунтин, в пятницу, 30 сентября 2022 года. Meta расширяет центр обработки данных, увеличивая общий объем инвестиций до более чем 1,5 миллиарда долларов. . После завершения строительства центр будет представлять собой кампус площадью 4,5 миллиона квадратных футов.

Джеффри Д. Оллред, Deseret News

Мэр Игл-Маунтин Том Уэстморленд сопровождал представителей СМИ на экскурсии по объекту в пятницу и сказал, что быстрорастущий город получает прямую выгоду от инвестиций в центр обработки данных, несмотря на пакет муниципальных и государственных налоговых льгот, которые могут стоить до 750 миллионов долларов в ближайшие десятилетия.

«Если мы просто посмотрим на цифры, то увидим высокую отдачу от этих инвестиций», — сказал Уэстморленд. «Эта земля до появления Меты приносила в общей сложности 35 долларов в год. … Теперь он приносит миллионы даже с учетом этой надбавки к налогу».

Уэстморленд сказал, что одним из первых шагов Meta, прежде чем она начала строительство центра обработки данных, было инвестирование 120 миллионов долларов в улучшение инфраструктуры, включая расширение коммунальных услуг и дорог на его территории. По словам Уэстморленда, такие денежные затраты лучше исходить от партнера из частного сектора, чем от повышения налогов с жителей.

И, по словам мэра, инвестиции уже помогли привлечь другие гигантские инвестиции в этот район, включая завод Tyson Foods стоимостью 300 миллионов долларов и центр обработки данных Google.

«Чтобы достичь нашей цели, нам нужны такие партнеры, как Metas, Googles, Tysons», — сказал Уэстморленд. «Из-за их возможностей, из-за их опыта, из-за их ресурсов и положительного воздействия, которое они могут оказать».

Точное количество данных, которое сможет хранить объект Меты в Орлиной горе, немного туманно.

Компания не сообщает, но, по оценкам экспертов, высокосекретный центр обработки данных Агентства национальной безопасности в Блаффдейле, который имеет аналогичную площадь, может вместить 3 эксабайта данных, возведенных в степень 12. И не расстраивайтесь, если вы не слышали об эксабайте, термине для 1000 в 6-й степени или 1 000 000 000 000 000 000 байт информации.

Художественный рендеринг будущих дополнений к центру данных Meta Eagle Mountain в Игл-Маунтин в пятницу, 30 сентября 2022 года. Meta расширяет центр обработки данных, увеличивая общий объем инвестиций до более чем 1,5 миллиарда долларов. После завершения строительства центр будет представлять собой кампус площадью 4,5 миллиона квадратных футов.

Мета

Беспрецедентные налоговые льготы Meta

До того, как стать известной как Meta, Facebook представила проект Eagle Mountain в мае 2018 года после слухов и предположений о таинственном крупном технологическом проекте в этом районе, который циркулировал в течение нескольких месяцев. Глубина и широта местных и государственных налоговых льгот, предоставляемых в качестве приманки для компании, также были выяснены в то время, и они беспрецедентны.

Если все пять этапов проекта центра обработки данных будут завершены в течение следующих нескольких десятилетий, Facebook получит потенциальные 750 миллионов долларов субсидий налогоплательщиков.

Фаза 2, о которой было объявлено в конце 2019 года, добавила 500 000 квадратных футов дополнительных помещений к первой фазе и увеличила капитальные вложения до 1 миллиарда долларов, по данным компании.

В то время как Facebook в настоящее время находится на третьем этапе проекта, бессрочные поощрительные соглашения расширяют общественные льготы далеко за пределы первых трех этапов и могут принести компании дополнительные налоговые льготы на сотни миллионов долларов в течение следующих четырех десятилетий.

В дополнение к своим капитальным затратам Facebook инвестирует около 150 миллионов долларов в улучшение инфраструктуры, в том числе в обеспечение электроэнергией участка площадью 500 акров от близлежащего коридора линий электропередач высокой мощности, расширение канализационных и водопроводных сетей, ввод телекоммуникационных линий и улучшение дороги.

Ожидается, что эти инвестиции в инфраструктуру будут уравновешены налоговыми льготами Фазы 1 в размере 150 миллионов долларов в течение 20 лет. Эта налоговая льгота дает Facebook 100% налоговые льготы по налогам на личное имущество и 80% льготы по налогам на недвижимость сроком на 40 лет для четырех из пяти налоговых органов, которым он обязан.

Только Школьный совет Alpine установил некоторые ограничения на эти льготы с ограничениями в размере 40 миллионов долларов на этап и 120 миллионов долларов на общую сумму в течение 35 лет. Альпийский школьный округ представляет собой крупнейшего бенефициара налогов, которые Facebook будет платить, и организации, которая отказывается больше всего от пакета налоговых льгот, получая около 70% от общей суммы причитающихся налогов. Компания также получит некоторые льготы по налогу с продаж, созданные Законодательным собранием штата Юта специально для центров обработки данных.

Исследование проекта, проведенное по заказу Eagle Mountain, показало, что если Facebook проведет проект через пять этапов в пределах 40-летнего срока, компания заработает 750 миллионов долларов в виде налоговых льгот.

Юта в настоящее время является домом для многочисленных центров обработки данных, включая объекты, которыми управляют eBay, Twitter, Oracle и Агентство национальной безопасности.

Meta почти удвоит размер своего центра обработки данных в городе Юта

Генеральный директор Meta Марк Цукерберг говорит, что «гигантский суперкомпьютер» Eagle Mountain будет питаться от возобновляемых источников энергии и потреблять меньше воды, чем обычно такие объекты для охлаждения.

(Крис Сэмюэлс | The Salt Lake Tribune) Мета-техник Дилан Поулсен ремонтирует сервер в центре хранения данных в Игл-Маунтин в пятницу, 30 сентября 2022 года. В пятницу Meta объявила, что площадь объекта увеличится вдвое и составит почти 4,5 миллиона квадратных метров. ноги.

Тони Семерад

| 30 сентября 2022 г., 20:13

| Обновлено: 23:01

Игл-Маунтин • Материнская компания Facebook планирует почти удвоить свою и без того гигантскую площадь передовых хранилищ данных в Игл-Маунтин, доведя инвестиции Meta в сельскую местность округа Юта до 1,5 млрд долларов.

Генеральный директор Meta Platforms Марк Цукерберг опубликовал объявление в пятницу на Facebook, через несколько часов после того, как энергичные сотрудники Meta впервые приветствовали посетителей внутри одного из пяти огромных H-образных серверных зданий, которые резко возвышаются на просторах полыни и пустыни.

Цукерберг сравнил серверы данных с «гигантским суперкомпьютером» и сказал, что 2 миллиона квадратных футов дополнительного пространства в Eagle Mountain будут полностью работать на возобновляемых источниках энергии и потреблять гораздо меньше воды, чем такие центры обычно используют для охлаждения.

(Крис Сэмюэлс | The Salt Lake Tribune) Уильям Маркс, менеджер по развитию сообщества Meta, проводит для СМИ и официальных лиц экскурсию по центру хранения метаданных в Игл-Маунтин, пятница, 30 сентября 2022 г. В пятницу Meta объявила, что Площадь объекта удвоится и составит почти 4,5 миллиона квадратных футов.

«Технологии в наших центрах обработки данных, — писал он, — довольно дикие».

Расширение увеличит площадь базы данных Eagle Mountain почти до 4,5 миллионов квадратных футов, что сделает ее одной из 15 крупных площадок, которые Meta развернула по всему миру для хранения данных, предназначенных для миллиардов пользователей Facebook, Instagram, WhatsApp и других платформ социальных сетей. он владеет.

Два здания на участке были сданы в эксплуатацию в 2021 году, еще три строятся в преддверии расширения. Обычно частный, Мета открыл центр для тура в пятницу СМИ, гостей и делегации из Игл-Маунтин и Альпийского школьного округа.

Чистые футуристические складские помещения занимают ряд за другим невообразимые ряды серверных стоек в гудящих коридорах так долго, что сотрудники передвигаются по ним на скутерах. Каждая стойка от пола до потолка заполнена сотнями мигающих жестких дисков, флэш-памяти и других технологий хранения, содержащих резервные копии всех этих изображений, комментариев, лайков и других личных взаимодействий в Интернете.

«Это Мета-облако», — сказала Лиза Гарретт, менеджер сайта Eagle Mountain, открывая ящик с сервером, на котором проложены аккуратно сплетенные сетевые кабели.

(Крис Сэмюэлс | The Salt Lake Tribune) Менеджер сайта Meta Лиза Гарретт показывает стойку для хранения данных во время экскурсии по центру обработки данных в Игл-Маунтин, пятница, 30 сентября 2022 года. В пятницу Meta объявила, что объект увеличится вдвое. до почти 4,5 млн кв.

Расширение нового удаленного кампуса с огромными металлическими хранилищами данных и ограждениями по периметру, расположенными в южной части города, также обеспечит занятость 1750 строителей в пиковый период, сообщила Мета, и создаст до 300 рабочих мест после завершения.

«Это важный день для всех участников», — сказал мэр Игл-Маунтин Том Уэстморленд, который наблюдал за резким ростом своего небольшого и молодого сообщества с тех пор, как Meta впервые заложила фундамент в 2018 году.

Мэр высоко оценил первоначальные расходы Meta в размере 120 миллионов долларов на дороги и коммунальные услуги на этом месте, и сказал, что сложный пакет государственных и местных налоговых льгот, предложенных в то время, чтобы заманить Мету в Игл-Маунтин, «окупился».

(Крис Сэмюэлс | The Salt Lake Tribune) Вентиляторы и очистка воздуха в центре хранения метаданных в Игл-Маунтин, пятница, 30 сентября 2022 г. В пятницу компания Meta объявила, что площадь объекта увеличится вдвое и составит почти 4,5 миллиона квадратных футов.

Присутствие компании, по его словам, означало новую эру экономических возможностей в регионе, особенно для молодых жителей Игл-Маунтин.

«Мы пытаемся спланировать город будущего, а это нечто совсем другое, — сказал Уэстморленд, — и мы никогда не смогли бы сделать это самостоятельно».

Директор по экономическому развитию города Эван Берретт сказал, что в Игл-Маунтин наблюдается «огромный всплеск» розничной торговли и жилой застройки. Tyson Foods недавно объявила об открытии нового упаковочного предприятия в Игл-Маунтин, что создаст до 1000 рабочих мест, сказал Берретт, и он подтвердил, что Google также ведет переговоры о размещении предприятия в этом районе.

(Мета) Визуализация будущего размера центра данных Меты Игл Маунтин в Игл Маунтин. Meta, материнская компания Facebook, объявила в пятницу, что расширит сельский центр обработки данных округа Юта — один из 15, развернутых для обслуживания пользователей социальных сетей по всему миру — еще примерно на 2 миллиона квадратных футов.

Meta также выделяет 200 000 долларов на текущие усилия по восстановлению потоков воды через ручей Хоббл-Крик в округе Юта в рамках обязательства компании по возврату вдвое большего объема воды, потребляемого этим участком, обратно в водораздел реки Прово путем восстановления и сохранения.

Грант, выделенный Центральному району водного хозяйства штата Юта, позволит ежегодно восстанавливать около 467 миллионов галлонов воды в водосборном бассейне, заявила компания, дополняя другие усилия по пополнению и сохранению, которые она инициировала в условиях засухи в штате Юта.

«Для нас важно быть хорошими соседями», — сказал Уильям Маркс, менеджер по развитию сообщества Meta в Eagle Mountain. Он также отметил обширную поддержку Meta образовательных и общественных программ для Alpine School District.

(Chris Samuels | The Salt Lake Tribune) Стойка для хранения данных во время экскурсии по центру обработки данных Meta в Игл-Маунтин, пятница, 30 сентября 2022 г. В пятницу Meta объявила, что площадь объекта увеличится вдвое и составит почти 4,5 миллиона квадратных метров. ноги.

Компания Meta приняла цели устойчивого развития своих центров обработки данных по всему миру. Тем не менее, в статье Salt Lake Tribune в июле сообщалось, что, согласно информации, предоставленной городом, участок площадью 970 000 квадратных футов в Игл-Маунтин потреблял 13,5 миллиона галлонов в год в период с июня 2021 года по май 2022 года.

Благодаря собственным инновациям в конструкции своих центров обработки данных, по словам Маркса, Meta сократила потребление воды на своих объектах на 80% по сравнению с обычными центрами, в основном за счет создания системы воздушного потока и индукции для подачи горячей и холодной воды. сквозняки по всему зданию.

Он также поделился технологией проектирования с другими операторами центров обработки данных, сказал он.

(Крис Сэмюэлс | The Salt Lake Tribune) Вентиляторы от стены до стены охлаждают центр хранения данных Meta в Игл-Маунтин, пятница, 30 сентября 2022 года. В пятницу Meta объявила, что объект увеличится вдвое и составит почти 4,5 миллиона квадратных метров. ноги.

Во время пятничного тура, по словам Маркса, наружная температура была достаточно низкой, чтобы объект не использовал воду для охлаждения или систем отопления, вентиляции и кондиционирования воздуха.

Компания из Менло-Парк, штат Калифорния, также занимается восстановлением стока на реке Прово совместно с некоммерческой организацией Trout Unlimited и поддерживает программу «Переверни свою полосу» природоохранного района, которая предлагает жителям стимулы для преобразования их газоны и парковочные полосы к водному озеленению.

В целом, по словам Меты, его водные проекты в конечном итоге будут возвращать более 882 миллионов галлонов воды в год в водосборные бассейны.

Пятничные новости из Юты появились после того, как Bloomberg сообщил, что Цукерберг объявил в четверг о планах приостановить прием на работу и реструктурировать некоторые части компании. Любое серьезное сокращение бюджета компании будет одним из первых с момента ее основания в 2004 году.

(Крис Сэмюэлс | The Salt Lake Tribune) Сотрудники Meta в центре хранения данных в Игл-Маунтин, пятница, 30 сентября 2022 года. Meta объявил в пятницу, что объект удвоится в размерах до почти 4,5 млн квадратных футов.

Центры обработки данных сталкиваются с засухой и климатическими рисками: NPR

30 августа 2020 г., 26:07 по восточному времени

Майкл Копли

Центры обработки данных стали неотъемлемой частью глобальной экономики, основанной на цифровой информации. Тем не менее, многие объекты зависят от воды, чтобы не перегреваться. Это еще больше истощает водные ресурсы в таких местах, как Калифорния, где озеро Оровилл почти высохло из-за сильной засухи, вызванной изменением климата. Джастин Салливан / Getty Images скрыть заголовок

переключить заголовок

Джастин Салливан / Getty Images

Центры обработки данных появляются по всему миру, чтобы обрабатывать потоки информации из расширяющейся сети устройств, укоренившихся в жизни людей и экономике. Управление этим потоком цифровой информации — большой бизнес. Это также связано со скрытыми экологическими затратами.

В течение многих лет компании, управляющие центрами обработки данных, подвергались тщательной проверке из-за огромного количества электроэнергии, которую они используют для хранения и перемещения цифровой информации, такой как электронная почта и видео. Теперь общественность США начинает обращать внимание на воду, которая требуется многим объектам для предотвращения перегрева. Как и в системах охлаждения в больших офисных зданиях, вода в градирнях центров обработки данных часто испаряется, оставляя после себя соленые сточные воды, известные как продувки, которые должны очищаться местными коммунальными службами.

Зависимость от воды представляет собой растущий риск для центров обработки данных, поскольку потребность в вычислительных ресурсах резко возрастает, в то время как изменение климата усугубляет засуху. Около 20% центров обработки данных в Соединенных Штатах уже полагаются на водосборные бассейны, которые испытывают умеренную или сильную нагрузку из-за засухи и других факторов, согласно статье, написанной в прошлом году в соавторстве с Арманом Шехаби, научным сотрудником Национальной лаборатории Лоуренса в Беркли.

Тем не менее относительно немногие компании пожелали публично обсудить эту проблему из-за того, что она все еще привлекает мало внимания. Sustainalytics, которая оценивает риски, связанные с экологическими, социальными и управленческими вопросами (ESG), недавно заявила, что проверила 122 компании, управляющие центрами обработки данных, и обнаружила, что только 16% раскрыли информацию о своих планах по управлению рисками, связанными с водой.

«Проще говоря, причина недостаточной прозрачности заключается в том, что я думаю, что у большинства компаний здесь не очень хорошая история», — говорит Кайл Майерс, вице-президент CyrusOne, компании, занимающейся производством центров обработки данных.

Проблема сводится к основному компромиссу, с которым сталкиваются компании, пытаясь сохранить прохладу в центрах обработки данных, говорит Майерс. Они могут либо потреблять меньше воды, либо использовать больше электроэнергии. Или они могут использовать меньше энергии и потреблять больше воды.

«Вода очень дешевая», — говорит Майерс. «И поэтому люди принимают финансовое решение о том, что есть смысл потреблять воду».

Материнская компания Facebook Meta, которая управляет центром обработки данных в Прайнвилле, штат Орегон, является одной из нескольких крупных технологических компаний, которые пообещали вернуть в окружающую среду больше воды, чем они потребляют, к 2030 году. Эндрю Сельски/AP скрыть заголовок

переключить заголовок

Эндрю Сельски/AP

Материнская компания Facebook Meta, которая управляет центром обработки данных в Прайнвилле, штат Орегон, является одной из нескольких крупных технологических компаний, которые пообещали возвращать в окружающую среду больше воды, чем они потребляют к 2030 году.

Эндрю Сельски/AP

В дополнение к собственным потребностям в охлаждении центры обработки данных полагаются на электростанции, для работы которых часто требуется много воды.

Pushback уже появляется

В Соединенных Штатах насчитывается около 2600 центров обработки данных, многие из которых сгруппированы вокруг Далласа, района залива Сан-Франциско и Лос-Анджелеса, согласно отчету Комиссии по международной торговле США за 2021 год. .

В целом центр обработки данных среднего размера потребляет около 300 000 галлонов воды в день, или примерно столько же, сколько 1000 домашних хозяйств в США, говорит Шехаби из Национальной лаборатории Лоуренса Беркли. Их прямое потребление на месте ставит центры обработки данных в десятку крупнейших водопользователей в промышленном и коммерческом секторах Америки.

Вода, безусловно, находится «в центре внимания [отраслевых] радаров», — говорит Тодд Рив, генеральный директор Business for Water Stewardship, которая работает с компаниями по водным проблемам.

В последнее время некоторые компании центров обработки данных столкнулись с противодействием местных жителей и защитников водных ресурсов. В 2015 году город Чандлер, штат Аризона, принял постановление, позволяющее властям отклонять запросы на новые водопользования, если они не соответствуют городскому плану экономического развития. А в 2019 году Google согласился ограничить использование подземных вод в Южной Каролине после двухлетней борьбы с местными группами, которые выразили обеспокоенность по поводу истощения водоносных горизонтов.

Компании «разрабатывают тактику и стратегии, в некоторых случаях меняя свои идеи и планы относительно того, где они будут работать или где они будут строить центры обработки данных, в значительной степени из-за возникающих проблем с водой», — говорит Рив. Однако многие компании не будут рассказывать о своей деятельности, говорит он, отчасти потому, что «это новый и предстоящий вопрос, [и] наши знания о водном стрессе развиваются очень быстро».

Компании говорят, что ищут решения

Последствия усиливающейся засухи ощущаются во всей мировой экономике. Реки, которые служат важными торговыми путями в Европе, иссякают. Заводы в Китае закрыты для экономии воды и электричества. А американские предприятия, которые зависят от воды из реки Колорадо, могут столкнуться с прекращением поставок из-за многолетней засухи.

«Какой сектор будет получать воду? Каким образом вода будет расставляться по приоритетам? Я считаю, что именно эти типы соображений будут важно учитывать в будущем», — говорит Ката. Молнар, эксперт по воде в Sustainalytics.

Среди тех, кто хочет высказаться в индустрии центров обработки данных, есть несколько крупнейших мировых технологических компаний.

Google, Microsoft и материнская компания Facebook Meta заявили, что к 2030 году они будут пополнять больше воды, чем они потребляют. Рассматриваемые подходы включают работу с местными водоканалами, более эффективное использование воды в центрах обработки данных и использование менее водоемких методов охлаждения.

«Сведение к минимуму использования воды, обеспечение прозрачности наших данных о воде и восстановление воды в регионах с высоким дефицитом воды являются ключевыми элементами нашей программы рационального использования водных ресурсов», — говорится в заявлении Мета. Компания заявляет, что большинство ее центров обработки данных сокращают потребление воды за счет использования наружного воздуха для охлаждения.

Помимо использования новых технологий, некоторые эксперты говорят, что компании могут уменьшить свое воздействие на окружающую среду, строя центры обработки данных в местах с большим количеством воды. На данный момент, однако, решения в сфере недвижимости, по-видимому, в первую очередь диктуются тем, где находятся клиенты.

«Когда мы строим, мы смотрим на доступность электроэнергии и воды, — говорит Майерс из CyrusOne. «Но я не думаю, что мы близки к миру, в котором мы просто собираемся обосноваться в области, которая не имеет естественных [бизнес] преимуществ для центров обработки данных».

До тех пор, пока это так, отрасли придется изобретать пути решения проблемы, которая только усугубляется. В следующем десятилетии, по словам Майерса, «вода будет править».

Начальник отдела управления водными ресурсами настаивает на том, что компании готовятся соответствующим образом, хотя во многих случаях за кулисами.

«Я думаю, что есть нечто большее, чем просто то, что кажется на первый взгляд, — говорит Рив. «Там есть много инноваций, которые просто не полностью раскрыты или доступны для общественности».

По мере того, как центры обработки данных разрастаются, соседи перебивают шум.

Больше центров обработки данных, которые питают облако, сгруппировано в регионе за пределами столицы страны, чем где-либо еще в мире.

Поскольку облачные вычисления, которые позволяют хранить данные и предоставлять другие услуги через Интернет, продолжают расти в геометрической прогрессии, спрос на новые центры обработки данных продолжает расти. И все чаще сообщества, примыкающие к центрам, жалуются на своих новых соседей, в основном на шум от постоянно жужжащих вентиляторов, необходимых для охлаждения компьютеров и серверов, хранящихся внутри.

«Это просто постоянное жужжание с неприятной частотой», — сказал Дейл Браун, президент Ассоциации домовладельцев Грейт-Оук. Местные жители недавно провели акцию протеста возле близлежащего центра обработки данных в округе Принс-Уильям, недавно построенного для поддержки Amazon Web Services.

Браун сказал, что предпочитает карьер, который раньше занимал землю, а не информационный центр. И он беспокоится, что шум будет только усиливаться зимой, когда ряд деревьев, обеспечивающих что-то вроде буфера, сбрасывает листву.

Выступавшие на акции протеста заявили, что опасаются, что графство Принс-Уильям находится на грани присоединения к своему соседу, графству Лаудоун, известному как мировая столица центров обработки данных.

— Мы — канарейки в угольной шахте, — сказал Браун.

Северная Вирджиния была технологическим центром с момента появления Интернета, и в настоящее время в ней находится больше центров обработки данных, чем на следующих пяти крупнейших рынках США вместе взятых, по данным Технологического совета Северной Вирджинии.

В совокупности дата-центры северной Вирджинии требуют около 1,900 мегаватт мощности, сказал Джош Леви, президент Коалиции центров обработки данных, отраслевой торговой группы. Это примерно эквивалентно всей мощности ядерных реакторов Dominion Energy на электростанции в Северной Анне.

Браун и его соседи говорят, что шум от центра обработки данных регулярно превышает местный предел в 60 децибел для шума — исследование Amazon оспаривает это — но это в значительной степени спорный вопрос, потому что постановление округа о шуме освобождает кондиционеры. Активисты говорят, что постановление было написано более 30 лет назад и никогда не предполагало массивных систем охлаждения, используемых в центрах обработки данных.

Amazon Web Services, со своей стороны, заявила, что устанавливает акустические экраны на объекте в рамках своих усилий по снижению шума.

«Решение проблем шума наших соседей в округе Принс-Уильям является для нас приоритетом», — говорится в заявлении представителя компании.

Проблема не только в шуме. Спенсер Снакард, президент Protect Fauquier, обеспокоен тем, что большему количеству центров обработки данных потребуется больше высоковольтных линий электропередачи для доставки огромного количества электроэнергии, в которой они нуждаются, разрушая просмотры и создавая потенциальные риски для здоровья.

«Я вижу эти шумные чудовища очень похожими на компьютеры 1960-х и 70-х годов: массивные, громоздкие, уродливые и находящиеся в зачаточном состоянии», — сказала она.

Не все жители против дата-центров. В районе Гейнсвилля группа владельцев собственности предложила перевести свою землю из сельскохозяйственного использования, чтобы позволить им это. Персонал округа рекомендовал одобрить это перед голосованием комиссии по планированию 14 сентября.

Мэри Энн Гадбан из Гейнсвилля, 68 лет, является одним из владельцев недвижимости, которые продадут ее, если район будет перезонирован. Всю жизнь проживая в округе, она построила то, что назвала «амбаром своей мечты», на своей лошадиной ферме площадью 55 акров.

«Все мои соседи, мы все были долгожителями. Мы собирались жить здесь, пока не умрем», — сказала она.

Но после того, как в 2008 году электрическая компания проложила высоковольтные линии электропередач через ее владения, она сказала, что у ее лошадей возникли проблемы со здоровьем, а стоимость имущества упала. Застройщики заняли близлежащие участки, и ее сельский анклав стал чем-то другим.

«Это разбивает нам сердце, но это факт: это больше не сельская местность», — сказала она. «Мы должны были открыть эту территорию для дата-центров много лет назад, потому что вы уже испортили собственность. Вы уже разрушили жизнь людей, построив массивные опоры электропередач, так что ставьте центры обработки данных там, где уже есть электричество».

Есть также оппозиция из близлежащего национального парка поля битвы Манассас. Суперинтендант Брэндон Бис сравнил угрозу с заявкой Диснея 30 лет назад построить тематический парк рядом с полем битвы — предложение, которое защитники окружающей среды и другие активисты, как известно, отвергли — и выступил против представления о том, что линии электропередач уже разрушили сельский характер района.

«Хотя это и неприглядно, сельскохозяйственная и историческая природа западной окраины поля битвы все еще в значительной степени нетронута», — написал он в письме в правление графства.

Округа, пренебрегающие дата-центрами, отказываются от прибыльного источника налоговых поступлений.

Центры обработки данных в настоящее время обеспечивают более 30 процентов общего бюджета округа Лаудоун, пригорода столицы страны с населением более 400 000 человек.

В то время как непредвиденная прибыль была благом для Лаудоуна, Филлис Рэндалл, председатель Наблюдательного совета округа, выразила обеспокоенность по поводу чрезмерной зависимости от отрасли.

«Я не экономист, но даже я знаю, что не диверсифицировать вашу экономику до такой степени становится немного опасно», — сказала она на февральском заседании, на котором комитет правления рассматривал планы по управлению ростом центров обработки данных.

Леви из Коалиции центров обработки данных сказал, что северная Вирджиния остается особенно привлекательным местом по ряду причин. Он указывает на историю региона как интернет-хаба для начинающих — в бизнесе, где наносекунды имеют значение, так же как и близость к этим узлам, сказал Леви.

Кроме того, Вирджиния одним из первых штатов ввела налоговые льготы для центров обработки данных.

Он признал, что сопротивление сообщества усилилось по мере расширения отрасли. По его словам, отрасль, как правило, молчит из-за своих требований безопасности, и ей необходимо делать больше для продвижения своего полезного воздействия, наряду с достижениями в области проектирования центров, чтобы оказывать меньшее воздействие на окружающую среду.

«Я думаю, вы видели много постоянных инноваций и изменений дизайна в ответ на проблемы сообщества», — сказал он.

White Data Center: Как снег в Японии может уменьшить углеродный след данных

Си-Эн-Эн Бизнес —

Город в Японии нашел способ охлаждать огромные серверы, которые поддерживают глобальную цифровую экономику, не вызывая климатического кризиса.

Бибай на самом северном острове Японии Хоккайдо и его Белый центр обработки данных превратились в снег.

В WDC снег собирается и складывается в изолированную насыпь за пределами здания. Тепло, полученное от его серверов, медленно тает снег, а вода охлаждает трубы, содержащие антифриз, который затем течет по центру обработки данных через систему переменного тока, поддерживая температуру около 25 градусов по Цельсию (77 градусов по Фаренгейту).

«Диапазон температур регулируется сочетанием холода снега и тепла выхлопных газов ИТ, чтобы поддерживать температуру на нужном уровне круглый год», — говорит директор WDC Кота Хонма.

Количество центров обработки данных по всему миру продолжает расти, чтобы не отставать от роста потоковой передачи, облачных игр и майнинга криптовалюты. Но они обычно потребляют много энергии и, по данным Международного энергетического агентства, уже обеспечивают примерно 1% мирового спроса на энергию.

Дата-центр Bibai начал эксперименты со снегом в 2014 году благодаря гранту японской Организации по новым энергетическим и промышленным технологиям (NEDO), и, по словам Honma, расходы на охлаждение центра обработки данных сократились на 55%. Теперь WDC является коммерческой организацией и надеется привлечь клиентов из токийских центров обработки данных.

«WDC всегда кондиционируется, используя только 100% природную энергию, без использования электрического охлаждения или термального топлива», — говорит Хонма CNN Business. «По сравнению со стоимостью аренды [серверных] стоек в Токио, мы считаем, что можем предложить им более низкие затраты на обслуживание».

Существует давняя связь со снегом и экономикой Северной Японии. Бибай, примерно в 1000 км (620 миль) к северу от Токио, видит от восьми до 10 метров снега в год и тратит 400 миллионов иен (2,9 доллара США).миллионов) вспахивая и сбрасывая его. «Это считается неприятностью для жителей… и на самом деле это можно было бы использовать с пользой», — говорит Хонма.

Ежегодно с улиц Бибая убирается примерно 200 000 тонн снега, и городские власти сотрудничают с WDC, чтобы доставить часть этого снега в его центр обработки данных. Благодаря дополнительной мощности охлаждения цель состоит в том, чтобы увеличить центр с 20 серверных стоек до 200.

В летние месяцы снежная насыпь утепляется покрытием из древесной стружки и грязи. Хранение «бесплатной» холодной энергии, падающей с неба, — это простая возможность для бизнеса, — говорит Такахиса Цучия, исполнительный директор экономического отдела города Бибай. «Мы всегда говорим, что должны изменить нашу точку зрения и сделать так, чтобы снег был на нашей стороне», — добавляет он.

Охлаждение снегом — это только одна часть энергетической головоломки центра обработки данных. Тепло от серверов используется для нагрева воздуха и воды в соседней теплице, где компания выращивает грибы и тестирует другие продукты, включая шпинат с японской горчицей, кофейные зерна, морские ушки и морских ежей. Он также надеется стать первой коммерческой фермой по разведению угрей на Хоккайдо.

Планируемое расширение White Data Center в городе Бибай (показанное здесь на рендеринге) позволит подключить к сети 200 серверных стоек и обеспечить теплом близлежащие теплицы.

Белый центр обработки данных

По данным исследовательской компании Arizton, к 2027 году мировой рынок охлаждения центров обработки данных достигнет более 12 миллиардов долларов, и некоторые крупные технологические компании уже охлаждаются холодом, открывая магазины в странах Северной Европы.

Facebook (FB) в Оденсе, Дания, охлаждает здание с помощью наружного воздуха и надеется повторно использовать тепло в местных больницах. Google (GOOGL) имеет центр обработки данных в Финляндии, использующий трубы с океанской водой для охлаждения серверов, стремясь к 2030 году добиться нулевого уровня выбросов углерода в своих центрах обработки данных.

Когда поплавок Seatrec перемещается между более холодными и более теплыми частями океана, материал внутри модуля либо тает, либо затвердевает, создавая давление, которое, в свою очередь, создает тепловую энергию и питает генератор робота.

Предоставлено Seatrec

Электрические роботы наносят на карту морское дно, последний рубеж Земли

cms.cnn.com/_components/paragraph/instances/paragraph_34E2ACF3-83D4-C60D-5953-0E5E4238400A@published» data-editable=»text» data-component-name=»paragraph»> Тем не менее, когда дело доходит до сокращения энергопотребления, некоторые эксперты говорят, что важнее сосредоточиться на том, какие данные обрабатывают эти огромные серверы. Например, для майнинга криптовалют, таких как биткойн, требуется огромное количество электроэнергии.

«Возобновляемые и устойчивые системы питания и охлаждения — второе, но гораздо менее оптимальное решение», — говорит Пол Броуди, глобальный лидер блокчейна в Ernst & Young.

Преимущество центров обработки данных, добавляет Броуди, заключается в том, что они объединяют компьютерные операции под одной крышей, а не распределяют их по нескольким местам. «Я на 100 % за центры обработки данных со снежным охлаждением и другие центры обработки данных с низким уровнем воздействия, независимо от того, есть ли у вас биткойны в них или нет», — говорит он.

Джунко Огура из CNN внесла свой вклад в этот отчет.

Проблемный центр обработки данных Compute North борется с Crypto Winter. Затем его отношения с крупным кредитором испортились.

Подпишитесь на @egreechee в Твиттере

Аойон Ашраф

Аойон Ашраф — главный редактор с более чем десятилетним опытом освещения фондовых рынков

Подпишитесь на @@Aoyon_A в Твиттере

Подача заявления о банкротстве Compute North была вызвана проблемами в отношениях с одним из ее крупнейших кредиторов — Generate Capital — наряду с препятствиями на рынке и сбоями в цепочке поставок, по словам недавно назначенного финансового директора оператора центров обработки данных, используемых крипто-майнерами.

Дело компании по Главе 11, раскрытое в четверг, потрясло горнодобывающую отрасль, которая и так находится под давлением из-за медвежьего рынка криптовалют и глобального энергетического кризиса, который повышает стоимость добычи новых токенов. Compute North, которая получает большую часть своего дохода за счет размещения компьютеров майнеров, является хорошо известным именем в отрасли с такими клиентами, как Marathon Digital Holdings (MARA), Bit Digital (BTBT) и BitNile (NILE). Акции всех трех майнеров упали в пятницу.

Подробнее: Центр обработки данных Crypto-Mining Compute North подает заявление о банкротстве, генеральный директор уходит в отставку

Долгосрочный долг Compute North составляет 128,3 миллиона долларов, заявил финансовый директор Гарольд Коулби. Около 99,8 млн долларов из этой суммы предоставлено в виде обеспеченного долгового обязательства старшего уровня поставщику возобновляемых источников энергии NextEra, еще 21 млн долларов США в виде аналогичного долгового обязательства майнеру Marathon и 7,5 млн долларов США в виде кредита на финансирование оборудования от компании Foundry, занимающейся добычей цифровых активов и стейкингом (которая принадлежит материнской компании CoinDesk, Digital Currency Group).

Крупный кредитор

Объясняя банкротство в пятницу, финансовый директор Гарольд Коулби указал на одного из крупнейших кредиторов фирмы. По словам финансового директора, в феврале Generate Capital согласилась предоставить Compute North ссуду на сумму до 300 миллионов долларов для финансирования проектов в Небраске, а затем и в Техасе. В рамках соглашений о финансировании кредитор получил «первоочередное право на финансирование всех будущих проектов Compute North и право назначать директора» своему совету директоров.

Согласно заявлению Хоулби, из 300 миллионов долларов кредита от Generate Capital около 101 миллиона долларов в настоящее время непогашены.

Generate Capital не ответил на запрос CoinDesk о комментариях на момент публикации.

В июле кредитор заявил о нескольких «технических событиях дефолта», которые привели к получению контроля над активами Compute North. Generate Capital воспользовалась своим правом голоса, чтобы приобрести дочернюю компанию Compute North, которая владела двумя площадками для майнинга биткойнов, которые разрабатывали две фирмы. Это включало площадку Wolf Hollow в Техасе, которая первоначально должна была работать на мощности 300 мегаватт (МВт), а на более позднем этапе — 600 МВт, что сделает ее крупнейшей операцией майнера. Поскольку Generate Capital уже арестовала активы, она не входит в число текущих кредиторов.

По словам Коулби, также во втором квартале Generate Capital прекратил финансирование новых площадок, кроме тех, что расположены в Техасе и Небраске.

Хостинговая фирма не смогла найти альтернативный источник финансирования и, следовательно, не смогла завершить строительство своих шахт, сказал финансовый директор. В последующие недели он пытался найти решение с Generate Capital и другими потенциальными инвесторами, но не смог вовремя его найти.

Что еще хуже, сбои в цепочке поставок, стремительный рост цен на энергоносители и падение цен на биткойны привели к сокращению и без того ограниченной ликвидности Compute North. Фирма вложила $30,9.млн в 2021 году и 41,4 млн долларов в 2022 году на депозиты для основных средств, таких как трансформаторы, доставка которых занимает много времени, сказал Коулби.

«Столкнувшись с угрозой продолжающейся деградации стоимости своего бизнеса, включая потенциальное расторжение контрактов, которые Compute North может переуступить в сделке купли-продажи, у Compute North не было другого выбора, кроме как начать эти дела по главе 11, чтобы сохранить и максимизировать стоимость своих активов», — написал он.

Читать далее: Foundry запускает новую услугу для сокращения задержек в цепочке поставок для биткойн-майнеров сказал. В прошлом году фирма заработала 34,1 миллиона долларов от размещения машин для майнинга, 19,1 миллиона долларов от продажи оборудования и 12,1 миллиона долларов от самостоятельного майнинга.

Организационная структура Compute North. (Гарольд Колби/Compute North)

В документации Коулби описал сложную систему дочерних компаний, в рамках которой Compute North управляла своей деятельностью. Предприятия по добыче биткойнов находились в ведении различных дочерних компаний, некоторые из которых частично принадлежали их кредиторам.

Медвежий рынок наносит тяжелый урон индустрии майнинга криптовалют, поскольку майнеры с большой долговой нагрузкой продолжают становиться жертвами криптозимы. Совсем недавно горнодобывающее подразделение Celsius Network, заявившее в марте, что планирует выйти на биржу, также подало заявление о защите от банкротства согласно главе 11 вместе со своей материнской компанией. Между тем, Poolin Wallet, служба кошельков одного из крупнейших пулов майнинга биткойнов (BTC), объявила 13 сентября, что выпустит токены IOU (I Owe You) для пострадавших клиентов после того, как на прошлой неделе он заморозил снятие средств.

Подпишитесь на Market Wrap, наш ежедневный информационный бюллетень, объясняющий, что сегодня произошло на криптовалютных рынках и почему.

Адрес электронной почты

Зарегистрировавшись, вы будете получать электронные письма об обновлениях продуктов CoinDesk, событиях и маркетинге, и вы соглашаетесь с нашими условиями обслуживания и политикой конфиденциальности.

РАСКРЫТИЕ

Обратите внимание, что наша политика конфиденциальности, условия использования, файлы cookie и не продавать мою личную информацию были обновлены.

Лидер в области новостей и информации о криптовалютах, цифровых активах и будущем денег, CoinDesk — это средство массовой информации, которое стремится к самым высоким журналистским стандартам и соблюдает строгий набор редакционных политик.

Data центр: Рассказываем, что такое дата-центры и как они устроены?

Рассказываем, что такое дата-центры и как они устроены?

Что такое центр обработки данных?

И зачем вообще нужен дата-центр? Кто его использует?

Хорошо, а какие бывают ЦОДы?

Tier

Tier II

Tier

Tier IV

Ок, а как устроен дата-центр?

А в чём плюсы размещения оборудования или заказа сервера в ЦОДе?

Немного о необычных дата-центрах

Датацентр | это… Что такое Датацентр?

Содержание

Типы дата-центров

Структура и описание дата-центра

Услуги дата-центров

Сетевая инфраструктура

Примечания

Ссылки

См. также

Полезное

ЦОД Центр Обработки Данных — цены на услуги дата центра в Москве

Облако VMware (RCloud by 3data)

Облако OpenStack (RCloud by 3data)

Размещение оборудования (colocation)

Миграция в облака

Бесплатный круглосуточный переезд

Пресса о нас

Видео

Блоги

Data-центр — вопросы надежности | ITSec.Ru

1.

2.

3.

4.

Факты о дата-центрах

сегодня и завтра / Хабр

Оборудование в дата-центре

Инфраструктура дата-центра

Архитектура дата-центра

Стандарты дата-центров

Технологии будущего

Публичные облака

Программно-определяемая сеть (SDN)

Гиперковергентная инфраструктура (HCI)

Контейнеры

Микросегментация

NVMe

Графические процессоры (GPU)

цены на услуги ЦОД на сайте ITSOFT

дата-центр

Colocation размещение серверов

Аренда серверных стоек

Аренда

Выделенные серверы для 1С

Майнинг-отель

Выделенные серверы с GPU

VDS / VPS аренда виртуальных серверов

Администри­рование

Мониторинг

Все

Клиенты Дата-центра

Качество работы

Meta объявляет о мегарасширении центра обработки данных Facebook в штате Юта

Беспрецедентные налоговые льготы Meta

Meta почти удвоит размер своего центра обработки данных в городе Юта

Центры обработки данных сталкиваются с засухой и климатическими рисками: NPR

По мере того, как центры обработки данных разрастаются, соседи перебивают шум.

White Data Center: Как снег в Японии может уменьшить углеродный след данных

Проблемный центр обработки данных Compute North борется с Crypto Winter. Затем его отношения с крупным кредитором испортились.

Крупный кредитор

Read more about

Подпишитесь на Market Wrap, наш ежедневный информационный бюллетень, объясняющий, что сегодня произошло на криптовалютных рынках и почему.

Добавить комментарий Отменить ответ

Администрирование