Серверное помещение: требования, климат, питание, СКС
Серверное помещение (серверная, мини-ЦОД) — это не просто комната с оборудованием. Это инженерный объект, где сходятся электрика, СКС, климат-контроль, пожарная безопасность и физическая защита. Простой серверной = простой бизнеса, потеря данных, репутационные и финансовые убытки. Разбираем, каким должно быть серверное помещение: от выбора комнаты до сдачи в эксплуатацию.
1. Что такое серверное помещение
Серверное помещение — специально выделенное и оборудованное помещение для размещения IT-оборудования: серверов, коммутаторов, систем хранения данных, источников бесперебойного питания, телекоммуникационного оборудования.
Типы серверных помещений
| Тип | Площадь | Стойки | Применение |
|---|---|---|---|
| Серверный шкаф | — (занимает угол комнаты) | 1–2 | Малый офис (до 20 сотрудников) |
| Мини-серверная | 5–15 м² | 2–6 | Средний офис (20–100 сотрудников) |
| Полноценная серверная | 15–50 м² | 6–20 | Крупный офис, филиал |
| Мини-ЦОД | 50–200 м² | 20–100 | Корпоративный ЦОД |
| Коммерческий ЦОД | 500+ м² | 100+ | Дата-центр (colocation, cloud) |
2. Нормативная база
Проектирование и строительство серверных помещений регламентируется:
- TIA-942 (Telecommunications Infrastructure Standard for Data Centers) — основной международный стандарт. Определяет 4 уровня надёжности (Tier I–IV).
- ГОСТ Р 51709-2001 — «Автотранспортные средства. Требования безопасности к техническому состоянию» (применим частично).
- ГОСТ Р ИСО/МЭК 17788-2015 — «Информационные технологии. Облачные вычисления. Обзор и словарь».
- СНиП 21-01-97 — «Пожарная безопасность зданий и сооружений».
- ПУЭ — требования к электроустановкам.
- SP 118.13330.2012 — «Общественные здания и сооружения».
- EN 50600 — европейский стандарт для ЦОД (информационные технологии — методы проектирования и эксплуатации).
Уровни надёжности (Tier) по TIA-942
| Tier | Название | Доступность | Простой в год | Резервирование |
|---|---|---|---|---|
| Tier I | Базовый | 99.671% | 28.8 ч | Без резервирования |
| Tier II | С резервированными компонентами | 99.741% | 22 ч | N+1 (электрика, климат) |
| Tier III | Параллельное обслуживание | 99.982% | 1.6 ч | N+1, возможность обслуживания без простоя |
| Tier IV | Отказоустойчивый | 99.995% | 0.4 ч (24 мин) | 2N или 2(N+1), полное резервирование |
Для большинства корпоративных серверных достаточно Tier II. Для критичных систем (банки, медицина) — Tier III. Tier IV — для крупных коммерческих ЦОД.
3. Выбор помещения
Правильный выбор помещения — 50% успеха. Ошибку на этом этапе потом не исправить.
Требования к помещению
| Параметр | Требование | Примечание |
|---|---|---|
| Расположение | Не подвал, не последний этаж, не рядом с мокрыми зонами | Исключить затопление, протечки |
| Площадь | С запасом 30–50% от текущих потребностей | Для расширения в будущем |
| Высота потолков | Минимум 2.7 м (с фальшполом — 3 м+) | Для фальшпола и фальшпотолка |
| Несущая способность пола | ≥500 кг/м² (для стандартных стоек), ≥1000 кг/м² (для тяжёлых ИБП) | Стойка с оборудованием — 300–800 кг |
| Пожарная нагрузка | Негорючие материалы отделки | Стены, потолок, пол — негорючие (Г1, НГ) |
| Герметичность | Минимальные щели, уплотнённые двери | Для эффективного кондиционирования |
| Доступ | Ограниченный, через СКУД | Только авторизованный персонал |
| Удалённость от источников помех | Не рядом с лифтами, трансформаторами, мощными двигателями | Электромагнитные помехи влияют на оборудование |
| Вибрация | Минимальная | Не рядом с ж/д путями, метро, тяжёлым оборудованием |
Критично: серверная не должна располагаться под санузлами, кухнями, душевыми. Протечка сверху = выход оборудования из строя. Если другого варианта нет — обязательна гидроизоляция перекрытия и поддон с датчиком протечки.
4. Климат-контроль
Серверы выделяют много тепла. Без охлаждения оборудование перегревается, снижает производительность, выходит из строя. Климат-контроль — одна из самых важных и дорогих систем серверной.
Рекомендуемые параметры (ASHRAE)
| Параметр | Рекомендуемый диапазон | Допустимый диапазон |
|---|---|---|
| Температура | 18–27°C | 15–32°C (кратковременно) |
| Влажность | 40–60% RH | 20–80% RH (без конденсата) |
| Скорость изменения температуры | ≤5°C/час | — |
| Точка росы | 5.5–15°C | — |
Расчёт теплопритоков
Мощность кондиционирования должна компенсировать все теплопритоки:
- IT-оборудование. Основная статья. Суммарная мощность серверов, коммутаторов, СХД — в кВт.
- ИБП. Потери при преобразовании — 5–15% от мощности.
- Освещение. 10–20 Вт/м².
- Люди. 100–150 Вт на человека.
- Стены, окна, крыша. Зависит от теплоизоляции, ориентации по сторонам света.
Формула: Q_конд = Q_IT + Q_ИБП + Q_осв + Q_люди + Q_ограждения
Пример: серверная 20 м², IT-оборудование 10 кВт, ИБП 2 кВт потерь, освещение 0.4 кВт, 2 человека 0.3 кВт, ограждения 1 кВт. Итого: 13.7 кВт холода.
Правило: мощность кондиционирования — с запасом 20–30% от расчётной. Для примера выше: 13.7 × 1.3 = 17.8 кВт. Это нужно для резервирования и компенсации пиковых нагрузок.
Типы систем охлаждения
| Тип | Применение | Плюсы | Минусы |
|---|---|---|---|
| Сплит-система (бытовая) | Мини-серверные (до 5 кВт тепла) | Дёшево, просто | Нет резервирования, не рассчитана на 24/7 |
| Прецизионный кондиционер | Средние и крупные серверные | Точный контроль температуры/влажности, работа 24/7, резервирование | Дорого, требует обслуживания |
| Чиллер + фанкойлы | Крупные ЦОД | Масштабируемость, точный контроль | Сложная система, дорогая |
| Свободное охлаждение (free cooling) | ЦОД в холодном климате | Экономия электроэнергии до 80% | Зависимость от внешней температуры |
Организация воздушных потоков
Правильная организация потоков воздуха критична для эффективности охлаждения:
- Холодный/горячий коридор. Стойки расставляются лицом друг к другу (холодный коридор) или спинками (горячий коридор). Холодный воздух подаётся в холодный коридор, забирается из горячего.
- Заглушки в стойках. Пустые юниты закрываются заглушками, чтобы горячий и холодный воздух не смешивались.
- Фальшпол. Перфорированные плитки в холодном коридоре для подачи холодного воздуха. Герметизация кабельных вводов.
- Герметизация. Все щели, отверстия в стенах, полу, потолке — герметизируются. Иначе холодный воздух уходит, эффективность падает.
5. Электропитание
Электропитание — вторая по важности система после климата. Без электричества серверная не работает. Задача — обеспечить бесперебойное, качественное, безопасное питание.
Структура электропитания
| Уровень | Оборудование | Назначение |
|---|---|---|
| 1. Ввод | Вводной автомат, счётчик, УЗИП | Приём электроэнергии от сети, защита от перенапряжений |
| 2. Распределение | ГРЩ (главный распределительный щит), автоматические выключатели | Распределение по группам, защита от перегрузок и КЗ |
| 3. ИБП | Источник бесперебойного питания, аккумуляторные батареи | Бесперебойное питание при отключении сети, фильтрация помех |
| 4. Резервный генератор | Дизельный/газовый генератор с АВР | Длительное автономное питание (часы, сутки) |
| 5. Конечное распределение | PDU (блок распределения питания) в стойках | Подключение серверов, мониторинг потребления |
Расчёт мощности электропитания
Мощность электропитания = суммарная мощность IT-оборудования + потери ИБП + освещение + кондиционирование + запас.
| Компонент | Мощность | Примечание |
|---|---|---|
| IT-оборудование (серверы, коммутаторы, СХД) | 10 кВт | По паспортным данным или замерам |
| Потери ИБП (10%) | 1 кВт | КПД ИБП 90–95% |
| Освещение | 0.4 кВт | 20 Вт/м² × 20 м² |
| Кондиционирование | 14 кВт | ≈ мощность теплопритоков |
| Итого | 25.4 кВт | С запасом 20% — 30 кВт |
Выбор ИБП
| Тип ИБП | Топология | КПД | Применение |
|---|---|---|---|
| Off-line (standby) | Переключение на батарею при отключении | 95–98% | ПК, бытовая техника. Для серверных — нет |
| Line-interactive | Стабилизация напряжения + батарея | 94–98% | Малые серверные (до 3 кВт) |
| On-line (double conversion) | Двойное преобразование AC→DC→AC | 90–95% | Средние и крупные серверные. Идеальное качество питания |
Рекомендация: для серверных — только on-line ИБП. Они обеспечивают идеальное качество питания (чистая синусоида, стабильное напряжение и частота), мгновенное переключение при отключении (0 мс), фильтрацию помех.
Время автономной работы
Время работы от батарей ИБП зависит от нагрузки и ёмкости АКБ:
- 5–10 минут — достаточно для корректного завершения работы серверов.
- 15–30 минут — для ожидания запуска генератора.
- 1–4 часа — для работы без генератора при кратковременных отключениях.
- 8+ часов — для длительной автономной работы (удалённые объекты).
Формула: T = (C × U × η) / P, где C — ёмкость АКБ (А·ч), U — напряжение (В), η — КПД инвертора (0.9), P — нагрузка (Вт).
Резервный генератор
Для серверных Tier II и выше — обязателен. Обеспечивает питание при длительных отключениях.
| Параметр | Рекомендация |
|---|---|
| Мощность | С запасом 20–30% от суммарной нагрузки серверной |
| Тип топлива | Дизель (основной), газ (при наличии газовой сети) |
| АВР (автоматический ввод резерва) | Обязательно. Автозапуск при отключении сети, переключение за 10–30 с |
| Запас топлива | Минимум на 8–24 часа работы |
| Шумоизоляция | Кожух или отдельное помещение |
| ТО | Регулярное (раз в 3–6 месяцев), тестовые запуски |
Заземление
Заземление в серверной — критично. Без него:
- Помехи в сетях, ошибки передачи данных.
- Риск поражения персонала током.
- Выход оборудования из строя при статических разрядах.
Требования:
- Сопротивление заземления — ≤1 Ом (для серверных, ЦОД).
- Отдельный контур заземления (не объединённый с силовым).
- Система уравнивания потенциалов (СУП) — все металлические конструкции, стойки, корпуса оборудования соединяются с заземлением.
- Заземление каждой стойки (PE-проводник к стойке).
- Экранированные кабели — заземление экрана с одной стороны (или с двух, в зависимости от длины).
6. СКС в серверном помещении
СКС (структурированная кабельная система) — это «кровеносная система» серверной. По ней передаются данные между серверами, коммутаторами, системами хранения.
Компоненты СКС серверной
| Компонент | Назначение | Требования |
|---|---|---|
| Серверные стойки | Размещение оборудования | Стандарт 19", высота 42U–47U, глубина 1000–1200 мм, нагрузка до 800 кг |
| Патч-панели | Коммутация медных линий | Cat 6/6A, 24/48 портов, с маркировкой |
| Оптические кроссы | Коммутация оптических линий | LC, SC коннекторы, SM/MM в зависимости от расстояний |
| Коммутационные шнуры (патч-корды) | Соединение оборудования | Длина по потребности, Cat 6/6A для меди, OM3/OM4 для оптики |
| Организаторы кабелей | Упорядочивание патч-кордов | Горизонтальные (1U), вертикальные |
| Кабельные трассы | Прокладка кабелей между стойками | Лотки, короба, фальшпол, верхняя разводка |
Организация кабельных трасс
В серверной кабели прокладываются:
- По фальшполу. Популярный вариант. Кабели укладываются в лотках под перфорированными плитками. Важно: герметизация вводов, чтобы холодный воздух не уходил.
- По верхней разводке. Лотки над стойками. Удобно для обслуживания, но требует высоты потолков.
- Внутри стоек. Вертикальные организаторы, кабельные менеджеры. Для коротких соединений между оборудованием.
Правило: разделение силовых и слаботочных кабелей. Силовые (питание) и слаботочные (данные) кабели прокладываются раздельно, с расстоянием ≥150 мм (или в экранированных коробах). Иначе — помехи, ошибки передачи данных.
Маркировка и документация
В серверной без маркировки — хаос. Требования:
- Каждый кабель — промаркирован с двух концов (откуда → куда).
- Каждый порт патч-панели — подписан (номер, назначение).
- Каждая стойка — номер, схема размещения оборудования.
- Каждое устройство — инвентарный номер, IP-адрес, назначение.
- Документация: паспорт СКС, схемы, спецификации, протоколы тестирования.
7. Пожарная безопасность
Пожар в серверной — катастрофа. Потеря данных, оборудования, простой бизнеса. Пожарная безопасность — комплекс мер.
Системы обнаружения пожара
| Тип извещателя | Принцип работы | Применение |
|---|---|---|
| Дымовой (оптический) | Реагирует на частицы дыма | Основной извещатель для серверных |
| Тепловой | Реагирует на повышение температуры | Дополнительный, для зон с высоким риском возгорания |
| Аспирационный (VESDA) | Забор воздуха через трубки, анализ в блоке | Раннее обнаружение (до видимого дыма), для критичных объектов |
| Линейный (дымовой лучевой) | ИК-луч между двумя блоками | Для больших помещений с высокими потолками |
Системы пожаротушения
| Тип | Огнетушащее вещество | Плюсы | Минусы |
|---|---|---|---|
| Газовое (Novec 1230, FM-200, инертные газы) | Газ, вытесняющий кислород или химически подавляющий горение | Не повреждает оборудование, не проводит ток, без следов | Дорого, требует герметичности помещения |
| Тонкораспылённая вода (ТРВ) | Вода мелкими каплями | Эффективно, дешевле газа | Вода может повредить оборудование (хотя ТРВ минимизирует риск) |
| Порошковое | Порошок | Дёшево | Порошок повреждает оборудование, сложно убирать. Для серверных — не рекомендуется |
| Пенное | Пена | Эффективно | Повреждает оборудование. Для серверных — не применяется |
Важно: для серверных — только газовое пожаротушение (Novec 1230, FM-200, азот, аргон). Вода и порошок повреждают оборудование. Газ не проводит ток, не оставляет следов, оборудование продолжает работать после срабатывания (после проветривания).
Дополнительные меры
- Огнестойкие двери. EI-60 (60 минут огнестойкости), самозакрывающиеся.
- Герметизация помещения. Для газового пожаротушения — обязательна (иначе газ уйдёт).
- Отключение вентиляции. При срабатывании пожаротушения — автоматическое отключение приточно-вытяжной вентиляции.
- Ручные извещатели. Кнопки «Пожар» у выходов.
- Эвакуационное освещение. Знаки «Выход», аварийное освещение.
- Переносные огнетушители. Углекислотные (ОУ) — не повреждают оборудование. Порошковые — нет.
8. Физическая безопасность и СКУД
Серверная — зона ограниченного доступа. Физическая защита — обязательна.
Компоненты системы безопасности
| Компонент | Назначение | Рекомендации |
|---|---|---|
| СКУД (контроль доступа) | Ограничение доступа в серверную | Карты доступа, биометрия (отпечаток, лицо), журнал посещений |
| Видеонаблюдение | Запись входа/выхода, контроль внутри | IP-камеры с записью минимум 30 дней, обзор всех входов, стоек |
| Датчики открытия дверей | Контроль состояния дверей | Интеграция с СКУД, уведомления при несанкционированном открытии |
| Датчики движения | Обнаружение присутствия | Интеграция с системой охраны, освещение по движению |
| Датчики разбития стекла | Защита окон (если есть) | Лучше окон не иметь вообще. Если есть — защитные плёнки, решётки |
| Сейфовые комнаты / шкафы | Для критичного оборудования (контроллеры домена, бэкапы) | Дополнительная физическая защита |
9. Мониторинг и управление (DCIM)
Серверная должна мониториться 24/7. DCIM (Data Center Infrastructure Management) — системы управления инфраструктурой ЦОД.
Что мониторится
| Параметр | Датчики | Критичность |
|---|---|---|
| Температура | В холодном/горячем коридоре, в стойках (сверху, снизу) | Критично |
| Влажность | В помещении | Критично |
| Протечка воды | Под фальшполом, у кондиционеров, у стен с мокрыми зонами | Критично |
| Напряжение питания | На вводе, на выходе ИБП, в PDU | Критично |
| Потребление мощности | Ввод, ИБП, PDU (по стойкам) | Важно |
| Состояние ИБП | Режим работы, заряд АКБ, неисправности | Критично |
| Состояние кондиционеров | Режим работы, неисправности, фильтры | Критично |
| Состояние генератора | Запуск, уровень топлива, неисправности | Критично (если есть) |
| Дым / пожар | Пожарные извещатели | Критично |
| Доступ в помещение | СКУД, видеонаблюдение | Критично |
Системы мониторинга
- Специализированные DCIM-системы. Schneider EcoStruxure, Vertiv, Rittal CMC-III, APC NetBotz. Дорого, но полнофункционально.
- Сетевые контроллеры. Gude, AKCP, ServerTech. Мониторинг параметров, уведомления (email, SMS, SNMP).
- Открытые решения. Home Assistant, Zabbix, Prometheus + Grafana. Дёшево, гибко, требует настройки.
- Облачные сервисы. UptimeRobot, Datadog. Для мониторинга доступности сервисов.
Уведомления
При выходе параметра за пределы нормы — уведомления:
- Email.
- SMS.
- Push в мобильное приложение.
- Telegram-бот.
- SNMP-трапы в систему мониторинга.
Эскалация: если уведомление не обработано за 15 минут — повторное уведомление другому ответственному. За 30 минут — руководителю.
10. Стоимость серверного помещения
| Статья расходов | Мини-серверная (10 м², 3 стойки) | Средняя серверная (30 м², 10 стоек) |
|---|---|---|
| Проект | 100000–200000 ₽ | 300000–500000 ₽ |
| Подготовка помещения (отделка, фальшпол, двери) | 200000–400000 ₽ | 500000–1000000 ₽ |
| Электропитание (ввод, щит, ИБП) | 300000–600000 ₽ | 800000–2000000 ₽ |
| Климат-контроль (кондиционеры) | 200000–500000 ₽ | 600000–1500000 ₽ |
| СКС (стойки, патч-панели, кабели) | 150000–300000 ₽ | 400000–1000000 ₽ |
| Пожаротушение | 200000–500000 ₽ | 500000–1500000 ₽ |
| СКУД и видеонаблюдение | 100000–200000 ₽ | 200000–500000 ₽ |
| Мониторинг (DCIM) | 100000–300000 ₽ | 300000–800000 ₽ |
| Монтажные работы | 300000–600000 ₽ | 800000–2000000 ₽ |
| Итого (без IT-оборудования) | 1550000–3600000 ₽ | 4400000–9800000 ₽ |
Сроки: проектирование — 1–2 месяца, монтаж — 2–4 месяца (зависит от масштаба).
11. Типичные ошибки
- Нет проекта. Серверная собирается «на глаз». Итог — нехватка мощности, перегрев, невозможность расширения.
- Неправильный выбор помещения. Подвал, рядом с санузлом, последний этаж. Протечка = катастрофа.
- Недостаточная мощность кондиционирования. Серверы греют больше, чем кажется. Расчёт теплопритоков обязателен.
- Нет резервирования. Один кондиционер, один ИБП, один ввод. Отказ любого = простой.
- Смешение силовых и слаботочных кабелей. Помехи, ошибки передачи данных. Разделяйте трассы.
- Нет маркировки. Через год никто не разберётся, что и куда подключено. Маркируйте сразу.
- Экономия на ИБП. Off-line ИБП для серверов — риск. Только on-line.
- Нет мониторинга. Проблема обнаруживается, когда уже поздно. Мониторинг 24/7 обязателен.
- Нет пожаротушения. Водное или порошковое — повредит оборудование. Только газовое.
- Плохая герметизация. Холодный воздух уходит через щели, эффективность охлаждения падает.
- Нет заземления. Помехи, риск поражения током, выход оборудования из строя.
- Нет резервного генератора. Для Tier II и выше — обязателен. ИБП даёт только 15–30 минут.
- Самостоятельное проектирование. Серверная — сложный инженерный объект. Ошибки дорого обходятся.
12. Практические рекомендации
- Заказывайте проект. Серверная — не место для экономии на проектировании. Проект окупается многократно.
- Выбирайте помещение тщательно. Не подвал, не последний этаж, не рядом с мокрыми зонами.
- Закладывайте запас 30–50%. По мощности, площади, охлаждению. Расширение дешевле, чем переделка.
- Резервируйте критичные системы. N+1 для кондиционеров, ИБП, вводов. Для Tier III — возможность обслуживания без простоя.
- Используйте on-line ИБП. Только они обеспечивают идеальное качество питания.
- Газовое пожаротушение. Только оно безопасно для оборудования.
- Мониторинг 24/7. Температура, влажность, питание, пожарная безопасность, доступ. Уведомления с эскалацией.
- Маркируйте всё. Кабели, порты, стойки, устройства. Документируйте изменения.
- Регулярное ТО. Кондиционеры, ИБП, генератор, пожарная система — всё требует обслуживания.
- Тестируйте резервирование. Периодические тесты: отключение ввода, проверка запуска генератора, переключение на резервный кондиционер.
FAQ — короткие ответы
Можно ли организовать серверную в обычном офисе?
Да, но с ограничениями. Нужно выделенное помещение (не open space), с контролем температуры, влажности, доступа. Минимум: отдельная комната, кондиционер 24/7, ИБП, СКУД, пожарная сигнализация. Для малого офиса (до 20 сотрудников) — достаточно серверного шкафа с охлаждением. Для среднего — полноценная мини-серверная.
Сколько электричества потребляет серверная?
Зависит от оборудования. Ориентировочно: IT-оборудование — основная статья (5–50 кВт для средних серверных), кондиционирование — примерно равно IT-нагрузке, ИБП — потери 5–15%, освещение — 0.5–2 кВт. Итого: для серверной на 10 стоек — 20–40 кВт. PUE (коэффициент эффективности) — 1.5–2.0 для средних серверных.
Нужен ли фальшпол в серверной?
Для средних и крупных серверных — да. Фальшпол (высотой 30–60 см) используется для прокладки кабелей и подачи холодного воздуха через перфорированные плитки. Для малых серверных (1–3 стойки) можно обойтись верхней разводкой кабелей и прецизионными кондиционерами с нижней подачей.
Какое пожаротушение лучше для серверной?
Только газовое: Novec 1230, FM-200, инертные газы (азот, аргон, Inergen). Газ не повреждает оборудование, не проводит ток, не оставляет следов. Водное и порошковое пожаротушение повреждают оборудование — для серверных не подходят. Стоимость газового пожаротушения — 500–1500 тыс. ₽ в зависимости от объёма помещения.
Сколько стоит обслуживание серверной в год?
Ориентировочно: ТО кондиционеров — 100–300 тыс. ₽/год, ТО ИБП (замена АКБ раз в 3–5 лет) — 200–500 тыс. ₽, ТО генератора — 100–200 тыс. ₽, ТО пожарной системы — 50–150 тыс. ₽, ТО СКС — 50–100 тыс. ₽. Итого: 500–1250 тыс. ₽/год для средней серверной. Это 10–20% от стоимости создания.
Что такое PUE и почему это важно?
PUE (Power Usage Effectiveness) — коэффициент эффективности ЦОД. Формула: PUE = общая мощность / мощность IT-оборудования. Идеальный PUE = 1.0 (вся энергия идёт на IT). Средний PUE для коммерческих ЦОД — 1.5–1.8. Для корпоративных серверных — 2.0–2.5. Чем ниже PUE — тем эффективнее серверная. Снижение PUE — задача оптимизации охлаждения, использования свободного охлаждения, повышения КПД ИБП.
Можно ли сделать серверную без резервного генератора?
Для Tier I — да. Для Tier II и выше — нет. ИБП даёт только 15–30 минут автономии. Если отключение длится дольше — серверы отключатся. Для критичных систем (банки, медицина, e-commerce) простой недопустим. Генератор с АВР запускается за 10–30 секунд и обеспечивает питание часами/сутками. Альтернатива — аренда мощности у ЦОД (colocation).
Материал подготовлен специалистами raks-russia.ru — проектирование и монтаж серверных помещений, СКС, систем электропитания, климат-контроля, пожарной безопасности.