Разделение кабелей питания и передачи данных в центре обработки данных: практическое руководство по развертыванию микромодулей

Вы только что утвердили центр обработки данных на базе микромодулей для обработки новой периферийной рабочей нагрузки. Поставщик обещает быстрое развертывание, но настоящая проверка наступает, когда в один и тот же день приезжают электрик и сетевая команда. Если принципы разделения силовых и информационных кабелей, принятые в центрах обработки данных, не заложены в конструкцию интегрированного шкафа, вам придется потратить часы на перепрокладку кабелей и устранение помех. Именно поэтому организация кабельной разводки в микромодульных центрах обработки данных — это не просто косметическая деталь, а вопрос надежности.

Почему разделение кабелей имеет важное значение в центре обработки данных на базе интегрированных микромодулей

В традиционном серверном помещении имеются отдельные фальшполы, подвесные лотки и, возможно, даже отдельные помещения для распределения электроэнергии. В интегрированном микромодульном центре обработки данных системы электропитания, охлаждения и сети объединены в одном корпусе. Такая плотность позволяет сэкономить площадь и ускорить развертывание, но при этом означает, что кабели электропитания и кабели передачи данных проходят в одном физическом пространстве. Без целенаправленного разделения вы рискуете столкнуться с электромагнитными помехами (ЭМИ), случайными отсоединениями во время технического обслуживания и «крысиным гнездом» кабелей, которое превращает поиск неисправностей в настоящий кошмар.

Краткий ответ: вам нужны четко определённые маршруты для интерфейсов питания, передачи данных и охлаждения с соблюдением расстояний физического разделения и чёткими обозначениями. Речь идёт не просто об аккуратности — речь идёт о бесперебойной работе. Свободно висящий кабель питания, лежащий на оптоволоконном патч-корде, может вызывать периодические сбои, которые крайне сложно диагностировать. А когда вам нужно модернизировать коммутатор или добавить сервер, вам не захочется распутывать этот клубок, чтобы найти нужный порт.

Сравнение подходов к организации кабельной разводки в центрах обработки данных с микромодулями

Не все встроенные шкафы организуют прокладку кабелей одинаково. Ниже приводится практическое сравнение распространенных подходов, которые предлагают такие поставщики, как VERHI и другие.

Подход	Метод разделения	Типичное время настройки	Работы по поиску неисправностей	Гибкость при модернизации
Одиночный вертикальный лоток	Источник питания и устройства передачи данных размещены на одном лотке с неплотной разделительной перегородкой	2–3 часа	Высокий — пересечение кабелей	Низкий — необходимо доработать лоток
Два вертикальных лотка	С одной стороны — питание, с другой — данные, с физическим барьером	1–2 часа	Умеренный — зоны с хорошей видимостью	Средний уровень — добавление кабелей внутри зон
Раздельные передние и задние	Питание подключается сзади, данные — спереди, отдельные проходные втулки	1 час	Низкий — каждая сторона выделена отдельно	Высокий — добавить, не затрагивая другой тип
Модульные навесные лотки	Питание сверху, данные снизу, с разгрузкой от натяжения в точках ввода	1,5 часа	Низкий — визуальное разделение	Высокий — доступ к лоткам

Таблица не является исчерпывающей, но она демонстрирует имеющиеся компромиссы. Для большинства развертываний разделение передней и задней частей или использование двух лотков с перегородкой обеспечивают оптимальный баланс между скоростью и удобством обслуживания. Главное — выбрать конструкцию, соответствующую привычкам вашей команды: если ваши технические специалисты привыкли к доступу к источникам питания сзади, не заставляйте их перелезать через кабели передачи данных.

Проектирование с учетом возможности разъединения: точки ввода, разгрузка от натяжения и маркировка

Правильная организация кабельной разводки начинается с физических точек ввода в шкаф. Каждый кабель — будь то трёхфазное питание или кабель передачи данных Cat6a — должен вводиться через специальную прокладку или втулку. Это предотвращает износ изоляции со временем из-за контакта с острыми краями. Не менее важно и разгружение от натяжения: кабель, за который дернут во время технического обслуживания, не должен тянуть за разъем. Используйте застежки-липучки или кабельные лестницы для фиксации кабелей вблизи точки ввода, но оставляйте сервисную петлю, чтобы можно было вытащить шкаф для обслуживания, не отсоединяя все соединения.

Именно в вопросе маркировки большинство проектов по развертыванию терпит неудачу. Вам может показаться, что вы запомните, какой автоматический выключатель питает какой PDU, но через полгода вы этого уже не вспомните. Используйте этикетки с цветовой маркировкой для линий питания (красный — для линии A, синий — для линии B) и линий передачи данных (желтый — для оптоволокна, зеленый — для медных кабелей). Распечатывайте маркировку на термопринтере — рукописные надписи со временем стираются. Указывайте также начальную и конечную точки кабеля, а не просто случайный номер. Например: 'PDU-A1 → стойка 3, сервер 12, блок питания 1'.

Минимальные расстояния между объектами: что говорят цифры

Не существует универсального стандарта, предписывающего 'соблюдать расстояние между кабелями питания и передачи данных ровно 12 дюймов', однако инженерные рекомендации TIA и BICSI предполагают, что для кабелей из неэкранированной витой пары (UTP) следует соблюдать расстояние не менее 50 мм (2 дюйма), а для силовых кабелей мощностью свыше 5 кВА — до 300 мм (12 дюймов). На практике внутри микромодуля зачастую невозможно обеспечить столько места. Именно поэтому экранированные кабели или оптоволоконные линии — ваш лучший помощник.

Оптоволоконные кабели не подвержены электромагнитным помехам, поэтому их можно прокладывать рядом с силовыми кабелями — главное, защитить их от механических повреждений. В случае медных кабелей для передачи данных используйте кабели категории Cat6a или выше с экранированием (F/UTP или S/FTP), если вам приходится прокладывать их параллельно силовым кабелям на расстояние более одного метра. Кроме того, избегайте прокладки кабелей передачи данных в одном пучке с кабелями питания, даже если они разделены несколькими сантиметрами. Пересечение под углом 90 градусов гораздо лучше, чем длинная параллельная прокладка.

Интерфейсы охлаждения и прокладка кабелей: не препятствуйте воздушному потоку

В микромодульных центрах обработки данных системы охлаждения часто встроены в стойки — либо в виде теплообменников на задних дверцах, либо в виде блоков охлаждения, установленных между рядами серверов. Для этих устройств необходимы свободные пути прохождения воздушного потока. Кабели, свисающие перед охлаждающим змеевиком или перекрывающие входной канал вентилятора, ухудшают эффективность охлаждения, повышают показатель PUE и могут привести к появлению «горячих точек». Всегда прокладывайте кабели по специальным кабельным направляющим, расположенным отдельно от пути воздушного потока. Например, в интегрированных шкафах VERHI обычно предусмотрены вертикальные кабельные направляющие по бокам, вдали от охлаждающих блоков.

Кроме того, следует учитывать вес кабельных пучков. Плотный пучок из 50 кабелей Cat6a может весить более 10 кг (22 фунта). Если вы подвешиваете его на вертикальный кабельный органайзер, убедитесь, что он рассчитан на такую нагрузку. В противном случае со временем органайзер может провиснуть и зажать кабели, что приведет к периодическим сбоям в работе.

Пошаговый контрольный список по разведению кабелей питания и передачи данных при развертывании центра обработки данных

Когда вы прибудете на объект и будете готовы к монтажу, следуйте данному контрольному списку, чтобы соблюсти принятые в центре обработки данных правила разделения кабелей питания и передачи данных. Он основан на опыте, полученном в ходе сотен внедрений на периферии, а не только на теории.

1. Убедитесь, что все точки подключения питания и передачи данных четко обозначены на корпусе и что проходные втулки находятся в исправном состоянии.
2. Сначала проложите кабели питания от PDU к блокам питания каждого сервера, закрепляя их с помощью липучек через каждые 30 см (12 дюймов) вдоль выделенного маршрута прокладки кабелей питания.
3. Прокладывайте кабели для передачи данных вторыми, используя отдельный кабельный путь. Не допускайте пересечения кабелей питания под углом менее 90 градусов.
4. Установите фиксаторы или крючки для разгрузки натяжения сзади каждого сервера, чтобы кабели не тянули за разъемы.
5. Промаркируйте оба конца каждого кабеля по единой схеме (например, «стойка-сервер-порт»).
6. Для медных кабелей передачи данных следует соблюдать расстояние не менее 50 мм от силовых кабелей, пропускающих мощность менее 2 кВА; при более высокой мощности расстояние следует увеличить до 100 мм.
7. Если вам необходимо проложить кабель параллельно на расстояние более 1 метра, используйте экранированный кабель или перейдите на оптоволокно.
8. Перед тем как закрыть шкаф, включите всё оборудование и с помощью кабельного тестера проверьте целостность кабельной линии и отсутствие чрезмерных перекрестных помех.
9. Зафиксируйте окончательную схему прокладки кабелей с помощью фотографий и простой схемы. Сохраните эти материалы в системе управления активами.
10. Планируйте проведение ежеквартального визуального осмотра, чтобы вовремя обнаружить ослабленные стяжки или изношенные прокладки, прежде чем они станут причиной проблем.

Доступ для технического обслуживания и будущие модернизации: проектирование с учетом различных сценариев'

Никому не нравится думать о сбоях, но они случаются. Когда срабатывает PDU или выходит из строя порт коммутатора, нужно быстро найти нужный кабель. Именно поэтому между работающими устройствами следует оставлять как минимум одно свободное место в высоте (U) для кабельных сервисных петель. А при добавлении нового сервера не должно возникать необходимости перемещать существующие кабели. Встроенные шкафы с модульными кабельными органайзерами позволяют устанавливать дополнительные вертикальные органайзеры без отключения стойки.

Еще один практический совет: используйте патч-корды разных цветов для разных VLAN или функций. Это может показаться мелочью, но когда перед вами 48 портов, цветовая маркировка позволяет сэкономить несколько минут. А эти минуты складываются, когда приходится устранять сбои в работе.

Распространенные ошибки и как их избежать

Даже при самых благих намерениях команды допускают ошибки. Вот те из них, которые я чаще всего наблюдаю при развертывании микромодулей.

• Ошибка: Прокладка кабелей питания и передачи данных через одну и ту же прокладку. Решение: Используйте отдельные точки ввода для каждого типа кабеля.
• Ошибка: Отказ от использования устройства разгрузки натяжения под предлогом того, что шкаф является 'временным'. Решение: Даже временные стойки нуждаются в устройстве разгрузки натяжения — резкое выдергивание кабеля может повредить порт.
• Ошибка: откладывать маркировку кабелей на 'позже'. Решение: маркируйте по ходу работы. «Позже» никогда не наступит.
• Ошибка: Использование неэкранированной медной проволоки для прокладки длинных параллельных линий электропередачи. Решение: Для таких линий следует использовать оптоволоконный или экранированный кабель.
• Ошибка: перекрытие потока охлаждающего воздуха пучками кабелей. Решение: прокладывайте кабели вдоль предусмотренных для этого направляющих, а не через охлаждающие змеевики.

Подход компании VERHI к организации кабельной разводки в интегрированных центрах обработки данных на базе микромодулей

Компания VERHI проектирует свои микромодульные центры обработки данных с отдельными вертикальными кабельными каналами для электропитания и передачи данных, а также с чётко обозначенными зонами ввода кабелей в верхней и нижней частях. Сама по себе эта особенность не является уникальной — многие поставщики так поступают, — но важно, как именно это реализовано. Размеры каналов рассчитаны на реальную плотность прокладки кабелей, а не только на один коммутатор и пару серверов. Кроме того, шкафы оснащены встроенными точками разгрузки натяжения сзади, где во время технического обслуживания серверы чаще всего тянут за кабели.

Кроме того, к каждому встроенному шкафу мы прилагаем руководство по прокладке кабелей, в котором указаны рекомендуемые маршруты прокладки и расстояния между кабелями. Это не толстый сборник общих теоретических сведений — руководство составлено специально для той модели, которую вы устанавливаете. Оно основано на многолетнем практическом опыте, а не просто на чертежах, созданных в CAD.

Выводы по вопросу разделения кабелей питания и передачи данных: передовые практики для центров обработки данных

Принципы разделения кабелей питания и передачи данных в центрах обработки данных — это не роскошь, а необходимое условие для надежного и удобного в обслуживании развертывания микромодулей. Не нужно быть экспертом по прокладке кабелей, чтобы сделать всё правильно. Соблюдайте расстояния между кабелями, используйте маркированные точки ввода, устанавливайте устройства снятия натяжения и не перекрывайте пути охлаждения. Вот и всё. В результате вы сократите время на настройку, ускорите поиск неисправностей и снизите риски при модернизации.

Прежде чем заказать следующий интегрированный шкаф, попросите поставщика предоставить подробную схему прокладки кабелей. Если он не сможет вам её показать, это должно вас насторожить. Надежный поставщик подробно объяснит вам, как проходят пути питания и передачи данных, и укажет, где обеспечено их разделение.