Сложно о простом. Все, что бы вы хотели знать о SFP модулях. Часть 6. Топ-10 частых ошибок при выборе и эксплуатации SFP

Приветствую, коллеги! Это опять @ProstoKirReal ^[1].

Мы с вами прошли большой цикл статей про SFP-модули. Обсудили историю развития, типы модулей, скорости, DAC/AOC, оптические кабели, пассивные компоненты, а также технологии WDM, CWDM и DWDM:

Сначала я хотел вам рассказать о будущем SFP-модулей. Но потом подумал, что будущее еще не наступило и нужно жить настоящим. И в настоящее время я очень часто вижу, как многие сетевые инженеры ошибаются при выборе модулей или сталкиваются с неопределенными проблемами.

Поэтому в данной статье поговорим о самых частых ошибках при выборе и эксплуатации оптических трансиверов. Часть из них очевидна, часть нет. Но именно на них регулярно теряются часы диагностики, нервы инженеров и деньги компаний.

❯ Зачем нужна эта статья?

Данная статья нам нужна для того, чтобы понять базовые понятия и детально рассмотреть:

• как читать даташиты;

• как ошибаются при выборе SFP;

• почему одинаковые на вид модули бывают несовместимы;

• что может «сжечь» приёмник;

• как не попасть на WDM и MPO;

• финальный чек-лист «что всегда проверять перед покупкой».

Важно! Данный материал — это неотъемлемая часть всего цикла. Повторяться я не буду, лучше изучить все предыдущие части.

❯ Как читать даташиты?

Если честно, на практике, большинство проблем с трансиверами начинается еще до установки в коммутатор.

Не в стойке. 

Не на линии.

Не из-за «кривого патча».

А в момент покупки, когда модуль выбирают по принципу:

• «Ну это же SFP, значит подойдет» (хотя порт может быть SFP+);

• «По характеристикам такой же, как наш старый» (хотя может стоять vendor lock-in на оборудовании).

И мое самое любимое, когда покупают непонятного качества с «левых» сайтов, где из характеристик это — «SFP-модуль электрический». А также есть случаи, когда покупаешь модуль от именитого вендора, а оказывается «паль».

Для того чтобы не нарваться на подделку, нужен хороший поставщик, а для остальных пунктов нужен даташит.

Даташит (datasheet) — это официальная техническая документация производителя, содержащая информацию об устройстве, его характеристиках и рекомендациях по применению. По сути, даташит — это паспорт модуля, где написано:

• что это вообще за устройство;

• с чем оно работает;

• на каком расстоянии;

• по какому кабелю;

• на каких стандартах.

Разберемся, на что смотреть в первую очередь.

❯ Три основных параметра

Первое, что проверяем — это три основных критерия:

• форм-фактор;

• тип коннектора;

• тип волокна.

Это самые важные параметры для SFP, которые скрыты в названии самого модуля. Разберем каждый отдельно:

Форм-фактор (тип интерфейса и его скорость)

Самые распространенные примеры:

• SFP (1G);

• SFP+ (10G);

• SFP28 (25G);

• QSFP+ (40G);

• QSFP28 (100G).

Тип коннектора

Самые распространенные примеры:

• RJ-45;

• LC;

• SC;

• MPO/MTP.

Тип среды:

• Медь;

• MM;

• SM.

Как и описал выше, эти параметры уже есть в названии модуля.

Например, если SFP-Copper-1G ^[2], то соответственно это:

• форм-фактор — SFP;

• скорость — 1G;

• тип коннектора — RJ-45;

• тип среды — медь.

Еще пример QSFP+SR4 ^[3] и QSFP+IR4-PSM ^[4].

У них обоих одинаковые параметры:

• форм-фактор — QSFP+;

• скорость — 40G;

• тип коннектора — MPO.

Но различаются они типом среды. SR4 ^[3] — это MM, а IR4-PSM ^[4] — это SM.

Этот небольшой нюанс может повлиять на дальнейшие затраты.

Вроде бы все правильно. В порт помещается, кабеля в коннекторы подключаются, но связи нет.

С первого взгляда все эти названия могут быть сложными. Лично я просто запомнил. Но в даташите, эти основные параметры, как правило, описаны.

Важно! И да, есть исключения, модуль может называться одинаково, но может иметь коннектор, как LC, так и SC.
Например, SFP-1.25G-W43S20, Tx/Rx: 1490/1310nm 20km ^[5] и SFP-W43S20D, 1.25G Tx/Rx: 1490/1310nm 20km ^[6].

Оба этих модуля:

• форм фактор — SFP;

• тип волокна — SM;

• скорость — 1.25G;

• длина — 20 км.

Но, у одного коннектор SC, у другого LC. В этом примере отличие всего в одной букве артикула — W43S20D. Нужно всегда проверять даташит и уточнять коннектор, особенно для WDM модулей!

Другие параметры

Дальность

В даташите всегда есть расстояние. Например, QSFP+ SR4 ^[3]:

•  до 100 м по OM3;

• до 150 м по OM4.

У разных производителей обычно эти параметры примерно одинаковые, но бывают и исключения.

Например, у одного производителя SFP+Copper 10G ^[7]может быть до 30 м Cat6/Cat6A, а у другого 20 м.

С этим стоит быть внимательнее и учитывать данный параметр.

Длина волны

У SR4 ^[3] указано — 850 нм, то это многомодовая оптика.

Если видите:

• 1310 нм;

• 1490 нм;

• 1550 нм;

• Tx/Rx разные значения

Это может означать одномодовые, дальнобойные или специальные решения.

Если длину волны не проверить, тогда можно купить неверные модули (например два одинаковых WDM модуля, как раз о них расскажу ниже) и потом удивляться, почему линка нет.

Важно! Выше я написал, что «может быть одномод». Это не ошибка! 99,9% многомодовых SFP-модулей работают именно на длине волны 850 нм. Но есть редкие модели, для многомода на длине волны 1310 нм, которые используются в отдельных сценариях. Например этот ^[8].

Оптический бюджет и другие параметры дБм

дБм или дБмВт (децибел-милливатт) — это единица измерения уровня мощности, выраженная с помощью логарифмической децибельной (дБ) шкалы, относительно одному милливатту (мВт). Она широко используется радиотехниками, специалистами в области микроволновой и оптоволоконной связи, а также инженерами для измерения мощности передаваемых сигналов по логарифмической шкале, которая позволяет кратко выражать как очень большие, так и очень маленькие значения. дБВт — аналогичная единица измерения, но относительно одного ватта (1000 мВт), а не милливатта.

Источник ^[9]

Если человеческим языком, дБм — это параметр, необходимый для расчета оптической мощности на SFP-модулях.

Даже, если у вас есть запас по дальности, но по пути много потерь, тогда сигнал просто не дойдет до получателя. Всегда нужно учитывать данный параметр.

Потребление питания и нагрев

Вот пункт, который часто игнорируют. Например в даташитах:

• QSFP+ SR4 ^[3] — 1.5 Вт;

• SFP+ Copper ^[7] — 3 Вт.

SFP+RJ-45 ^[7]модули вообще очень горячие.

Почему это важно:

• плотная установка в свитче;

• плохая вентиляция;

• старое оборудование;

• ограничения по мощности порта.

Модуль будет работать, пока не нагреется.

Температурный диапазон

Стандартные модули для ЦОДов и серверных имеют рабочую температуру от 0°C до +70°C.

Но для шкафа на улице зимой уже не подойдет. Там нужен industrial диапазон.

Совместимость и стандарты

Смотрите строки:

• MSA SFF-8436;

• SFF-8431;

• IEEE 802.3an и т.д.

Это означает соответствие отраслевым стандартам.

Но!

Даже если стандарт подходит, коммутатор может не принять модуль из-за vendor lock-in. Особенно любят это некоторые западные вендоры.

Поэтому нужно всё тщательно изучить, а лучше взять пару модулей на тест, с конкретно вашим оборудованием. 

Даташит экономит часы диагностики, деньги и нервы. Потому что модуль, который «вроде подходит» — обычно не подходит.

Ну и теперь перейдем к главной части — ошибки при выборе SFP-модулей.

❯ Ошибка №1. MM и SM

Вы не представляете, как часто путают не только модули (многомод MM vs одномод SM), но и подключают не те патч-корды!

Это прям классика.

Главная подсказка на патч-кордах — это цвет оболочки:

• оранжевый/бирюзовый — MM;

• желтый — SM.

Но ориентироваться только на цвет нельзя. Смотреть нужно маркировку кабеля и характеристики модуля.

Бывают случаи, когда подключают MM оптику с SM-модулями. Это даже может заработать на короткой дистанции. 

Важно! Никогда так не делайте на продуктовом трафике. Воспользоваться можно только в лабораторных условиях.

И да, MM-модуль в SM-линии работать не будет.

❯ Ошибка №2. Неправильная длина волны

Многие смотрят только на скорость, забывая посмотреть длину волны.

Например:

• 850 нм;

• 1310 нм;

• 1550 нм;

• CWDM каналы;

• DWDM каналы.

Если на одной стороне один тип оптики, а на другой другой, то линка может не быть вообще.

Особенно весело бывает с WDM-модулями.

❯ Ошибка №3. Два одинаковых WDM модуля

Для обычного дуплекса можно поставить одинаковые модули по обе стороны. Но для WDM так делать нельзя. Нужна парная комбинация.

Например:

• сторона А: TX 1310/RX 1490 ^[12];

• сторона Б: TX 1490/RX 1310 ^[5].

Очень часто вендоры предлагают приобрести каждый модуль отдельно, но иногда сразу оба модуля парой.

Один из коллег поделился следующим:

Иногда встречаю, что купят одинаковые WDM, а потом искренне удивляются почему не работает. Приходится на пальцах объяснять, что парные не равно одинаковые.

❯ Ошибка №4. Ферулы

Даже если модуль по длине волны подошел и тип оптики верный, очень часто забывают про ферулы!  

FLAT, UPC и APC — это полировки. Кратко, чем отличаются:  

• FLAT — плоский торец (устаревшее, высокие потери);

• UPC (Ultra Physical Contact) — сфера (стандарт для сетей, обычно синий цвет);

• APC (Angle Physical Contact) — 8° скос (телефония/CATV, низкое обратное отражение, зеленый цвет).

Да, иногда люди пытаются состыковать это между собой.

Результат:

• повышенные потери;

• BER, перегрев и нестабильность работы SFP-модуля из-за обратных отражений;

• повреждение ферулы.

Будьте осторожны! Адаптеры/розетки/проходные адаптеры тоже нужно подбирать под тип ферул. Подключив зеленый патч-корд в синюю розетку можно повредить ферулу и столкнуться с лишним перегревом SFP-модуля или потери сигнала будут очень высокими.

❯ Ошибка №5. Не посчитали оптический бюджет

Можно поймать ситуацию, когда вроде линк поднялся, но есть ошибки CRC, флапы или нестабильная работа.

Причина может быть не в том, что модуль на 10 км поставили в линию 18 км (это прям на уровне фантастики), а просто не посчитали оптический бюджет.

Обязательно при расчетах нужно учитывать:

• затухание кабеля;

• сварки;

• патч-панели;

• кроссы;

• загрязнение коннекторов;

• оптические сплиттеры;

• TAP-ответвители.

И главное — закладывать запас по оптическому бюджету.

❯ Ошибка №6. Слишком мощный модуль на короткой линии

Если с затуханием все понятно, неправильно рассчитал оптический бюджет — держи затухание, то с переизбытком мощности уже менее очевидная проблема.

Если модули мощные (особенно 80км+), а патч-корд короткий — мощность передатчика (Tx) может перегрузить приёмник (Rx) на другой стороне.

Лучше конечно ставить модуль под реальные задачи, но решением этой проблемы является оптический аттенюатор.

И да, НЕ СМОТРИТЕ В ТОРЕЦ!  Можно повредить зрение/сетчатку! Это реально опасно.  

❯ Ошибка №7. Перепутали RX и TX

Кажется смешным, но встречается регулярно. При этом инженер может быть не виноват, встречал ситуации, когда оптический кросс просто развели неправильно. Особенно обидно, когда на патч-корде стоит защелка и нужно пальцы сломать, чтобы её расщелкнуть.

❯ Ошибка №8. Грязная оптика

Самая массовая проблема из всех.

Пыль, жир от пальцев, мусор, микрочастицы. Визуально все хорошо, а линк работает плохо.

Тут самое главное:

• не трогать ферулу руками;

• транспортировать с закрытыми колпачками;

• использовать чистящие карандаши и салфетки.

Даже то, что вы взяли новый патч-корд и подключили его к устройству не гарантирует его 100% работоспособность. Иногда одна пылинка создает больше проблем, чем весь коммутатор.

❯ Ошибка №9. MPO/MTP — «они же одинаковые»

Зачастую вижу в интернете мнение, что MPO полностью совместим с MTP, но это не так. Проверьте информацию, прежде чем подключать патч-корды к несовместимому модулю.

Даже если он будет работать, не факт, что повторное подключение даст стабильный результат.

❯ Ошибка №10. MPO/MTP кабели Тип A/B/C 

В MPO/MTP патч-кордах есть типы A, B, C. Это про распиновку (кроссировку) внутри.

Есть разные схемы распиновки:

• Type A — прямой;

• Type B — перекрестный;

• Type C — попарно перекрестный.

Купив не тот тип, можно долго искать, почему линк не поднимается.

❯ Дополнительные проблемы

Ну и стоит упомянуть еще три дополнительных нюанса, на которые мы не можем повлиять заранее, но стоит учитывать их.

❯ Брак

Это очень редкая проблема, но я с ней сталкивался.

Одно дело перепутают цветную маркировку на оптике — не страшно, переткнем. Другое дело перепутают кроссировку внутри кабеля MPO/MTP.

Ловится только тестером жил.

А еще изготовитель может перепутать маркировку на Breakout-кабеле. Тут также без тестера не обойтись.

❯ Физическое повреждение патч-корда

У самых дешевых оптических патч-кордов есть одна особенность. Они ломаются у основания коннекторов. Это можно не сразу заметить, особенно если их неправильно транспортировали. Очень часто встречал ситуацию — оптику прокинули между стоек, берешь за коннектор, а он болтается.

❯ Vendor lock-in

Vendor lock-in (привязка к вендору) — это критическая зависимость клиента от проприетарных технологий, продуктов или услуг конкретного вендора. Переход на альтернативные решения становится невозможным или слишком дорогим из-за высоких затрат, несовместимости данных или потери функциональности.

Особенно этим известны некоторые вендоры, например Cisco.

Коммутатор проверяет EEPROM модуля:

• Vendor Name;

• Part Number;

• Код производителя.

И если ему что-то не понравилось, модуль может не определиться вовсе. Иногда даже перепрошивка не поможет.

❯ Финальный чек-лист перед покупкой

Всегда проверяйте:

• тип коннектора;

• тип волокна/среды;

• тип интерфейса;

• форм-фактор;

• скорость;

• длину волны;

• дальность;

• бюджет линии;

• совместимость с оборудованием;

• температурный режим;

• производителя.

❯ Заключение

В данной статье я попытался рассказать про банальные (и не очень) ошибки на этапе выбора, монтажа или мелочах, которые забыли проверить.

Поэтому хороший инженер отличается не тем, что умеет чинить аварии. А тем, что умеет не допускать их заранее.

Коллеги, какие самые странные проблемы с SFP встречались у вас?

Пожалуйста, напишите в комментарии, думаю многим будет интересно и полезно узнать чужой опыт!

P.S. Благодарю всех, кто дочитал этот цикл до конца, потрачено много человеко-часов, сил и энергии. Надеюсь, что вся эта информация хотя бы частично, но вам пригодится!

Немного важной информации

Я создал Telegram‑канал ^[17] от сетевика для сетевиков. 

Без воды, с практикой, реальными кейсами и нормальным человеческим языком. Если ты сетевой инженер, системный администратор, айтишник, студент или просто любишь разбираться, как все работает тебе сюда. ^[17]

Что тебя ждет?

➖ Простые объяснения сложных сетевых технологий. От VLAN, BGP и DWDM до дата-центров, оптики и магистралей.

➖ Разборы аварий, крупных сбоев и странных проблем, которые случаются в реальных сетях.

➖ Практика из жизни инженеров. Ошибки, решения, полезные мелочи и то, чему обычно не учат.

➖ Мини-статьи и заметки, которые можно прочитать за пару минут и сразу применить в работе.

Может быть интересно: