Вопрос: QSFP28 - есть что-то вроде кроссового кабеля?


Не могу найти ничего для этого;)

Создание кластера Hyperconvergend как системы разработки. Это для нас современное состояние.

У вас есть 2 машины для запуска, при этом переключатель должен быть установлен примерно через 4 недели. Оба сервера имеют 2x100gb ethernet-карты от Mellanox (ConnectX 4)

Подключая кабель непосредственно между ними, я получаю ссылку вниз. Я вижу, что ссылка trie (d) появится, но не удалась, соединение немедленно распадается.

Прямое подключение к серверу между двумя картами Ethernet не поддерживается QSFP28? Что-нибудь еще я должен знать? В худшем случае я «вставляю» ссылку 100g, пока не придет переключатель.


6
2018-06-30 14:53


Источник




Ответы:


Нет никакого старого переходного шнура кроссовера старого стиля. Правильно работающая пассивная медь (вы не используете оптику, не так ли?) QSFP-связь должна работать независимо от того, как вы переключаете Vs без использования. Вы используете один из них или это что-то стороннее?

http://www.mellanox.com/products/interconnect/ethernet-direct-attach-copper-cables.php

Ссылка Mellanox thread (без ответа до сих пор).

https://community.mellanox.com/thread/4125


8
2018-06-30 16:02



Nah, получил некоторые из fs.com - это первый раз, когда мы отправляемся на SFP28. 2 сервера, 2 кабеля до сих пор - оба не подключаются. Драйверы являются текущими. Вчера прошивка была исправлена. Кабель, о котором идет речь, является fs.com/products/47096.html - TomTom
Это должно быть хорошо. Возможно, поднимите его как проблему поддержки с поставщиком вашего сервера. Вы сделали то, что я сделал бы. - Tom O'Connor
Совершено, Также я не соглашаюсь с Mellanox. - TomTom
Confiormed. Я удалил 2 кабеля, подключил Mellanox адаптеры (QSFP28-> SFP28) и подключил кабели 10G и voila, работает как шарм (хотя и с пониженной производительностью). Проблема с кабелем;) - TomTom
@TomTom FS.com имеет специфические для поставщика трансиверы, чтобы избежать таких проблем - проверьте fs.com/c/mellanox-qsfp28-to-qsfp28-3370 - pauska


Порты QSFP28 похожи друг на друга (как SFP, SFP +, ...), нет никакой разводки MDI и MDI-X, как для витой пары. Поэтому прямые кабели вообще не используются. ЦАП имеют интегрированный кроссовер, о чем не о чем беспокоиться.

Возможно, ваш ЦАП несовместим с сетевыми адаптерами, некоторые из них очень придирчивы к брендингу. Также возможно, что сетевые карты не настроены одинаково. Вы должны проверить сообщения драйвера о том, почему ссылка не появляется.


3
2018-06-30 15:58



Может быть, два сетевых адаптера ждут какой-то инициативы друг от друга? Раньше ранние карты ethernet-сетей IIRC вели себя так же, как без переключателя, даже с правильным кроссовым кабелем ... может быть, что старый призрак вернулся ... - rackandboneman
Ницца. Отстой. Любая идея, как вызвать это? Также я вижу ссылку, которая появляется, а затем исчезает. Так что, похоже, он пытается ее поднять. - TomTom
@TomTom Сообщает ли NIC ссылку, чтобы она появилась? Или это просто свет, который появляется и выходит сразу после этого? Это может просто сигнализировать о вставке SFP - наблюдать за дальней стороной фактического ответа на связь. - Zac67
@rackandboneman Ситуация несколько другая: автосогласование 1-го поколения было ошибочным, а иногда и не работало. ЦАП знает параметры ссылки наверняка. - Zac67
Нет, я вижу ссылку, инициализирующую каждые X минут в Windows. За этим следует забавная ошибка в журнале событий. Я попробую короткое замыкание - у меня две карты портов, я должен использовать один ЦАП с одной карточкой, и он должен появиться. Позволяет мне определить дефектную карту. - TomTom