QSFP28: ¿hay algo así como un cable cruzado?

No puedo encontrar nada para eso;)

Construyendo un Clúster Hyperconvergend como sistema de desarrollo. Esto es para nosotros estado del arte.

Tengo 2 máquinas para empezar, con un interruptor ordenado en aproximadamente 4 semanas. Ambos servidores tienen tarjetas Ethernet de 2x100gb de Mellanox (ConnectX 4)

Conectando un cable directamente entre ellos obtengo un enlace. Veo que el enlace trie (d) aparece, pero falló, la conexión se rompe de inmediato.

¿La conexión directa del servidor entre dos tarjetas ethernet no es compatible con QSFP28? ¿Algo más que deba tener en cuenta? En el peor de los casos, "encajoné" el enlace de 100 g hasta que llega el interruptor.

mellanox TomTom
fuente

Respuestas:

No hay cable de conexión cruzado de estilo antiguo o lo que sea. Cobre pasivo que funciona correctamente (no usa óptica, ¿verdad?) El enlace QSFP debería funcionar independientemente de si cambia el uso sin interruptor Vs. ¿Estás usando uno de esos o es algo de terceros?

http://www.mellanox.com/products/interconnect/ethernet-direct-attach-copper-cables.php

Hilo de Mellanox de referencia (sin respuesta hasta ahora).

https://community.mellanox.com/thread/4125

BaronSamedi1958
fuente

No, obtuve algo de fs.com, esta es la primera vez que usamos SFP28. 2 servidores, 2 cables hasta ahora, ambos no están conectados. Los conductores son actuales. El firmware acaba de ser parcheado ayer. El cable en cuestión es fs.com/products/47096.html

TomTom

Eso debería estar bien. Tal vez plantearlo como un problema de soporte con el proveedor de su servidor. Has hecho casi exactamente lo que yo haría ...

Tom O'Connor

Hecho, también estoy en contacto con Mellanox.

TomTom

Confiormed. Quité los 2 cables, conecté los adaptadores Mellanox (QSFP28-> SFP28) y conecté los cables 10G y listo, funciona de maravilla (aunque con un rendimiento reducido). Problema de cable;)

TomTom

@TomTom FS.com tiene transceptores específicos del proveedor para evitar problemas como este: consulte fs.com/c/mellanox-qsfp28-to-qsfp28-3370

pauska el

Los puertos QSFP28 son todos iguales (al igual que SFP, SFP +, ...), no hay pinout MDI vs MDI-X como para par trenzado. Por lo tanto, los cables rectos no se utilizan en absoluto. Los DAC tienen un crossover integrado, no hay nada de qué preocuparse.

Posiblemente su DAC no sea compatible con las NIC, algunas son muy exigentes con la marca. También es posible que las NIC no estén configuradas de la misma manera. Debe verificar los mensajes del controlador sobre por qué no aparece el enlace.

Zac67
fuente

¿Podría ser que las dos NIC estén esperando algún tipo de iniciativa la una de la otra? IIRC temprana TP tarjetas ethernet a veces se comportaban como que sin interruptor, incluso con un cable cruzado correcta ... tal vez ese viejo fantasma ha vuelto ....

rackandboneman

Agradable. Apesta ¿Alguna idea de cómo desencadenar esto? También veo el enlace una vez que aparece y luego desaparece. Entonces, parece tratar de levantarlo.

TomTom

@TomTom ¿La NIC informa que el enlace aparecerá? ¿O es simplemente la luz del enlace que se enciende y se apaga inmediatamente después? Eso podría indicar la inserción de SFP: observe el lado lejano para obtener una respuesta de enlace real.

Zac67 01 de

@rackandboneman La situación es algo diferente: la negociación automática de primera generación fue defectuosa y a veces no funcionó. Un DAC conoce los parámetros del enlace con seguridad.

Zac67

No, veo el enlace que se inicia cada X minutos en Windows. Esto es seguido por un error divertido en el registro de eventos. Intentaré un cortocircuito: tengo dos tarjetas de puerto, debería poder usar un DAC con una tarjeta y debería aparecer. Me permite señalar una tarjeta defectuosa.

TomTom