IPoIB (IP sobre InfiniBand) vs. rendimiento RDMA

En parte heredé un clúster HA de Linux en el centro del cual actualmente sirve una conexión con DRBD 8 sobre IPoIB (IP sobre InfiniBand) entre dos hosts Debian. No está roto, así que no lo arreglaré.

También he notado que DRBD 9 admite RDMA, por lo que puede surgir la pregunta de si se debe reemplazar la conexión con DRBD 9 sobre RDMA (es decir, InfiniBand "nativo") en el futuro.

Como no quiero ejecutar pruebas de rendimiento en un sistema de producción, me pregunto: ¿hay comparaciones de rendimiento publicadas para IPoIB frente a RDMA / InfiniBand? Por ejemplo, ¿podría esperar ganancias de ancho de banda / latencia al cambiar de IPoIB en órdenes de magnitud de 10%, 50% o 100%, por ejemplo? ¿Qué se puede esperar?

has visto estas presentaciones? https://www.linbit.com/en/drbd-9-over-rdma-with-micron-ssds/ http://downloads.openfabrics.org/Media/Monterey_2015/Tuesday/tuesday_09_ma.pdf

InfiniBand es solo una arquitectura de red específica que ofrece RDMA, pero su rendimiento dependerá del tipo de aplicaciones que esté ejecutando. Mi experiencia se basa en sistemas académicos / de investigación que utilizan principalmente aplicaciones basadas en MPI. En ciertos casos, he visto que RDMA funciona un 20% mejor que IPoIB. Pero no estoy al tanto de ninguna evaluación comparativa de este tipo, pero hay muchos trabajos académicos escritos y también informes de proveedores. Si solo está pensando en E / S, considere: tamaños de archivo, número de lecturas frente a escrituras. RDMA usualmente proporcionó un gran beneficio para lecturas pequeñas aleatorias, pero solo un pequeño beneficio para escrituras. Es posible que desee leer en RoCE (RDMA a través de Ethernet convergente) y RDMA nativa InfiniBand.