FAQs sur la Technologie Quantum-2 InfiniBand de NVIDIA

Avec le rapide développement de la technologie, la demande de calcul intensif dans divers secteurs ne cesse de croître. Pour répondre à cette demande, la technologie Quantum-2 InfiniBand de NVIDIA est apparue comme une solution. Cette technologie fournit des capacités de transfert et de traitement de données à haut débit et à faible latence, fournissant des performances exceptionnelles pour l’informatique distribuée. Dans cet article, nous explorons les caractéristiques et les applications de la technologie Quantum-2 InfiniBand de NVIDIA et répondons à quelques FAQs au sujet de cette technologie.

La technologie Quantum-2 InfiniBand de NVIDIA adopte l’architecture InfiniBand NVIDIA de septième génération afin de fournir aux développeurs HPC des performances réseau supérieures et un large choix de fonctionnalités pour leur permettre de résoudre les problèmes les plus complexes. Il offre une mise en réseau définie par logiciel, une informatique réseau, une isolation des performances, des moteurs d’accélération avancés, un accès direct à la mémoire à distance (RDMA) et des vitesses fulgurantes allant jusqu’à 400 Gbit/s pour les centres de données de calcul intensif avancés.

NVIDIA Quantum-2 est une plateforme réseau InfiniBand 400Gbps NDR composée de commutateurs InfiniBand de Mellanox Quantum-2, d'adapteurs de réseau ConnectX-7, d’unités de traitement de données (DPUs) BlueField-3, d’émetteurs-récepteurs InfiniBand NDR 400G et de tous les logiciels nécessaires à la prise en charge de la nouvelle architecture.

Le tableau ci-dessous décrit les caractéristiques du commutateur InfiniBand de Mellanox, les adaptateurs réseau IB et les émetteurs-récepteurs IB de FS fonctionnant avec la Technologie Quantum-2 InfiniBand de NVIDIA.

Q1: Est-ce que UFM peut être utilisé pour superviser les réseaux RoCE ?

A1: Non, UFM (Unified Fabric Manager) ne prend en charge qu’InfiniBand.

Q2: À quelle échelle de cluster recommandez-vous d’utiliser UFM ?

A2: Nous vous conseillons de configurer UFM pour tous les réseaux IB. UFM fournit non seulement l'OpenSM mais aussi d’autres fonctionnalités puissantes de gestion et d’interface. Il est recommandé de configurer la fonction UFM lorsque les clients ont des besoins en matière de gestion de réseau.

Q1: Dans la configuration réseau Super Pod, si le dernier SU dispose de moins de 32 nœuds, par exemple seulement 16 nœuds, est-ce que les commutateurs Leaf du dernier SU peuvent être réduits à uniquement 4 ? Il en résulterait que deux interfaces réseau du même nœud se connecteraient à un commutateur Leaf. Y aura-t-il des problèmes avec l’arbre SHARP ?

A1: Cela est possible, mais pas recommandé. Les commutateurs InfiniBand NDR de Mellanox peuvent supporter 64 SAT (Arbre d’agrégation SHARP).

Q2: Est-ce que le port d'un commutateur InfiniBand NDR peut être connecté à un câble NDR et l'autre port à un câble NDR 200 de type un-à-deux ?

A2: Oui, c'est possible. La configuration de la division des ports pour les interfaces NDR doit être effectuée du côté du commutateur.

Q3: Le commutateur Infiniband NDR dispose de 64 ports 400Gb. Pourquoi est-il indiqué qu'il possède 32 ports QSFP56 ?

A3: En raison des contraintes de taille et de puissance, un panneau 2U ne peut accueillir que 32 châssis . Chaque châssis peut prendre en charge deux ports 400 Gb, pour un total de 64 ports. Il est important de distinguer entre les concepts de cage et de port lorsque nous évoquons les commutateurs NDR et leurs interfaces.

Q4: Est-ce que les fonctionnalités UFM sont les mêmes pour les commutateurs NDR gérés et non gérés ?

A4: Oui, les fonctionnalités sont les mêmes.

Questions au sujet des Modules Infiniband NDR 400G

Q1: Est-il possible de connecter différents modules à chaque extrémité à l'aide d'un câble pour établir une connexion ? Par exemple, si le serveur est équipé d'un module OSFP et que le commutateur utilise un module QSFP112.

A1: Dans le cas d’InfiniBand, vous devez utiliser des modules et des câbles InfiniBand. Pour les commutateurs Infiniband, les ports sont OSFP. Les deux extrémités doivent disposer les modules recommandés par NVIDIA pour garantir une compatibilité adéquate.

Q2: Si le module NDR est compatible avec HDR et EDR, est-ce que ce type de câble et de module n’est disponible qu’en une seule pièce ?

A2: Oui, il n’y a pas de solution séparée pour les câbles et les modules.

Q3: Est-ce que les modules sur le côté du NIC OSFP doivent être plats ?

A3: Oui, la carte réseau doit utiliser des modules plats.

Q4: En ce qui concerne le 400G IB et 400G Ethernet, à l’exception des modules optiques, les câbles sont-ils les mêmes ?

A4: Les câbles optiques sont les mêmes. Il convient toutefois de préciser qu'il s'agit d'un connecteur de type APC avec un angle de biseau de 8 degrés.

Questions au sujet des Adapteurs Réseau Infiniband

Q1: Est-ce que RDMA est pris en charge en mode Ethernet pour la carte réseau InfiniBand ?

A1: Pour l'Ethernet (RoCE), RDMA est supporté. Nous vous conseillons d'utiliser la solution Nvidia Spectrum-X.

Q2: Est-il précisé s'il s'agit de simplex ou duplex pour les cartes réseau InfiniBand ?

A2: Toutes les cartes réseau IB prennent en charge la communication duplex. Le concept de simplex ou duplex n’est pas applicable en ce qui concerne ces appareils, car les canaux physiques de transmission et réception des données sont déjà séparés.

Conclusion

La conformité aux directives de mise en réseau de Quantum-2 garantit une communication et un partage des ressources efficaces. En configurant et en reliant les interfaces réseau de manière appropriée, les performances du système peuvent être optimisées davantage. La technologie Quantum-2 InfiniBand de NVIDIA joue un rôle essentiel pour le développement du secteur et continuera à stimuler les progrès du calcul haute performance.