???? ??? ?? ???? ??? ??? ??? ?? ?? ???? ???? ?????. AI, HPC, ?????? ???? ???? ??????? ????? ???? ???? ???? ? ?? ??? ???????. ???? ????? ??? ??? ???? ??, NVIDIA Quantum InfiniBand? ?? ??? ??? ???? ???? ????.
InfiniBand? ????, ?? ???, ??? ????? ?? ?? ???? ? ??? ????. ?? ???? ??? ? ??? InfiniBand? ??? ??? ?? ?? ??? ?????.
InfiniBand? ??? ??? ?? ????????
IInfiniBand? ??? ??? ?? ???????? InfiniBand? ??? ????? ?? ???? ???? ???? ??????. ???? ??????? ? ?????? ????? ???? ???, ???, ??? ????? ?????. ??? ?? ??? ??? ?? ??, ?? ???, ?? ???? ?? ???? ??? ? ????. InfiniBand? Subnet Manager(SM)? ??? ?? ???? ??? ??? ?????. SM? ??? ??? ????, ???? ?????, ??? ??? ??????, ???? ????? ?????. InfiniBand ???? ??? ??? ????? ???? ?? ????.
InfiniBand? ??? ??? ??????
InfiniBand? ?? ???? ????? ??? ??? ???? ??, ?? ?? ???? ???? ?? ? ????? ?????. ? ?? ???? ?????? ???, ??? ??? ??? ? ?? ??????? ????? ??? ? ??? ?????.
? ???? ??? ?? ?????:
- M_Key: ?? ??? ???? ???? ???? ?? ?? ????. ?? ???? ??? ??? ?? ?????.
- P_Key: VLAN? ??? ??? ??, ?? ???? ??? ???? ??? ? ???? ???? ??? ??? ?? ??? ??? ??? ?????.
- Q_Key: ??? ? ?? ????? ???? ????, ? ???? ? ???? ???? ???.
- L_Key? R_Key: RDMA ???? ???? ????, ??? ??? ???? ??? ? ? ??? ?????. ?? ?? ??-?? ??? ???? ?????.
??? ?? ?? InfiniBand ???? ???? ??? ASIC? ?? ???? ???? ?????, ?? ??? ???? ?? ??? ?????? ?? ???? ? ?? ??? ?? ?? ??? ??? ?????.
InfiniBand? ??, ?? ??, ?? ??? ??? ?????
InfiniBand? ???? ?? ??? ?? ???? ????. ?? ??? ??? GUID(Global Unique Identifier)? ?????? ?? ??? ??? ??????. ?? SM? ?? ???? ??? ????, ???? ? ??? ???? ??? GUID? ?? ??? ??? ? ????. ??? ???? ??? ??? ???? ????.
SM? “??? SM GUID” ??? ??? ?? ??, ???? ??? ???? ???? ???? ?? ?????. SMP ??? ??? ?? ???? ???? ?? ??? ????? ?? ???? ??? ??? ? ????.
VLAN?? ??? InfiniBand? ????
Ethernet VLAN? ????? ????? ?????. ?? InfiniBand ????? ??? ???? ?????. ???? NVIDIA Unified Fabric Manager(UFM)?? ??? ??? ????, ? ??? ?? ???? ???? ???? ?????.
??? ???? ??? ??? ?? ???? ?????:
- Full ??? ??? ? ???? ??? ? ????.
- Limited ??? Full ???? ??? ? ????.
??? ??? ??? ???? ???? ???, ?? ??????, ??? ???? ??? ????? ? ?? ???? ????? ?? ??? ???? ?? ????? ?????.
???? ?? ??? ????? ?? ???? InfiniBand
InfiniBand? ?? ??? Reliable Connected(RC), Unreliable Datagram(UD), Dynamically Connected(DC)? ?? ?????? ?????. ?? ????? ??? ????? ?? ?? ?????? ????? ????.
RC ? DC ????? ?? ? ??? ???? ???? ???? ?? ??? ?? ????, ?? SM? ?????. ???? ?? ??? ??? ??? CRC ??? ???? ???? ??? ??? ??? ?? ??? ?? ?????.
??, ?? ?? ??? ??(RDMA)? R_Key? ?? ?????. R_Key? ?? ?? ??? ? ??? ???? ? ?(QP)? ???? ????. ? QP? ??? ??? ?? ??? ??? ????, ?? ???? ??? ??? ???? ??? ? ????. ?? ??? ??? QP? ?? ???? ???? R_Key? ???? ?? ??, ????? ?? ??? ?????. ? ????? ??? ???? ?? ????? ???? ??? ?? ? ??? ?????.
?? ??? ??? ?? ?? ??
InfiniBand? ?? ??? ?????? ???? ?????. SM? ?? ?? ???? ?? ???? ?? ?????(MAD)? ?? ??? ?????. ?? ?? ??? ????:
- SA_Key: Subnet Administrator??? ??? ??(?: ??? ??/??)? ?????.
- VS_Key: ibdiagnet ?? ?? ? ??? ?????.
- C_Key ? N2N_Key: ?????? ??? ???? ?? ? ???? ?????.
- AM_Key: SHARP ?? ?? ??, ??? ???? ??? ??? ??? ? ??? ???.
? ??, ??? ? ?? ??, ?? ??? ?? ?? ?? ?? ???? ?? ?? ?? ???? ??? ?? ??? ??? ? ????. ??? ????? ??? ??? ???? ???? ?? ??? ?? ?????.
??? ?????
InfiniBand? ??? ???? ?????. ? ??? ?? ?? ????? ???? ??, ??? ?? ???, ???? ?? ? ?? ??? ???? ??? ???? SM?? ?? ????? UFM ????? ?????. ??? ??? ??? ??? ???? ?? ??? ??, ???? ??? ?????.
??? ???, ?? ??, ?? ??
NVIDIA? InfiniBand ??? ??? ????? ????? ?? ??? ??? ?????. ?? ?? ??? ??? ????:
- M_Key, SA_Key ? ??? ? ???
- ????? ??? ???? ???? ???? ?? ??
- ???? ???? SMP ???? ???? ?? ?? ??
- ??? ??? ???? ?? ?? ???? ?? ?? ? ??
- ? ??? ?? ??? ???? ?? MAD ?? ??? ??
? ?? ??? UFM ?? REST API? ?? ???, ?? ??, ?? ???? ??? ? ????.
?? AI ??? ??? ??? ?? ??
??? InfiniBand ???? ?? ?????. ??? ????? ??? ?? ??, ???? ? ??, ?? ??? ?????? ?????, InfiniBand? ?? ???? ????? ??? ? ??? ???·?? ???? ??? ????? ?????.
????? ?? NVIDIA InfiniBand ?? ?? ? ???? ?????.
?? ??
- GTC ??: ??? ??? ???? ??? AI? ????
- GTC ??: GPU ?? ??????? ??? ??? ?? ??
- GTC ??: AI ???? ?? ?? – ????? ??? ?? ????? (Cisco ??)
- NGC ????: ASR Parakeet CTC Riva 1.1b
- NGC ????: TTS FastPitch HifiGAN Riva
- ???: ?? ????? ???? ??? ???? ??? ??? ???????.
