Bedeutet das, dass von diesen 616 Speicherplatz nur 25 GB verwendet werden können?
Nein, die Einschränkungen, die Sie zitiert haben, galten für Nvidias vorherige Generation von GPU (Volta). Sie gilt nicht für die aktuelle Generation (Turing).
Bedeutet das, dass NVLink nur 25 GB / s in eine Richtung ausgeben kann (z. B. Eingabe in die GPU)?
Weiter unten in demselben Artikel wird die Architektur von NVLink besser erklärt, das wären 25 GB / s pro Link. Wenn der Nvidia V100 die gleiche Einschränkung wie Nvidia P100 (Pascal) hat, wären es insgesamt 150 GB / s und weitere 150 GB / s.
Jeder NVLink (Link Interface) bietet bidirektionale 20 GB / s bis zu 20 GB / s bei vier Verbindungen pro GP100-GPU für eine Gesamtbandbreite von 80 GB / s und weitere 80 GB / s.