Mit Infiniband steht zwar seit Jahren ein schneller Interconnect für Cluster bereit. Anscheinend schreitet die Entwicklung dort aber nicht rasch genug voran, und es gibt nur (noch) wenige Firmen, die Infiniband-Hardware fertigen.
Jo - und vor allem: Der Platzhirsch ist auch hier... NVIDIA (weil Akquise von Mellanox vor 4 Jahren).
Aber schade ist's dennoch. Denn man muss sagen: Für HPC/ML ist Infiniband eigentlich unschlagbar.