NVIDIAのGPUは、GPU単体から数十万基までスケールアップ/スケールアウトし、クラスター化することで、1つの巨大GPUとして利用可能になる。なお、データセンターとデータセンターをつなぐことをスケールアクロスと呼んでいる(出典:NVIDIA AI Networking、NVIDIA)