AIデータパイプラインアーキテクチャ：ペタバイト規模のトレーニングに100GB/sでデータを供給する
MetaのData PreProcessing Service（DPP）は、エクサバイト規模のトレーニングクラスター全体でデータストールを解消。WEKApodは8台のストレージノードから720GB/sのスループットを達成し、768台のH100 GPUに電力を供給。PCIe Gen5...
None