FP8 प्रशिक्षण अवसंरचना: अगली पीढ़ी की संख्यात्मक परिशुद्धता
FP8 प्रशिक्षण BF16 की तुलना में कंप्यूट और मेमोरी आवश्यकताओं को लगभग आधा कर रहा है जबकि उत्पादन गुणवत्ता बनाए रखता है। Microsoft, Meta, Google FP8 के साथ frontier models को प्रशिक्षित कर रहे हैं और 30-40%...
None