Meta legt die Prometheus-Rechnungen offen: erste Phase fertig, Ziel rund 1 Million GPUs — Goodput über 85 Prozent im Vortraining, über 90 Prozent im RL

Meta legt die Prometheus-Rechnungen offen: erste Phase fertig, Ziel rund 1 Million GPUs — Goodput über 85 Prozent im Vortraining, über 90 Prozent im RL — Der Engineering-Blog vom 19. Oktober (zwei Tage vor den Q3-Zahlen am 21.10.) zeichnet New Albany, Ohio aus: Die erste Phase ist abgeschlossen und hat die Muse-Modelle trainiert, inklusive der Frontier-Modelle Muse Wonder; heute hängen hunderte Tausend GPUs über mehrere Gebäude im Verbund, das Ziel sind rund 1 Million. Genannt werden Goodput von mehr als 85 Prozent für Vortrainings- und mehr als 90 Prozent für RL-Läufe, MTBI von rund 47.000 GPU-Stunden (nach Fleet-Fixes über 54.000), die Plattformstaffel Catalina (GB200 NVL72), Clemente (GB300 NVL72, 288 GB HBM3e je GPU, über 1 EFLOPS FP4 je Rack) und bald San Miguel (Vera Rubin NVL72, 2,52 EFLOPS FP4 je Rack, über 170 kW, durchgehend flüssigkeitsgekühlt); je Gebäude-Fabric bis zu 20.736 GPUs, die Backend-Aggregation spannt bis über 100 km; seit Mitte 2025 sanken Trainings-Unterbrechungen um 99 Prozent. Engineering at Meta · SiliconReport · 🗃 Wayback Machine (Archiv)