Modelle & Releases

Flash-dLLM: 5-11x Geschwindigkeitsschritt für Diffusion-LLMs mit Elastic-Cache

1 Min. Lesezeit Kalina

Bilanz der Quelle: Flash-dLLM, ein neues Framework für Diffusion-LLMs, identifiziert GPU-Memoria-I/O als die dominante Blockade und bietet eine Lernfreiheit mit einem fusionierten KV-cache-Kern und einem vereinten Draft-und-Verifizierungs-decoding. Es erzielt 5.1x (GSM8K) und 11.0x (HumanEval) Geschwindigkeitsschritte über Elastic-Cache, während die Qualität erhalten bleibt.
🔗 Im Original weiterlesen → · 🗃 Wayback Machine (Archiv)

ℹ️ KI-Hinweis
Die Inhalte dieses Artikels wurden automatisiert mittels Künstlicher Intelligenz generiert. Die zugrundeliegenden Daten stammen von aiweekly.co. Es erfolgte keine manuelle redaktionelle Bearbeitung.

Mehr aus Modelle & Releases