Hardware, Chips & Cloud

DualQuant: 4-Bit-Quantisierung ohne Kalibrierdatensatz spart 2,61-fach Speicher

1 Min. Lesezeit Kalina

Bilanz der Quelle: Forscher von d-Matrix stellen DualQuant vor, eine Methode zur 4-Bit-Quantisierung von Gewichten und Aktivierungen ohne Kalibrierdatensatz. Das Verfahren erreicht die Genauigkeit von SmoothQuant und reduziert den Speicherbedarf signifikant. Dies verbessert die Effizienz der KI-Inferenz auf Hardware wie der RTX 4090.
🔗 Im Original weiterlesen → · 🗃 Wayback Machine (Archiv)

ℹ️ KI-Hinweis
Die Inhalte dieses Artikels wurden automatisiert mittels Künstlicher Intelligenz generiert. Die zugrundeliegenden Daten stammen von techtimes.com. Es erfolgte keine manuelle redaktionelle Bearbeitung.

Mehr aus Hardware, Chips & Cloud