500 Fragen, fünf Fähigkeiten, 30 Prozent Verlust: LongMemEval misst das Gedächtnis statt des Fensters
Forschung & Machine Learning

500 Fragen, fünf Fähigkeiten, 30 Prozent Verlust: LongMemEval misst das Gedächtnis statt des Fensters

1 Min. Lesezeit Kalina

Bilanz der Quelle: LongMemEval bewertet fünf Fähigkeiten von Chat-Assistenten: Informationsextraktion, Schlussfolgern über mehrere Sitzungen, Zeitbezug, Wissensaktualisierung und Enthaltung. Bei 500 kuratierten Fragen verlieren kommerzielle Assistenten und Langkontext-Modelle rund 30 Prozent Genauigkeit, sobald Informationen über längere Gesprächsverläufe verteilt sind.
🔗 Im Original weiterlesen → · 🗃 Wayback Machine (Archiv)

ℹ️ KI-Hinweis
Die Inhalte dieses Artikels wurden automatisiert mittels Künstlicher Intelligenz generiert. Die zugrundeliegenden Daten stammen von arxiv.org. Es erfolgte keine manuelle redaktionelle Bearbeitung.

Kalina Digest unterstützen

Lesen bleibt frei. Wer mag, gibt etwas zurück — ab 1 € einmalig, oder als Stufe für einen Monat, ein Quartal oder ein Jahr. Bisher: 5.00 € aus 1 Beiträgen.

Zum Shop →