Bilanz der Quelle: CompMat-Bench ist ein Testmodell zur Bewertung von KI-Agenten in der Materialforschung. Es besteht aus 94 Aufgaben, die auf neuesten computermaterialwissenschaftlichen Studien basieren und Agenten jeweils einen Schritt zum Erreichen des wissenschaftlichen Ziels abverlangen. Agenten mit vollständiger Anleitung gelangen mit einer Bestehensquote von 66,0 bis 90,4 Prozent, während laengere Workflows und reduzierte Anleitung zu unterschiedlichen Weisen Leistung senken.
🔗 Im Original weiterlesen → · 🗃 Wayback Machine (Archiv)
ℹ️ KI-Hinweis
Die Inhalte dieses Artikels wurden automatisiert mittels Künstlicher Intelligenz generiert. Die zugrundeliegenden Daten stammen von arxiv.org. Es erfolgte keine manuelle redaktionelle Bearbeitung.
Die Inhalte dieses Artikels wurden automatisiert mittels Künstlicher Intelligenz generiert. Die zugrundeliegenden Daten stammen von arxiv.org. Es erfolgte keine manuelle redaktionelle Bearbeitung.
