Modelle & Releases

Evaluating Large Language Models Trained on Code

1 Min. Lesezeit Kalina

Bilanz der Quelle: OpenAI’s Codex paper introduces HumanEval, a benchmark for hand-written programming problems scored by unit-test pass@k functional correctness. It becomes the default code-generation benchmark and sets the template for later coding benchmarks.
🔗 Im Original weiterlesen → · 🗃 Wayback Machine (Archiv)

ℹ️ KI-Hinweis
Die Inhalte dieses Artikels wurden automatisiert mittels Künstlicher Intelligenz generiert. Die zugrundeliegenden Daten stammen von arxiv.org. Es erfolgte keine manuelle redaktionelle Bearbeitung.

Mehr aus Modelle & Releases