Warum AI einen Genie-Koeffizienten braucht
TL;DR
IEEE Spectrum AI schlägt mit dem Genie-Koeffizienten eine neue Messgröße für AI-Systeme vor. Sie soll nicht bewerten, was ein Modell grundsätzlich kann, sondern wie nah die Ausführung an der eigentlichen Absicht hinter einer Anfrage liegt. Der Vorschlag greift ein bekanntes Problem auf: Menschen ergänzen fehlende Annahmen aus Alltag, Kontext und sozialen Regeln, Modelle oft nicht zuverlässig.
Nauti's Take
Für kleine Teams ist das vor allem ein QA-Thema. Prüft bei jedem Agenten zuerst, wo stillschweigende Annahmen stecken: Datenzugriff, erlaubte Abkürzungen, Rückfragen, Abbruchregeln.
Wenn ein Workflow nur mit perfekten Prompts sauber läuft, fehlt meist Kontextführung oder eine belastbare Guardrail-Schicht.
Quellen