KI und die schwierigen Probleme der Welt · Mathematik · arXiv · 2026-10-23
Jenseits des LLM-Judge: Mechanische Verifikation für agentische Autoformalisierung
Originaltitel: Beyond LLM Judge: Mechanical Verification for Agentic Autoformalization

Dieser Beitrag stellt eine Methode zur Verifizierung von Lean-Formalisierungen vor, die über die von LLMs beurteilte Treue hinausgeht, indem sie eine LLM-basierte semantische Prüfung mit mechanischen numerischen und Vakuitätsprüfungen kombiniert. In Verbindung mit einer Autoformalisierungs-Pipeline aus Extraktion, Verifikation und Beweis wurde sie eingesetzt, um FLMF zu erstellen, eine partielle Formalisierung der NIST Digital Library of Mathematical Functions. Auf drei annotierten Datensätzen wies die Methode die niedrigste Rate akzeptierter Fehler unter den untersuchten Methoden auf, und eine Expertenprüfung deckte Übersetzungs- und Quellfehler in bestehenden Datensätzen auf.