IA e os Problemas Difíceis do Mundo · Matemática · arXiv · 2026-10-23
Além do LLM como juiz: verificação mecânica para autoformalização agêntica
Título original: Beyond LLM Judge: Mechanical Verification for Agentic Autoformalization
Este artigo apresenta um método para verificar formalizações em Lean que vai além da fidelidade julgada por LLMs, combinando revisão semântica baseada em LLM com verificações numéricas e de vacuidade mecânicas. Aplicado com um pipeline de autoformalização de extração, verificação e prova, foi usado para construir o FLMF, uma formalização parcial da Biblioteca Digital de Funções Matemáticas do NIST. Em três conjuntos de dados rotulados, o método apresentou a menor taxa de erros aceitos entre os métodos avaliados, e a revisão de especialistas encontrou defeitos de tradução e de fonte em conjuntos de dados existentes.