Кривизна графов внимания выявляет сбои контекста, ведущие к галлюцинациям LLM
Статья предлагает одношаговый детектор недостоверных ответов, опирающийся на топологию информационных потоков в графах внимания и кривизну Формана — Риччи. Авторы показывают, что нарушения передачи контекста между токенами при авторегрессионной генерации проявляются в структуре связей и позволяют различать галлюцинации на нескольких моделях и бенчмарках.








