Песнь сирен в океане ИИ: обзор галлюцинаций в больших языковых моделях
Siren's Song in the AI Ocean: A Survey on Hallucination in Large Language Models
2023-09-03
SCID: 54.1/dbffrkyf
Discuss with AI
оценочные бенчмарки для галлюцинацийобнаружение галлюцинацийобъяснение галлюцинацийгаллюцинации в больших языковых моделяхсмягчение галлюцинаций
Figures from the paper
Abstract (AI)
Хотя большие языковые модели (LLM) продемонстрировали выдающиеся возможности в ряде прикладных задач, существенной проблемой является их склонность к проявлению галлюцинаций: LLM иногда генерируют содержимое, которое расходится с вводом пользователя, противоречит ранее сгенерированному контексту или не соответствует общепринятым знаниям о мире. Это явление представляет значительную проблему для надежности LLM в реальных сценариях. В данной работе мы обзорно рассматриваем недавние исследования по обнаружению, объяснению и смягчению галлюцинаций, с акцентом на уникальные сложности, которые создают LLM. Мы представляем таксономии явлений галлюцинаций LLM и методик оценки, анализируем существующие подходы, направленные на снижение галлюцинаций LLM, и обсуждаем возможные направления будущих исследований.
Key Findings
1
Галлюцинации в LLM представляют серьёзную проблему для их надёжности в реальных приложениях.
2
Большие языковые модели часто проявляют галлюцинации: генерируют контент, расходящийся с запросом пользователя, противоречащий предыдущему контексту или не соответствующий общеизвестным знаниям.
3
Авторы обозначают открытые направления для будущих исследований по обнаружению, объяснению и снижению галлюцинаций в LLM.
4
В статье представлены таксономии явлений галлюцинации и наборы оценочных бенчмарков, адаптированные к особенностям LLM.
5
Обзор анализирует существующие подходы к обнаружению, объяснению и смягчению галлюцинаций в LLM.
Research Object
Явление галлюцинаций в больших языковых моделях (LLM)
Research Subject
Обнаружение, объяснение, оценка и смягчение галлюцинаций в LLM, включая таксономии, бенчмарки, анализ подходов и направления будущих исследований
Publication Details
Publication Date
2023-09-03
Journal
Publisher
ISSN
Cited by
244
Open access PDF
Access Type
Author Information
Download PDF
Subscribe to digest