Песнь сирен в океане ИИ: обзор галлюцинаций в больших языковых моделях

Siren's Song in the AI Ocean: A Survey on Hallucination in Large Language Models
Yue Zhang, Longyue Wang, Shuming Shi, Yafu Li, Leyang Cui, Wei Bi, Xinting Huang, Deng Cai, Lemao Liu, Tingchen Fu, Enbo Zhao, Yu Zhang, Xu, Chen, Yulong Chen, Anh Tuan Luu, Freda Shi
2023-09-03

оценочные бенчмарки для галлюцинацийобнаружение галлюцинацийобъяснение галлюцинацийгаллюцинации в больших языковых моделяхсмягчение галлюцинаций
Хотя большие языковые модели (LLM) продемонстрировали выдающиеся возможности в ряде прикладных задач, существенной проблемой является их склонность к проявлению галлюцинаций: LLM иногда генерируют содержимое, которое расходится с вводом пользователя, противоречит ранее сгенерированному контексту или не соответствует общепринятым знаниям о мире. Это явление представляет значительную проблему для надежности LLM в реальных сценариях. В данной работе мы обзорно рассматриваем недавние исследования по обнаружению, объяснению и смягчению галлюцинаций, с акцентом на уникальные сложности, которые создают LLM. Мы представляем таксономии явлений галлюцинаций LLM и методик оценки, анализируем существующие подходы, направленные на снижение галлюцинаций LLM, и обсуждаем возможные направления будущих исследований.
1
Галлюцинации в LLM представляют серьёзную проблему для их надёжности в реальных приложениях.
2
Большие языковые модели часто проявляют галлюцинации: генерируют контент, расходящийся с запросом пользователя, противоречащий предыдущему контексту или не соответствующий общеизвестным знаниям.
3
Авторы обозначают открытые направления для будущих исследований по обнаружению, объяснению и снижению галлюцинаций в LLM.
4
В статье представлены таксономии явлений галлюцинации и наборы оценочных бенчмарков, адаптированные к особенностям LLM.
5
Обзор анализирует существующие подходы к обнаружению, объяснению и смягчению галлюцинаций в LLM.

Явление галлюцинаций в больших языковых моделях (LLM)

Обнаружение, объяснение, оценка и смягчение галлюцинаций в LLM, включая таксономии, бенчмарки, анализ подходов и направления будущих исследований

Publication Details
Publication Date
2023-09-03
Journal
Publisher
ISSN
Cited by
244
Access Type
Author Information
Authors
Yue Zhang
Longyue Wang
Shuming Shi
Yafu Li
Leyang Cui
Wei Bi
Xinting Huang
Deng Cai
Lemao Liu
Tingchen Fu
Enbo Zhao
Yu Zhang
Xu, Chen
Yulong Chen
Anh Tuan Luu
Freda Shi
Explore further
Open the scid.ai AI chat with a ready-made request: it will find papers on a similar topic and help build a literature review.
Find similar papers in the chat
Make a presentation
100%