Rag-Fusion: новый подход к генерации с дополнением поиска
Rag-Fusion: A New Take on Retrieval Augmented Generation
2024-02-28
SCID: 54.1/vh93q45d
Discuss with AI
RAG-Fusionпоиск информации о продуктахгенерация запросовслияние взаимных ранговгенерация с дополненным поиском
Figures from the paper
Abstract (AI)
Компания Infineon выявила потребность инженеров, менеджеров по работе с клиентами и заказчиков в быстром получении информации о продукции. Традиционно эта задача решается с помощью чат-ботов на основе генерации с дополнением поиска (retrieval-augmented generation, RAG); однако в данном исследовании я оценил применение недавно получившего популярность метода RAG-Fusion. RAG-Fusion объединяет RAG и слияние результатов поиска по взаимным рангам (reciprocal rank fusion, RRF): генерируются несколько запросов, затем они переупорядочиваются с использованием взаимных оценок, после чего выполняется объединение документов и оценок. В ходе ручной оценки ответов по критериям точности, релевантности и полноты я установил, что RAG-Fusion способен предоставлять точные и исчерпывающие ответы, поскольку сгенерированные запросы рассматривают исходный запрос с различных точек зрения и уточняют его контекст. Однако некоторые ответы отклонялись от темы, когда релевантность сгенерированных запросов исходному запросу оказывалась недостаточной. Это исследование свидетельствует о значительном прогрессе в применении искусственного интеллекта (AI) и обработки естественного языка (NLP), а также демонстрирует преобразования в глобальном и многоотраслевом контексте.
Key Findings
1
Сгенерированные запросы контекстуализировали исходные вопросы пользователей с разных точек зрения, улучшая охват и полноту ответов.
2
Ручная оценка показала, что RAG-Fusion формировал точные, релевантные и исчерпывающие ответы при поиске информации о продуктах.
3
RAG-Fusion объединяет генерацию с дополненным поиском и взаимное ранжирование по reciprocal rank fusion, создавая несколько запросов и объединяя переоценённые документы и оценки.
4
Иногда RAG-Fusion формировал ответы не по теме, когда сгенерированные запросы были недостаточно релевантны исходному запросу.
5
Метод оценивался для ускорения доступа к информации о продуктах Infineon инженерами, менеджерами по работе с клиентами и заказчиками.
Research Object
Чат-бот на основе RAG-Fusion и генерации с дополнением извлечённой информацией для получения сведений о продукции Infineon
Research Subject
Точность, релевантность, полнота и соответствие теме ответов, обусловленные генерацией нескольких запросов и слиянием на основе взаимного ранжирования
Publication Details
Publication Date
2024-02-28
Journal
Publisher
ISSN
Cited by
76
Open access PDF
Access Type
Author Information
Download PDF
Subscribe to digest