Rag-Fusion: новый подход к генерации с дополнением поиска

Rag-Fusion: A New Take on Retrieval Augmented Generation
Zackary Rackauckas
2024-02-28

RAG-Fusionпоиск информации о продуктахгенерация запросовслияние взаимных ранговгенерация с дополненным поиском
Компания Infineon выявила потребность инженеров, менеджеров по работе с клиентами и заказчиков в быстром получении информации о продукции. Традиционно эта задача решается с помощью чат-ботов на основе генерации с дополнением поиска (retrieval-augmented generation, RAG); однако в данном исследовании я оценил применение недавно получившего популярность метода RAG-Fusion. RAG-Fusion объединяет RAG и слияние результатов поиска по взаимным рангам (reciprocal rank fusion, RRF): генерируются несколько запросов, затем они переупорядочиваются с использованием взаимных оценок, после чего выполняется объединение документов и оценок. В ходе ручной оценки ответов по критериям точности, релевантности и полноты я установил, что RAG-Fusion способен предоставлять точные и исчерпывающие ответы, поскольку сгенерированные запросы рассматривают исходный запрос с различных точек зрения и уточняют его контекст. Однако некоторые ответы отклонялись от темы, когда релевантность сгенерированных запросов исходному запросу оказывалась недостаточной. Это исследование свидетельствует о значительном прогрессе в применении искусственного интеллекта (AI) и обработки естественного языка (NLP), а также демонстрирует преобразования в глобальном и многоотраслевом контексте.
1
Сгенерированные запросы контекстуализировали исходные вопросы пользователей с разных точек зрения, улучшая охват и полноту ответов.
2
Ручная оценка показала, что RAG-Fusion формировал точные, релевантные и исчерпывающие ответы при поиске информации о продуктах.
3
RAG-Fusion объединяет генерацию с дополненным поиском и взаимное ранжирование по reciprocal rank fusion, создавая несколько запросов и объединяя переоценённые документы и оценки.
4
Иногда RAG-Fusion формировал ответы не по теме, когда сгенерированные запросы были недостаточно релевантны исходному запросу.
5
Метод оценивался для ускорения доступа к информации о продуктах Infineon инженерами, менеджерами по работе с клиентами и заказчиками.

Чат-бот на основе RAG-Fusion и генерации с дополнением извлечённой информацией для получения сведений о продукции Infineon

Точность, релевантность, полнота и соответствие теме ответов, обусловленные генерацией нескольких запросов и слиянием на основе взаимного ранжирования

Publication Details
Publication Date
2024-02-28
Journal
Publisher
ISSN
Cited by
76
Access Type
Author Information
Authors
Zackary Rackauckas
Explore further
Open the scid.ai AI chat with a ready-made request: it will find papers on a similar topic and help build a literature review.
Find similar papers in the chat
Make a presentation
100%