ClinicalAgent: мультиагентная система для клинических исследований с рассуждением на основе большой языковой модели
ClinicalAgent: Clinical Trial Multi-Agent System with Large Language Model-based Reasoning
2024-11-22
SCID: 54.1/eje8e764
Discuss with AI
PR-AUCрассуждение ReActпрогнозирование клинических испытанийрассуждение больших языковых моделеймультиагентная система
Figures from the paper
Abstract (AI)
Большие языковые модели (LLM) и мультиагентные системы продемонстрировали впечатляющие возможности в задачах обработки естественного языка, однако сталкиваются с трудностями при применении в клинических исследованиях, главным образом из-за ограниченного доступа к внешним знаниям. Учитывая потенциал современных инструментов для клинических исследований, которые агрегируют данные и строят прогнозы на основе новейшей медицинской информации, мы предлагаем интегрированное решение для повышения их доступности и практической полезности. Мы представляем Clinical Agent System (ClinicalAgent) — клиническую мультиагентную систему, предназначенную для решения задач, связанных с клиническими исследованиями, которая использует GPT-4, мультиагентные архитектуры, стратегию least-to-most и технологию рассуждения ReAct. Такая интеграция не только повышает производительность больших языковых моделей в клиническом контексте, но и обеспечивает новые функциональные возможности. Предложенный метод демонстрирует конкурентоспособные результаты прогнозирования исходов клинических исследований (PR-AUC 0,7908), обеспечивая улучшение на 0,3326 по сравнению со стандартным методом формирования запроса. Код находится в открытом доступе по адресу: https://github.com/LeoYML/clinical-agent.
Key Findings
1
ClinicalAgent достигает значения PR-AUC 0,7908 при прогнозировании исходов клинических испытаний.
2
По сравнению со стандартным методом промптинга ClinicalAgent повышает PR-AUC на 0,3326.
3
ClinicalAgent — это интегрированная мультиагентная система для клинических испытаний, объединяющая GPT-4, мультиагентную архитектуру, стратегию least-to-most и рассуждение ReAct.
4
Интегрированная архитектура ClinicalAgent обеспечивает дополнительные функции для клинических испытаний помимо прогнозирования.
5
Система направлена на устранение ограничений LLM в задачах клинических испытаний, особенно ограниченного доступа к внешним и актуальным медицинским знаниям.
Research Object
Задачи и исходы клинических испытаний
Research Subject
Многоагентное рассуждение на основе больших языковых моделей и прогностическая эффективность при прогнозировании исходов клинических испытаний
Publication Details
Publication Date
2024-11-22
Journal
Publisher
ISSN
Cited by
30
Access Type
Author Information
Download PDF
Subscribe to digest