Автономный мультимодальный ИИ-агент для офтальмологической диагностики на основе доказательств

Мультимодальная офтальмологическая диагностика требует интеграции фотографий глазного дна, В-сканирующей ультрасонографии и медицинских доказательств, однако большинство систем искусственного интеллекта (ИИ) по-прежнему ориентированы на выполнение одной задачи или имеют слабую доказательную обоснованность. AgentEYE представляет собой проверяемый мультимодальный агент, который направляет изображения глаза в специализированные инструменты для анализа глазного дна и В-сканирования, извлекает доказательства из клинических руководств и веб-источников и формирует отчёты, обоснованные доказательствами. Во внутреннем бенчмарке, включавшем 302 случая, AgentEYE продемонстрировал более высокие показатели диагностической правильности и полноты по сравнению с базовыми моделями, использующими только большие языковые модели (LLM), а также с абляционной версией без специализированных инструментов визуализации; результаты оставались сходными с абляционной версией без поиска, что указывает на преимущественную роль поиска в обеспечении доказательной обоснованности и проверяемости цитирования. Слепая оценка 200 случаев тремя офтальмологами подтвердила улучшение диагностической правильности, полноты, безопасности и обоснованности цитирования по сравнению с базовым вариантом, использующим только LLM и самостоятельное цитирование. Внешний анализ показал зависимость результатов от распределения данных. Эти результаты поддерживают применение AgentEYE как прослеживаемого прототипа системы поддержки принятия решений, требующего проспективной многоцентровой валидации.