Мультимодальный искусственный интеллект в биомедицине

Растущая доступность биомедицинских данных из крупных биобанков, электронных медицинских карт, систем медицинской визуализации, носимых и окружающих биосенсоров, а также снижение стоимости секвенирования генома и микробиома создали предпосылки для разработки мультимодальных решений на основе искусственного интеллекта, учитывающих сложность здоровья и болезней человека. В этом обзоре мы рассматриваем ключевые области применения таких решений, а также связанные с ними технические и аналитические проблемы. Мы исследуем возможности персонализированной медицины, цифровых клинических исследований, дистанционного мониторинга и оказания медицинской помощи, эпидемиологического надзора за пандемиями, технологии цифровых двойников и виртуальных медицинских ассистентов. Кроме того, мы анализируем проблемы, связанные с данными, моделированием и конфиденциальностью, которые необходимо преодолеть для реализации полного потенциала мультимодального искусственного интеллекта в здравоохранении. Мультимодальные модели искусственного интеллекта могут открыть множество перспективных возможностей в здравоохранении и медицине; в этом обзоре изложены наиболее перспективные направления применения и технические риски, которых следует избегать.