Создание AI-агентов на базе LLM в социальной виртуальной реальности

В этой статье мы представляем проектирование и оценку AI-агента на базе большой языковой модели (LLM) для взаимодействия человека и агента в виртуальной реальности (VR). Наша система AI-агента использует GPT-4, большую языковую модель, для моделирования человеческого поведения. LLM-агент, развернутый в VRChat в качестве неигрового персонажа (NPC), способен отвечать игроку релевантными по контексту высказываниями, сопровождаемыми соответствующими мимикой и жестами тела. Предварительная оценка позволила определить оптимальные параметры для генерации наиболее правдоподобных ответов. С помощью нашей системы мы закладываем основу для дальнейшей разработки NPC на базе LLM в VR.