Обучение на основе сенсорных ошибок предсказания и ошибок предсказания вознаграждения в процессе адаптации движений

Learning from Sensory and Reward Prediction Errors during Motor Adaptation
Jun Izawa, Reza Shadmehr
2011-03-10

паттерны генерализациимоторная адаптацияошибки предсказания вознаграждениясенсорные ошибки предсказаниясенсорное переназначение
Произвольные двигательные команды имеют два типа последствий. Сначала сенсорное последствие проявляется в активности наших первичных органов чувств (например, зрении и проприоцепции). Затем мозг оценивает сенсорную обратную связь и формирует субъективную оценку полезности или эффективности двигательных команд (например, вознаграждение). В результате сравнение предсказанных и наблюдаемых последствий двигательных команд порождает два типа ошибок предсказания. Как эти ошибки способствуют изменению двигательных команд? В настоящей работе мы использовали протокол адаптации при выполнении движений достижения и обнаружили, что при наличии высококачественной сенсорной обратной связи адаптация двигательных команд почти исключительно определялась сенсорными ошибками предсказания. Эта форма обучения имела характерную особенность: по мере адаптации двигательных команд испытуемые изменяли свои предсказания относительно сенсорных последствий двигательных команд и широко переносили это обучение на соседние двигательные команды. Напротив, по мере ухудшения качества сенсорной обратной связи адаптация двигательных команд в большей степени зависела от ошибок предсказания вознаграждения. Ошибки предсказания вознаграждения вызывали сопоставимые изменения двигательных команд, но не изменяли предсказанные сенсорные последствия двигательных команд и приводили лишь к локальному переносу. Поскольку мы обнаружили внутрисубъектную корреляцию между паттернами генерализации и сенсорным перемаппингом, можно предположить, что в ходе адаптации относительную зависимость конкретного человека от сенсорных ошибок и ошибок предсказания вознаграждения можно было бы определить. Мы предполагаем, что, хотя двигательные команды изменяются под воздействием сенсорных ошибок и ошибок предсказания вознаграждения, только сенсорные ошибки предсказания вызывают изменения в нейронной системе, которая предсказывает сенсорные последствия двигательных команд.
1
При ухудшении сенсорной обратной связи адаптация всё сильнее зависела от ошибок предсказания вознаграждения, вызывавших сопоставимые изменения команд, но не обновлявших сенсорные предсказания.
2
Только сенсорные ошибки предсказания, по-видимому, изменяли нейронную систему предсказания сенсорных последствий; индивидуальные паттерны обобщения коррелировали с сенсорным перемаппингом.
3
Обучение на основе ошибок предсказания вознаграждения обобщалось локально, в отличие от широкого обобщения сенсорного обучения.
4
Обучение на основе сенсорных ошибок предсказания изменяло ожидаемые сенсорные последствия и широко обобщалось на соседние моторные команды.
5
При высококачественной сенсорной обратной связи адаптация моторных команд определялась почти исключительно сенсорными ошибками предсказания.

двигательные команды в процессе адаптации движений при достижении цели

вклад сенсорных ошибок предсказания и ошибок предсказания вознаграждения в адаптацию двигательных команд, включая изменения предсказаний сенсорных последствий и закономерности генерализации

Publication Details
Publication Date
2011-03-10
Journal
Publisher
ISSN
Access Type
Author Information
Authors
Jun Izawa
Reza Shadmehr
Explore further
Open the scid.ai AI chat with a ready-made request: it will find papers on a similar topic and help build a literature review.
Find similar papers in the chat
Make a presentation
100%