ZuCo — ресурс с одновременной записью ЭЭГ и трекинга глаз для чтения естественных предложений

Мы представляем Zurich Cognitive Language Processing Corpus (ZuCo) — набор данных, объединяющий записи электроэнцефалографии (ЭЭГ) и трекинга глаз у испытуемых при чтении естественных предложений. ZuCo включает данные высокоплотной ЭЭГ и трекинга глаз у 12 здоровых взрослых носителей английского языка, каждый из которых читал естественные тексты на английском языке в течение 4–6 часов. Записи охватывают две задачи нормального чтения и одну задачеспецифическую задачу чтения, в результате чего набор данных содержит ЭЭГ- и данные трекинга глаз для 21 629 слов в 1 107 предложениях и 154 173 фиксациях. Мы считаем, что этот набор данных представляет ценное ресурс для задач обработки естественного языка (NLP). Сигналы ЭЭГ и трекинга глаз могут быть использованы для обучения улучшенных моделей машинного обучения для различных задач, в частности для задач извлечения информации, таких как извлечение сущностей и отношений, а также анализ настроений. Кроме того, этот набор данных полезен для продвижения исследований процесса чтения и понимания языка человеком на уровне мозговой активности и движений глаз.