Практические и этические проблемы использования больших языковых моделей в образовании: систематический обзор с картированием исследований

Practical and ethical challenges of large language models in education: A systematic scoping review
Lixiang Yan, Roberto Martínez‐Maldonado, Dragan Gašević, Lele Sha, Yuheng Li, Guanliang Chen, Yueqiao Jin, Linxuan Zhao, Xinyu Li
2023-08-06

автоматизация образовательных задачэтические проблемычеловеко-ориентированный подходбольшие языковые моделисистематический обзор с картированием
Инновации в области образовательных технологий, использующие большие языковые модели (LLM), продемонстрировали потенциал автоматизации трудоёмкого процесса создания и анализа текстового контента. Хотя были разработаны различные инновационные решения для автоматизации широкого спектра образовательных задач (например, генерации вопросов, предоставления обратной связи и оценивания эссе), существуют опасения относительно практической применимости и этичности этих решений. Такие опасения могут препятствовать дальнейшим исследованиям и внедрению инноваций на основе LLM в реальных образовательных условиях. Для решения этой задачи мы провели систематический обзор с картированием исследований, включивший 118 рецензируемых публикаций, опубликованных начиная с 2017 года, чтобы определить современное состояние исследований по использованию LLM для автоматизации и поддержки образовательных задач. Результаты выявили 53 варианта использования LLM для автоматизации образовательных задач, классифицированных по девяти основным категориям: профилирование/маркировка, обнаружение, оценивание, поддержка преподавания, прогнозирование, представление знаний, обратная связь, генерация контента и рекомендации. Кроме того, были выявлены несколько практических и этических проблем, включая низкую технологическую готовность, отсутствие воспроизводимости и прозрачности, а также недостаточное внимание к вопросам конфиденциальности и благодеяния. Результаты были обобщены в виде трёх рекомендаций для будущих исследований: обновлять существующие инновационные решения с использованием современных передовых моделей (например, GPT-3/4), поддерживать инициативы по открытию исходного кода моделей и систем и применять человекоцентрированный подход на всех этапах разработки. Поскольку взаимодействие искусственного интеллекта и образования непрерывно развивается, результаты этого исследования могут служить важной отправной точкой для исследователей, позволяя им использовать сильные стороны, учитывать ограничения и выявлять потенциальные направления исследований, открываемые ChatGPT и другими генеративными моделями искусственного интеллекта. Примечания для практиков: Что в настоящее время известно об этой теме: создание и анализ текстового контента являются трудоёмкими и затратными по времени задачами. Большие языковые модели...
1
Систематический обзор 118 рецензируемых публикаций выявил 53 варианта применения больших языковых моделей в образовании, опубликованных с 2017 года.
2
К основным практическим и этическим проблемам относятся низкая технологическая готовность, недостаточная воспроизводимость и прозрачность, а также слабый учёт конфиденциальности и принципа благодеяния.
3
Выявленные варианты применения относятся к девяти категориям: профилирование/маркировка, обнаружение, оценивание, поддержка преподавания, прогнозирование, представление знаний, обратная связь, генерация контента и рекомендации.
4
Обзор рекомендует обновлять существующие решения с использованием современных моделей, таких как GPT-3/4, открывать исходный код моделей и систем и применять человеко-ориентированный подход к разработке.
5
Выявленные проблемы могут препятствовать развитию исследований и внедрению образовательных инноваций на основе больших языковых моделей в реальных образовательных условиях.

Использование больших языковых моделей (LLM) в образовательных технологиях для автоматизации и поддержки текстовых образовательных задач

практические и этические проблемы, технологическая готовность, воспроизводимость, прозрачность, конфиденциальность и соблюдение принципа благодеяния этих инноваций в реальных образовательных условиях

Publication Details
Publication Date
2023-08-06
Journal
Publisher
ISSN
Cited by
871
Access Type
Author Information
Authors
Lixiang Yan
Roberto Martínez‐Maldonado
Dragan Gašević
Lele Sha
Yuheng Li
Guanliang Chen
Yueqiao Jin
Linxuan Zhao
Xinyu Li
Explore further
Open the scid.ai AI chat with a ready-made request: it will find papers on a similar topic and help build a literature review.
Find similar papers in the chat
Make a presentation
100%