Практические и этические проблемы использования больших языковых моделей в образовании: систематический обзор с картированием исследований
Practical and ethical challenges of large language models in education: A systematic scoping review
2023-08-06
SCID: 54.1/jpjnytcb
Discuss with AI
автоматизация образовательных задачэтические проблемычеловеко-ориентированный подходбольшие языковые моделисистематический обзор с картированием
Figures from the paper
Abstract (AI)
Инновации в области образовательных технологий, использующие большие языковые модели (LLM), продемонстрировали потенциал автоматизации трудоёмкого процесса создания и анализа текстового контента. Хотя были разработаны различные инновационные решения для автоматизации широкого спектра образовательных задач (например, генерации вопросов, предоставления обратной связи и оценивания эссе), существуют опасения относительно практической применимости и этичности этих решений. Такие опасения могут препятствовать дальнейшим исследованиям и внедрению инноваций на основе LLM в реальных образовательных условиях. Для решения этой задачи мы провели систематический обзор с картированием исследований, включивший 118 рецензируемых публикаций, опубликованных начиная с 2017 года, чтобы определить современное состояние исследований по использованию LLM для автоматизации и поддержки образовательных задач. Результаты выявили 53 варианта использования LLM для автоматизации образовательных задач, классифицированных по девяти основным категориям: профилирование/маркировка, обнаружение, оценивание, поддержка преподавания, прогнозирование, представление знаний, обратная связь, генерация контента и рекомендации. Кроме того, были выявлены несколько практических и этических проблем, включая низкую технологическую готовность, отсутствие воспроизводимости и прозрачности, а также недостаточное внимание к вопросам конфиденциальности и благодеяния. Результаты были обобщены в виде трёх рекомендаций для будущих исследований: обновлять существующие инновационные решения с использованием современных передовых моделей (например, GPT-3/4), поддерживать инициативы по открытию исходного кода моделей и систем и применять человекоцентрированный подход на всех этапах разработки. Поскольку взаимодействие искусственного интеллекта и образования непрерывно развивается, результаты этого исследования могут служить важной отправной точкой для исследователей, позволяя им использовать сильные стороны, учитывать ограничения и выявлять потенциальные направления исследований, открываемые ChatGPT и другими генеративными моделями искусственного интеллекта. Примечания для практиков: Что в настоящее время известно об этой теме: создание и анализ текстового контента являются трудоёмкими и затратными по времени задачами. Большие языковые модели...
Key Findings
1
Систематический обзор 118 рецензируемых публикаций выявил 53 варианта применения больших языковых моделей в образовании, опубликованных с 2017 года.
2
К основным практическим и этическим проблемам относятся низкая технологическая готовность, недостаточная воспроизводимость и прозрачность, а также слабый учёт конфиденциальности и принципа благодеяния.
3
Выявленные варианты применения относятся к девяти категориям: профилирование/маркировка, обнаружение, оценивание, поддержка преподавания, прогнозирование, представление знаний, обратная связь, генерация контента и рекомендации.
4
Обзор рекомендует обновлять существующие решения с использованием современных моделей, таких как GPT-3/4, открывать исходный код моделей и систем и применять человеко-ориентированный подход к разработке.
5
Выявленные проблемы могут препятствовать развитию исследований и внедрению образовательных инноваций на основе больших языковых моделей в реальных образовательных условиях.
Research Object
Использование больших языковых моделей (LLM) в образовательных технологиях для автоматизации и поддержки текстовых образовательных задач
Research Subject
практические и этические проблемы, технологическая готовность, воспроизводимость, прозрачность, конфиденциальность и соблюдение принципа благодеяния этих инноваций в реальных образовательных условиях
Publication Details
Publication Date
2023-08-06
Journal
Publisher
ISSN
Cited by
871
Open access PDF
Access Type
Author Information
Download PDF
Subscribe to digest
Источники этой статьи в scid.ai3
Фреймворк Aion: размерное возникновение сознания ИИ, коллапс под воздействием наблюдателя и динамика космологических порталов2023
ChatGPT: генератор бессмыслицы или конец традиционного оценивания в высшем образовании?2023
Систематический обзор исследований применения искусственного интеллекта в высшем образовании: где преподаватели?2019