Грамотность в области искусственного интеллекта и ее значение для стратегий разработки промптов
AI literacy and its implications for prompt engineering strategies
2024-04-17
SCID: 54.1/fyuskw9v
Discuss with AI
грамотность в области ИИгенеративный ИИвысшее образованиебольшие языковые моделиинжиниринг промптов
Figures from the paper
Abstract (AI)
Технологии искусственного интеллекта (ИИ) стремительно развиваются. В рамках этого развития большие языковые модели (БЯМ) все чаще используются во взаимодействии людей с системами на основе ИИ, создавая как новые возможности, так и новые вызовы. При целенаправленном взаимодействии с системами ИИ на основе БЯМ разработка промптов сформировалась как навык составления точных и хорошо структурированных инструкций для получения от БЯМ желаемых ответов или информации, что повышает эффективность взаимодействия. Однако исследования того, как неспециалисты используют системы ИИ на основе БЯМ с помощью разработки промптов и как грамотность в области ИИ влияет на поведение при составлении промптов, пока недостаточно. Этот аспект особенно важен с учетом значения БЯМ для высшего образования. В настоящем исследовании мы рассматриваем данный вопрос, предлагаем основанный на навыках подход к разработке промптов и непосредственно анализируем роль грамотности неспециалистов в области ИИ — в частности, студентов — в формировании их навыков разработки промптов. Мы также представляем качественные сведения об интуитивном поведении студентов при взаимодействии с системами ИИ на основе БЯМ. Результаты показывают, что более высокое качество навыков разработки промптов позволяет прогнозировать качество выходных данных БЯМ, что свидетельствует о том, что разработка промптов действительно является необходимым навыком для целенаправленного использования генеративных инструментов ИИ. Кроме того, результаты показывают, что определенные аспекты грамотности в области ИИ могут способствовать повышению качества разработки промптов и целенаправленной адаптации БЯМ в образовании. Поэтому мы выступаем за интеграцию образовательного содержания, посвященного ИИ, в действующие учебные планы, чтобы способствовать формированию гибридного интеллектуального общества, в котором студенты смогут эффективно использовать такие генеративные инструменты ИИ, как ChatGPT.
Key Findings
1
Более качественная разработка промптов предсказывает более высокое качество ответов LLM, подтверждая, что промптинг является необходимым навыком для целенаправленного использования генеративного ИИ.
2
Качественный анализ выявляет интуитивные модели поведения студентов при взаимодействии с системами ИИ на основе LLM.
3
Определённые аспекты ИИ-грамотности студентов способствуют более качественной разработке промптов и более целенаправленной адаптации LLM в образовании.
4
Авторы обосновывают включение образовательного содержания об ИИ в существующие учебные программы, чтобы помочь студентам эффективно использовать генеративные ИИ-инструменты в гибридном интеллектуальном обществе.
5
Исследование предлагает ориентированный на навыки подход к разработке промптов для студентов-неэкспертов, использующих большие языковые модели.
Research Object
Студенты-неэксперты, взаимодействующие с системами ИИ на базе больших языковых моделей через промпт-инжиниринг
Research Subject
Взаимосвязь между грамотностью студентов в области ИИ, навыками разработки промптов, а также качеством и адаптацией результатов работы больших языковых моделей в высшем образовании
Publication Details
Publication Date
2024-04-17
Journal
Publisher
ISSN
Cited by
368
Open access PDF
Access Type
Author Information
Download PDF
Subscribe to digest
Источники этой статьи в scid.ai13
Предварительное обучение, промптинг и предсказание: систематический обзор методов промптинга в обработке естественного языка2022
Концептуализация грамотности в области искусственного интеллекта: разведочный обзор2021
GPT-3: его природа, масштабы, ограничения и последствия2020
ChatGPT для образования и научных исследований: возможности, угрозы и стратегии2023
SWOT-анализ ChatGPT: последствия для образовательной практики и исследований2023
Грамотность в области искусственного интеллекта в высшем образовании и образовании взрослых: обзор литературы по методологии картирования2022
Роль ChatGPT в высшем образовании: преимущества, проблемы и направления будущих исследований2023
Влияние AI-помощи на агентность студентов2023
Технологии, человечность и доверие: переосмысление доверия к технологиям2015
Необходимо лидерство для этичного использования ChatGPT: характер, оценивание и обучение с использованием искусственного интеллекта (ИИ)2023
Война чат-ботов: Bard, Bing Chat, ChatGPT, Ernie и другие. Новая золотая лихорадка ИИ и её влияние на высшее образование2023
Создание произведений искусства с помощью подсказок для ИИ: исследование творческого навыка разработки подсказок2024
Антропоморфизм и социальное присутствие во взаимодействии человека с виртуальным сервисным помощником: роль длительности диалога и установок2022