Война чат-ботов: Bard, Bing Chat, ChatGPT, Ernie и другие. Новая золотая лихорадка ИИ и её влияние на высшее образование
War of the chatbots: Bard, Bing Chat, ChatGPT, Ernie and beyond. The new AI gold rush and its impact on higher education
2023-04-24
SCID: 54.1/56uhejr8
Discuss with AI
BardBing ChatChatGPTErnieGPT-4рекомендации по оценке и обучениючат-ботысравнительная оценкавысшее образование
Figures from the paper
Abstract (AI)
Развитие в области чат-ботов ускоряется с головокружительной скоростью с конца ноября 2022 года. Ежедневно появляется множество новостей. В разгар гонки вооружений в области ИИ и «золотой лихорадки» разворачивается война конкурирующих чат-ботов. Эти быстрые изменения влияют на высшее образование, поскольку миллионы студентов и преподавателей начали использовать ботов, таких как ChatGPT, Bing Chat, Bard, Ernie и других, для самых разных целей. В статье мы отбираем некоторые из наиболее перспективных чат-ботов в англоязычном и китайскоязычном пространствах и приводим их корпоративный бэкграунд и краткую историю. После актуального обзора англоязычной и китайскоязычной научной литературы мы описываем наш сравнительный метод и систематически сравниваем отобранные чат-боты по многопрофильному тесту, релевантному для высшего образования. Результаты нашего теста показывают, что в этой когорте ботов в настоящее время нет ни «студентов» на уровне A, ни на уровне B, вопреки публикуемым и сенсационным заявлениям. Видимо, столь восхваляемый ИИ пока не так уж интеллектуален. Лучшие результаты показали GPT-4 и его предшественник, тогда как Bing Chat и Bard были похожи на студентов группы риска со средними оценками на уровне F. Мы завершаем статью четырьмя типами рекомендаций для ключевых заинтересованных сторон в высшем образовании: (1) преподавателям в части оценивания и (2) обучения и преподавания, (3) студентам и (4) высшим учебным заведениям.
Key Findings
1
GPT-4 и его предшественник показали лучшие результаты в сравнительном тесте, тогда как Bing Chat и Bard продемонстрировали низкие результаты, эквивалентные F.
2
Ни один чат-бот из протестированной когорты не продемонстрировал уровня A- или B-студента; общественные заявления о высоком интеллекте преувеличены.
3
Стремительное распространение конкурирующих чат-ботов с ноября 2022 года породило «гонку вооружений» в ИИ и повлияло на использование ботами студентов и академиков в высшем образовании.
4
Авторы систематически сравнили отобранные англоязычные и китайскоязычные чат-боты в рамках многодисциплинарного теста, релевантного высшему образованию.
5
Статья содержит четыре вида рекомендаций для заинтересованных сторон в высшем образовании: по оцениванию преподавателей, преподаванию и обучению, студентам и учреждениям.
Research Object
Современные чат-боты на базе больших языковых моделей (например, ChatGPT, Bing Chat, Bard, Ernie), используемые в высшем образовании
Research Subject
Сравнительная эффективность и ограничения этих чат-ботов в многодисциплинарных заданиях, релевантных высшему образованию, и их влияние на оценивание, преподавание и обучение, студентов и учебные заведения
Publication Details
Publication Date
2023-04-24
Journal
Publisher
ISSN
Cited by
419
Open access PDF
Access Type
Author Information
Download PDF
Subscribe to digest
Источники этой статьи в scid.ai17
Фреймворк Aion: размерное возникновение сознания ИИ, коллапс под воздействием наблюдателя и динамика космологических порталов2023
LLaMA: открытые и эффективные базовые языковые модели2023
Общение и списывание: обеспечение академической добросовестности в эпоху ChatGPT2023
Что, если дьявол — мой ангел-хранитель: ChatGPT как пример использования чат-ботов в образовании2023
ChatGPT: генератор бессмыслицы или конец традиционного оценивания в высшем образовании?2023
SWOT-анализ ChatGPT: последствия для образовательной практики и исследований2023
Применение чат-ботов в образовании: систематический обзор2021
ChatGPT в высшем образовании: вопросы академической добросовестности и обучения студентов2023
Вопросы академической добросовестности при использовании больших языковых моделей в постпандемическую эпоху: ChatGPT и далее2023
Возвышение ChatGPT: изучение его потенциала в медицинском образовании2023
Необходимо лидерство для этичного использования ChatGPT: характер, оценивание и обучение с использованием искусственного интеллекта (ИИ)2023
Мы уже достигли цели? — Систематический обзор литературы о чат-ботах в образовании2021
Общение и списывание: обеспечение академической добросовестности в эпоху ChatGPT2023
Сравнение научных аннотаций, сгенерированных ChatGPT, с оригинальными аннотациями с использованием детектора AI-выхода, детектора плагиата и слепых рецензентов2022
Поймает ли вас ChatGPT? Переосмысление выявления плагиата2023
Чат-боты: история, технологии и приложения2020
Чат-боты для обучения: обзор образовательных чат-ботов для Facebook Messenger2020
Работы, цитирующие эту статью5
Формирование будущего образования: изучение потенциала и последствий применения искусственного интеллекта и ChatGPT в образовательной среде2023
Роль ChatGPT в высшем образовании: преимущества, проблемы и направления будущих исследований2023
Грамотность в области искусственного интеллекта и ее значение для стратегий разработки промптов2024
Исследование совместного принятия решений: квазиэкспериментальное исследование взаимодействия человека и генеративного ИИ2024
«Когда честность хороша, ибо подражание плохо»: стратегии использования генеративного искусственного интеллекта в российских вузах2025