Искры искусственного общего интеллекта: ранние эксперименты с GPT-4
Sparks of Artificial General Intelligence: Early experiments with GPT-4
2023-03-22
SCID: 54.1/bnk4bq94
Discuss with AI
GPT-4искусственный общий интеллектбольшие языковые моделимультимодальные возможностипредсказание следующего слова
Figures from the paper
Abstract (AI)
Исследователи в области искусственного интеллекта (ИИ) разрабатывают и совершенствуют большие языковые модели (БЯМ), демонстрирующие выдающиеся возможности в самых разных областях и при решении разнообразных задач, что заставляет пересмотреть наши представления об обучении и познании. Последняя модель, разработанная OpenAI, — GPT-4 — была обучена с использованием беспрецедентного объёма вычислительных ресурсов и данных. В этой статье мы представляем результаты исследования ранней версии GPT-4, находившейся на тот момент в процессе активной разработки OpenAI. Мы утверждаем, что эта ранняя версия GPT-4 относится к новому поколению БЯМ — наряду, например, с ChatGPT и PaLM компании Google, — демонстрирующих более общий интеллект по сравнению с предыдущими моделями ИИ. Мы обсуждаем расширяющиеся возможности этих моделей и их последствия. Мы показываем, что помимо виртуозного владения языком GPT-4 способен решать новые и сложные задачи в математике, программировании, анализе изображений, медицине, праве, психологии и других областях без специального составления запросов. Более того, во всех этих задачах результаты GPT-4 поразительно близки к уровню человека и зачастую значительно превосходят результаты предшествующих моделей, таких как ChatGPT. Учитывая широту и глубину возможностей GPT-4, мы полагаем, что её можно обоснованно рассматривать как раннюю, хотя и ещё незавершённую, версию системы искусственного общего интеллекта (ИОИ). В ходе исследования GPT-4 мы уделяем особое внимание выявлению её ограничений и обсуждаем предстоящие трудности на пути к созданию более глубоких и всеобъемлющих версий ИОИ, включая возможную необходимость разработки новой парадигмы, выходящей за рамки предсказания следующего слова. В заключение мы размышляем о влиянии недавнего технологического скачка на общество и о направлениях будущих исследований.
Key Findings
1
Ранняя версия GPT-4 решала новые сложные задачи в математике, программировании, компьютерном зрении, медицине, праве и психологии без специализированных подсказок.
2
GPT-4 относится к новому поколению больших языковых моделей, демонстрирующих значительно более общий интеллект по сравнению с прежними системами ИИ.
3
Производительность GPT-4 в различных областях часто была близка к человеческому уровню и нередко значительно превосходила более ранние модели, такие как ChatGPT.
4
Широта и глубина возможностей GPT-4 позволили авторам рассматривать его как возможную раннюю, хотя и неполную, систему искусственного общего интеллекта.
5
Исследование подчёркивает ограничения GPT-4 и выявляет проблемы создания более всеобъемлющего AGI, для чего, возможно, потребуются парадигмы за пределами предсказания следующего слова.
Research Object
Ранняя (в процессе разработки) версия большой языковой модели GPT-4
Research Subject
способности GPT-4 к общему интеллекту, выполнение задач в различных областях, производительность на уровне человека и ограничения
Publication Details
Publication Date
2023-03-22
Journal
Publisher
ISSN
Cited by
1523
Open access PDF
Access Type
Author Information
Download PDF
Subscribe to digest
Работы, цитирующие эту статью20
Обзор больших языковых моделей2026
Обзор методов оценки больших языковых моделей2024
Генеративные агенты: интерактивные симулякры человеческого поведения2023
Генеративный ИИ на работе2024
Автономные химические исследования с использованием больших языковых моделей2023
Раскрытие потенциала инженерии промптов для больших языковых моделей2025
Управление человеческими ресурсами в эпоху генеративного искусственного интеллекта: перспективы и направления исследований ChatGPT2023
Будущий ландшафт больших языковых моделей в медицине2023
Анализ тональности в эпоху больших языковых моделей: проверка реальностью2024
Генеративный искусственный интеллект2023
Расширение возможностей больших языковых моделей с помощью химических инструментов2024
Обзор больших языковых моделей: приложения, проблемы, ограничения и практическое применение2023
ChatDev: Коммуницирующие агенты для разработки программного обеспечения2024
Большие языковые модели для программной инженерии: обзор и открытые проблемы2023
GPT (генеративно предварительно обученный трансформер): всесторонний обзор обеспечивающих технологий, потенциальных применений, возникающих проблем и перспективных направлений2024
Большие языковые модели могут изменить будущее поведенческого здравоохранения: предложение по ответственному развитию и оценке2024
Большие языковые модели для кибербезопасности: систематический обзор литературы2025
Mental-LLM2024
Исследование интеллектуальных агентов на основе больших языковых моделей: определения, методы и перспективы2026
Генерация с дополнением поиском для больших языковых моделей в здравоохранении: систематический обзор2025