обучение при поддержке ИИагенты поддержки клиентовгенеративный ИИ разговорный помощникгетерогенные эффекты интервенциипроизводительность труда
Figures from the paper
Abstract (AI)
Мы изучаем поэтапное внедрение генеративного ИИ в виде разговорного ассистента, используя данные 5 172 сотрудников службы поддержки клиентов. Доступ к помощи ИИ увеличивает производительность работников, измеряемую количеством решённых обращений в час, в среднем на 15% при значительной гетерогенности между сотрудниками. Эффекты существенно варьируются между разными агентами. Менее опытные и менее квалифицированные работники улучшают как скорость, так и качество своей работы, тогда как наиболее опытные и высококвалифицированные работники демонстрируют небольшое увеличение скорости и небольшое снижение качества. Мы также находим свидетельства того, что помощь ИИ способствует обучению работников и улучшает владение английским языком, особенно у международных агентов. Хотя системы ИИ улучшаются по мере увеличения объёма обучающих данных, мы обнаруживаем, что выгоды от внедрения ИИ наибольшие для относительно редких проблем, где у людей меньше базового опыта, но у системы всё ещё достаточно данных для обучения. Наконец, мы приводим доказательства того, что помощь ИИ улучшает рабочий опыт по нескольким показателям: клиенты становятся более вежливыми и реже просят поговорить с менеджером.
Key Findings
1
AI-помощь способствует обучению сотрудников и улучшает владение английским языком, особенно среди международных агентов.
2
AI-помощь улучшает опыт работы: клиенты становятся вежливее и реже просят поговорить с менеджером.
3
Доступ к генеративному AI-консультанту повышает продуктивность сотрудников службы поддержки на 15% в среднем (решённых обращений в час).
4
Наибольший эффект от внедрения AI наблюдается для умеренно редких проблем, где у людей мало опыта, но у системы есть достаточные тренировочные данные.
5
Эффекты продуктивности и качества неоднородны: менее опытные и низкоквалифицированные работники улучшают и скорость, и качество, тогда как наиболее опытные/высококвалифицированные получают небольшое увеличение скорости и небольшое снижение качества.
Research Object
Генеративный разговорный помощник на базе ИИ, внедрённый для агентов службы поддержки клиентов
Research Subject
Влияние помощи ИИ на производительность агентов, скорость и качество работы, гетерогенные эффекты по опыту и навыкам, обучение работников и владение английским, зависимость прироста от типа задач и результаты взаимодействия с клиентами
Publication Details
Publication Date
2024-12-29
Journal
Publisher
ISSN
Cited by
2462
Open access PDF
Access Type
Author Information
Download PDF
Subscribe to digest
Источники этой статьи в scid.ai9
Нейронный машинный перевод посредством совместного обучения выравниванию и переводу2014
Обучение языковых моделей следованию инструкциям с использованием обратной связи от человека2022
За пределами вычислений: информационные технологии, организационная трансформация и эффективность бизнеса2000
Технический отчет о GPT-42023
Искусственный интеллект, рост фирм и продуктовые инновации2020
Законы масштабирования нейронных языковых моделей2020
Искры искусственного общего интеллекта: ранние эксперименты с GPT-42023
Генеративный искусственный интеллект в работе2023
GPT — это GPT: предварительный взгляд на потенциальное влияние больших языковых моделей на рынок труда2023