Методы обеспечения конфиденциальности в генеративном искусственном интеллекте и больших языковых моделях: нарративный обзор
Privacy-Preserving Techniques in Generative AI and Large Language Models: A Narrative Review
2024-11-04
SCID: 54.1/mbw3fdc4
Discuss with AI
дифференциальная приватностьфедеративное обучениегомоморфное шифрованиеатаки вывода принадлежностибезопасные многосоставные вычисления
Figures from the paper
Abstract (AI)
Генеративный искусственный интеллект, включая большие языковые модели (LLM), преобразовал парадигму генерации данных и создания творческого контента, однако этот прогресс вызывает серьезные опасения в области конфиденциальности, особенно когда модели обучаются на чувствительных данных. В настоящем обзоре представлен всесторонний анализ методов обеспечения конфиденциальности, направленных на защиту данных в генеративном искусственном интеллекте, таких как дифференциальная конфиденциальность (DP), федеративное обучение (FL), гомоморфное шифрование (HE) и безопасные многосторонние вычисления (SMPC). Эти методы снижают риски, включая инверсию модели, утечку данных и атаки вывода о принадлежности, которые особенно актуальны для больших языковых моделей. Кроме того, в обзоре рассматриваются новые решения, включая технологии повышения конфиденциальности и постквантовую криптографию, как перспективные направления дальнейшего повышения конфиденциальности в системах генеративного искусственного интеллекта. Признавая математическую невозможность достижения абсолютной конфиденциальности, обзор подчеркивает необходимость согласования технических мер защиты с правовыми и нормативными рамками для обеспечения соблюдения законодательства о защите данных. Обсуждая этические и правовые последствия рисков конфиденциальности в генеративном искусственном интеллекте, авторы обзора подчеркивают необходимость сбалансированного подхода, учитывающего производительность, масштабируемость и сохранение конфиденциальности. Полученные результаты указывают на необходимость дальнейших исследований и инноваций для разработки методов обеспечения конфиденциальности, способных соответствовать масштабированию генеративного искусственного интеллекта, особенно больших языковых моделей, при соблюдении нормативных и этических стандартов.
Key Findings
1
Поскольку абсолютная приватность математически невозможна, технические меры защиты необходимо согласовывать с законодательными и нормативными требованиями к защите данных.
2
Эффективное сохранение приватности требует балансировать между конфиденциальностью, производительностью моделей, масштабируемостью и этическими аспектами по мере расширения генеративного ИИ.
3
Перспективными направлениями повышения приватности генеративного ИИ названы развивающиеся технологии повышения конфиденциальности и постквантовая криптография.
4
В обзоре рассматриваются дифференциальная приватность, федеративное обучение, гомоморфное шифрование и защищённые многосторонние вычисления для защиты чувствительных данных в генеративном ИИ.
5
Эти методы направлены на противодействие угрозам, особенно актуальным для больших языковых моделей, включая инверсию модели, утечку данных и атаки вывода принадлежности.
Research Object
Системы генеративного ИИ, особенно большие языковые модели (LLM), обучаемые на конфиденциальных данных
Research Subject
Обеспечение конфиденциальности, риски нарушения конфиденциальности и компромиссы между конфиденциальностью, производительностью, масштабируемостью и соблюдением нормативных требований
Publication Details
Publication Date
2024-11-04
Journal
Publisher
ISSN
Cited by
139
Open access PDF
Access Type
Author Information
Download PDF
Subscribe to digest