Методы обеспечения конфиденциальности в генеративном искусственном интеллекте и больших языковых моделях: нарративный обзор

Privacy-Preserving Techniques in Generative AI and Large Language Models: A Narrative Review
Vassilios S. Verykios, Aris Gkoulalas-Divanis, Georgios Feretzakis, Konstantinos Papaspyridis
2024-11-04

дифференциальная приватностьфедеративное обучениегомоморфное шифрованиеатаки вывода принадлежностибезопасные многосоставные вычисления
Генеративный искусственный интеллект, включая большие языковые модели (LLM), преобразовал парадигму генерации данных и создания творческого контента, однако этот прогресс вызывает серьезные опасения в области конфиденциальности, особенно когда модели обучаются на чувствительных данных. В настоящем обзоре представлен всесторонний анализ методов обеспечения конфиденциальности, направленных на защиту данных в генеративном искусственном интеллекте, таких как дифференциальная конфиденциальность (DP), федеративное обучение (FL), гомоморфное шифрование (HE) и безопасные многосторонние вычисления (SMPC). Эти методы снижают риски, включая инверсию модели, утечку данных и атаки вывода о принадлежности, которые особенно актуальны для больших языковых моделей. Кроме того, в обзоре рассматриваются новые решения, включая технологии повышения конфиденциальности и постквантовую криптографию, как перспективные направления дальнейшего повышения конфиденциальности в системах генеративного искусственного интеллекта. Признавая математическую невозможность достижения абсолютной конфиденциальности, обзор подчеркивает необходимость согласования технических мер защиты с правовыми и нормативными рамками для обеспечения соблюдения законодательства о защите данных. Обсуждая этические и правовые последствия рисков конфиденциальности в генеративном искусственном интеллекте, авторы обзора подчеркивают необходимость сбалансированного подхода, учитывающего производительность, масштабируемость и сохранение конфиденциальности. Полученные результаты указывают на необходимость дальнейших исследований и инноваций для разработки методов обеспечения конфиденциальности, способных соответствовать масштабированию генеративного искусственного интеллекта, особенно больших языковых моделей, при соблюдении нормативных и этических стандартов.
1
Поскольку абсолютная приватность математически невозможна, технические меры защиты необходимо согласовывать с законодательными и нормативными требованиями к защите данных.
2
Эффективное сохранение приватности требует балансировать между конфиденциальностью, производительностью моделей, масштабируемостью и этическими аспектами по мере расширения генеративного ИИ.
3
Перспективными направлениями повышения приватности генеративного ИИ названы развивающиеся технологии повышения конфиденциальности и постквантовая криптография.
4
В обзоре рассматриваются дифференциальная приватность, федеративное обучение, гомоморфное шифрование и защищённые многосторонние вычисления для защиты чувствительных данных в генеративном ИИ.
5
Эти методы направлены на противодействие угрозам, особенно актуальным для больших языковых моделей, включая инверсию модели, утечку данных и атаки вывода принадлежности.

Системы генеративного ИИ, особенно большие языковые модели (LLM), обучаемые на конфиденциальных данных

Обеспечение конфиденциальности, риски нарушения конфиденциальности и компромиссы между конфиденциальностью, производительностью, масштабируемостью и соблюдением нормативных требований

Publication Details
Publication Date
2024-11-04
Journal
Publisher
ISSN
Cited by
139
Access Type
Author Information
Authors
Vassilios S. Verykios
Aris Gkoulalas-Divanis
Georgios Feretzakis
Konstantinos Papaspyridis
Explore further
Open the scid.ai AI chat with a ready-made request: it will find papers on a similar topic and help build a literature review.
Find similar papers in the chat
Make a presentation
100%