Системы семантической связи на основе глубокого обучения
Deep Learning Enabled Semantic Communication Systems
2021-01-01
SCID: 54.1/7k8gqjrc
Discuss with AI
DeepSCTransformerсемантическая коммуникациясходство предложенийtransfer learning
Figures from the paper
Abstract (AI)
В последние годы были разработаны энд-то-энд системы связи на основе глубокого обучения, объединяющие все блоки физического уровня традиционных систем связи и обеспечивающие совместную оптимизацию передатчика и приёмника. Подкреплённая достижениями глубокого обучения, обработка естественного языка добилась большого успеха в анализе и понимании больших объёмов текстов. Вдохновившись результатами в обеих областях, мы предлагаем новый взгляд на системы связи на семантическом уровне. В частности, мы предлагаем семантическую систему связи для передачи текста на основе глубокого обучения под названием DeepSC. Базируясь на Transformer, DeepSC направлена на максимизацию пропускной способности системы и минимизацию семантических ошибок путём восстановления смысла предложений, а не минимизации битовых или символьных ошибок, как в традиционной связи. Кроме того, применяется перенос обучения (transfer learning), чтобы обеспечить применимость DeepSC в разных условиях связи и ускорить процесс обучения модели. Для корректной оценки эффективности семантических коммуникаций мы вводим новую метрику, называемую сходством предложений. По сравнению с традиционными системами связи, не учитывающими обмен семантической информацией, предложенный DeepSC более устойчив к вариациям канала и обеспечивает лучшую производительность, особенно в режиме низкого отношения сигнал/шум (SNR), что демонстрируется обширными результатами моделирования.
Key Findings
1
По результатам обширных симуляций DeepSC более устойчива к вариациям канала и показывает лучшую производительность по сравнению с традиционными системами, особенно при низких SNR.
2
DeepSC построена на архитектуре Transformer с целью максимизации пропускной способности системы и минимизации семантических ошибок.
3
Введена новая метрика оценки — sentence similarity — для точной оценки производительности семантической связи.
4
Предложена DeepSC — семантическая система связи на основе глубокого обучения для передачи текста, ориентированная на восстановление смысла предложений вместо ошибок битов/символов.
5
Используется перенос обучения (transfer learning) для адаптации DeepSC к разным каналам связи и ускорения обучения модели.
Research Object
DeepSC: основанная на глубоком обучении семантическая коммуникационная система для передачи текста (энд‑ту‑энд система на базе Transformer)
Research Subject
Максимизация пропускной способности на семантическом уровне и минимизация семантических ошибок посредством восстановления смысла предложений (устойчивость к вариациям канала и эффективность при низком SNR), включая адаптацию через transfer learning и оценку с помощью метрики сходства предложений
Publication Details
Publication Date
2021-01-01
Journal
Publisher
ISSN
Cited by
1560
Open access PDF
Access Type
Author Information
Download PDF
Subscribe to digest