Самообучение PCFG-грамматик с латентными аннотациями в разных языках

Self-training PCFG grammars with latent annotations across languages
Zhongqiang Huang, Mary P. Harper
2009-01-01

точность парсинга китайского (85.2%)точность парсинга английского (91.5%)PCFG-LAмежъязыковой разборлатентные аннотациилексикализованный парсервероятностная контекстно-свободная грамматикасамообучение
Мы исследуем эффективность самообучения вероятностных контекстно-свободных грамматик с латентными аннотациями (PCFG-LA) для синтаксического анализа языков с разным объёмом размеченных обучающих данных. По сравнению с лексикализованным парсером Чарниака парсер PCFG-LA эффективнее адаптировался к языку, для которого синтаксический анализ развит хуже (т. е. китайскому), и в большей степени выигрывал от самообучения. Мы впервые показываем, что самообучение способно существенно улучшить производительность парсера PCFG-LA, являющегося единым генеративным парсером, как при небольшом, так и при большом объёме размеченных обучающих данных. Наш подход достигает передовых показателей точности синтаксического анализа для одиночного парсера как по английскому (91,5%), так и по китайскому (85,2%).
1
PCFG-LA эффективнее адаптируется к языкам с менее развитым парсингом (например, китайскому), чем лексикализованный парсер Чарняка, и сильнее выигрывает от самообучения.
2
Самообучение существенно улучшает работу PCFG с латентными аннотациями (PCFG-LA) при разных объёмах размеченных данных.
3
Предложенный подход достигает передовых точностей для одиночного парсера: 91.5% для английского и 85.2% для китайского.
4
Впервые показано, что самообучение может существенно повысить качество одиночного генеративного парсера (PCFG-LA) как на малых, так и на больших размеченных наборах данных.

Парсеры на основе вероятностной контекстно-свободной грамматики с латентными аннотациями (PCFG-LA), обученные методом self-training

Влияние самотренировки (self-training) на качество парсинга для разных языков и при различном объёме размеченных обучающих данных, включая улучшение точности для английского и китайского языков

Publication Details
Publication Date
2009-01-01
Journal
Publisher
ISSN
Access Type
Author Information
Authors
Zhongqiang Huang
Mary P. Harper
Explore further
Open the scid.ai AI chat with a ready-made request: it will find papers on a similar topic and help build a literature review.
Find similar papers in the chat
Make a presentation
100%