• Complex
  • Title
  • Keyword
  • Abstract
  • Scholars
  • Journal
  • ISSN
  • Conference
搜索

Author:

王辰成 (王辰成.) | 杨麟儿 (杨麟儿.) | 王莹莹 (王莹莹.) | 杜永萍 (杜永萍.) (Scholars:杜永萍) | 杨尔弘 (杨尔弘.)

Abstract:

  语法纠错任务是自然语言处理领域的一项重要任务,近年来受到了广泛关注。该任务旨在自动识别并纠正文本中所包含的语法、拼写以及语序错误等。本文将语法纠错任务看作是翻译任务,即将带有错误表达的文本翻译成正确的文本,采用基于多头注意力机制的Transformer 模型作为纠错模型并提出了一种动态残差结构,动态结合不同神经模块的输出来增强模型捕获语义信息的能力。受限于目前训练语料不足的情况,我们提出了一种数据增强方法,通过对单语语料的腐化从而生成更多的纠错数据,进一步提高模型的性能。实验结果表明,本文所提出的基于动态残差的模型增强以及腐化语料的数据增强方法对纠错性能有着较大的提升,在NLPCC 2018 中文语法纠错共享评测数据上达到了最优性能。

Keyword:

动态残差结构 多头注意力 语法纠错 数据增强

Author Community:

  • [ 1 ] [王辰成]北京工业大学信息学部

Reprint Author's Address:

Email:

Show more details

Related Keywords:

Source :

Year: 2019

Page: 1-11

Language: Chinese

Cited Count:

WoS CC Cited Count:

SCOPUS Cited Count:

ESI Highly Cited Papers on the List: 0 Unfold All

WanFang Cited Count: -1

Chinese Cited Count:

30 Days PV: 7

Online/Total:441/10484845
Address:BJUT Library(100 Pingleyuan,Chaoyang District,Beijing 100124, China Post Code:100124) Contact Us:010-67392185
Copyright:BJUT Library Technical Support:Beijing Aegean Software Co., Ltd.