基于多任务学习的单文档摘要生成模型构建方法及装置[发明专利]

专利名称:基于多任务学习的单文档摘要生成模型构建方法及装置
专利类型:发明专利
发明人:蔡晓妍,刘森,戴航,杨黎斌
申请号:CN202010435810.5
申请日:20200521
公开号:CN111723196A
公开日:
20200929
专利内容由知识产权出版社提供
摘要:本发明公开了一种基于多任务学习的单文档摘要生成模型构建方法及装置,设计的模型结构采用了Transformer基础模型,并且在编码器的输出端,增加了一个编码器和分类器。其中两个编码器分为单词级别的解码器分别为,单词级别的编码器、句子级别的编码器;使得多任务训练成为可能;解码器的注意力分配会更加合理,因为加入根据解码器注意力权重与句子的重要性权重计算得到的正则项,能够倾向于更适合作为摘要的句子分配更多的权重;并且通过不同任务发掘模型潜力,从而提高了生成的摘要句子的可读性以及信息量。
申请人:西北工业大学
地址:710068 陕西省西安市友谊西路127号
国籍:CN
代理机构:西安恒泰知识产权代理事务所
代理人:王芳

本文发布于:2024-09-20 12:22:18,感谢您对本站的认可!

本文链接:https://www.17tex.com/xueshu/756472.html

版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。

留言与评论(共有 0 条评论)
   
验证码:
Copyright ©2019-2024 Comsenz Inc.Powered by © 易纺专利技术学习网 豫ICP备2022007602号 豫公网安备41160202000603 站长QQ:729038198 关于我们 投诉建议