基于多任务预训练的AMR文本生成研究

来源 :软件学报 | 被引量 : 0次 | 上传用户：a62058803

【摘要】

：

抽象语义表示(abstract meaning representation,简称AMR)文本生成的任务是给定AMR图,生成与其语义一致的文本.相关工作表明,人工标注语料的规模大小直接影响了AMR文本生成的性能.为了降低对人工标注语料的依赖,提出了基于多任务预训练的AMR文本生成方法.特别地,基于大规模自动标注AMR语料,提出与AMR文本生成任务相关的3个预训练任务,分别是AMR降噪自编码、句子降噪自编码以及AMR文本生成任务本身.此外,基于预训练模型,在朴素微调方法的基础上,进一步提出了基于多任务训练的

【作者】

：

徐东钦李军辉朱慕华周国栋

【机构】

：

苏州大学计算机科学与技术学院,腾讯科技（北京）有限公司腾讯新闻

【出处】

：

软件学报

【发表日期】

：

2021年10期

【关键词】

：

AMR AMR文本生成多任务预训练序列到序列模型

【基金项目】

：

国家重点研发计划(2017YFB1002101),国家自然科学基金(61876120)。

下载到本地 , 更方便阅读

下载此文赞助VIP

声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架

论文部分内容阅读

其他文献

多查询共享技术研究综述

传统的数据库系统围绕单次查询的模型构建,独立地执行并发查询.由于该模型的限制,传统数据库无法一次对多个查询进行优化.多查询共享技术旨在共享查询之间的公共部分,从而达到提高系统整体响应时间和吞吐量的目的.将多查询执行模式分为两类,介绍了各自的原型系统——基于全局查询计划的多查询原型系统和以运算符为中心的多查询原型系统,并且讨论了两种系统的优势以及所适用场景.在之后的内容中,将多查询共享技术按照查询的各个阶段分为查询编译阶段中的多查询共享技术以及查询执行阶段中的多查询共享技术两大类.以这两个方向为线索,梳理了

期刊

多查询共享查询查询优化数据库高并发

接触式柔性辊加速冷却装置在不锈钢退火中的应用

采用红外测温仪、室温拉伸试验、光学显微镜(OM)、扫描电子显微镜(SEM)与能谱仪(EDS),研究了柔性辊冷却装置下不同退火温度对430铁素体不锈钢薄带冷却效率的影响,分析了带钢的组织与力学性能.结果表明:当退火温度由800℃升高至1100℃,用柔性辊得到的带钢的冷却速度先增大后减小;对比不同退火温度下的试验钢的晶粒尺寸:在850～950℃退火时,铁素体晶粒较细小均匀并呈等轴状;试样在退火温度为850～900℃时获得的性能较优,此时抗拉强度为480～500MPa,屈服强度为280～300 MPa,伸长率

期刊

430不锈钢柔性辊加速冷却微观组织力学性能

动态手势理解与交互综述

近年来,手势作为一种输入通道,已在人机交互、虚拟现实等领域得到了广泛的应用,引起了研究者的关注.特别是随着先进人机交互技术的出现以及计算机技术(特别是深度学习、GPU并行计算等)的飞速发展,手势理解和交互方法取得了突破性的成果,引发了研究的热潮.综述了动态手势理解与交互的研究进展与典型应用:首先阐述手势交互的核心概念,分析了动态手势识别与检测进展;而后阐述了动态手势交互在人机交互中的代表性应用,并

期刊

手势交互动态手势理解人机交互

荆汉生态新水道实施对长江中游航运的影响分析

摘要：针对长江干线航道“中梗阻”问题，学界提出了荆汉生态新水道的系统解决方案。通过梳理长江中游地区航运发展条件，从航道、港口、运输安全等方面，分析了荆汉生态新水道的实施对长江中游航运发展的综合影响。研究结果表明：① 荆汉生态新水道的建设，在长江中游区域将形成“双通道”的运输格局，促进长江干线航道区段标准统一和区域高等级航道网络化，形成与长江上游地区的便捷通道，大幅提高长江干线大型船舶的通达程度，实

期刊

水路运输荆汉生态新水道航道标准统一航运格局长江航运长江中游

基于多任务预训练的AMR文本生成研究

其他学术论文