基于神经网络序列模型的热点标题生成

来源 :北京理工大学 | 被引量 : 0次 | 上传用户:c410504
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着互联网的高速发展,用户可以快速的获取各种热点信息。由于信息的爆炸式增长,用户在获取有用信息的同时,不可避免的被迫阅读一些无用信息,浪费用户时间,大大增加了用户获取信息的成本。因此,将热点信息进行概括并且保留原有重要信息的标题生成方法成为研究热点。本文从深度学习的角度出发,研究如何利用深度学习知识对标题生成任务进行建模。为此,提出了三个基于神经网络结构的标题生成模型,主要工作和创新点如下:(1)详细分析了标题生成任务的研究目的和意义,根据已有模型,针对编码器层数对于文本信息编码和压缩的影响,提出了基于多层编码器的标题生成模型。本文通过不同层数的编码器模型研究编码器层数对文本信息的编码和压缩作用。(2)针对传统标题生成模型仅利用文本第一句话作为输入而忽略其它文本信息的问题,提出了基于主题概念的标题生成模型。通过文本主题概念挖掘更深层次的文本信息,并利用这些文本信息生成高质量的标题。(3)为了综合考虑文本主题信息对模型的影响,提出了基于变分自编码器的标题生成模型。利用变分自编码器计算文本主题向量,通过文本主题向量与模型注意力机制相结合的方法,构建涵盖更多语义信息的编码向量,生成更高质量的标题。(4)在Gigaword和DUC-2004数据集上的实验结果显示多层编码器更有助于文本信息的编码和压缩,同时本文提出的两个基于主题的标题生成模型优于当前最好的模型,这证明了本文模型的有效性和可行性。
其他文献
随着高速铁路建设的不断发展,在大跨斜拉桥主梁上铺设无砟轨道已是必然趋势,但大跨斜拉桥结构复杂,其主梁结构受温度、荷载等环境因素影响产生的变形较大,造成主梁上各CPⅢ点的三维坐标存在多值性问题,使施工期间主梁上无砟轨道的铺设工作以及运营期间主梁上轨道的维修工作无法进行。针对上述问题,本文对大跨斜拉桥主梁上的无砟轨道控制网的测设方法进行了研究,旨在解决其主梁上CPⅢ控制网多值性的问题,主要包括以下研究
金属增材制造(Additative Manufacturing,AM)作为一种先进的高性能构件加工技术,具有高柔性、低能耗、复杂构件加工适应性强等显著技术优势,已成为增强高铁核心竞争力的前沿技术之一。铝合金具有密度小、塑性好、比强高、耐腐蚀性能好等优点,是高速列车轻量化结构设计的首选材料。然而,增材铝合金在成形过程中极易产生未熔合、气孔、裂纹等缺陷,严重降低其疲劳性能,是影响其发展和应用的重要原因
研究背景直肠癌在我国发病率较高且以中低位直肠癌居多,其中局部进展期低位直肠癌手术难度大、术后复发率高、生活质量较差。尽管新辅助放化疗的应用使得局部进展期直肠癌患者的术后复发率得到了显著的改善,患者的远期生存能否从中获益却未能明确。随着多学科综合治疗和全直肠系膜切除理念的普及以及超低位保肛手术的发展,直肠癌患者的保肛率得到较大的提高,但低位直肠癌患者术后生活质量能否因此得到改善仍存在一定的争议,然而
上世纪70年代兴起的“绿色革命”,使得小麦的产量有了质的提升。但是小麦株高的降低也带来了植株生物量变小,叶层过于紧密,透气性差,光能利用率低等新问题。本研究基于55K芯片标记,以ZNL12号和7AS为亲本创制了一套DH群体材料(含有178个株系)作为定位群体,利用覆盖小麦全部21条染色体的55K标记构建了遗传图谱。2018-2019连续两年将材料分别种植在杭州市临安区和温州市藤桥镇。在小麦的成熟期
在2019年7月国家农业农村部发布《中华人民共和国农业农村部公告第194号)》有关抗生素使用相关公告,2020年我国饲料中将全面禁止抗生素的添加;所以益生菌、酶制剂、植物精油、锌制剂等抗生素替代物将在养殖中发挥重要的作用。丁酸梭菌作为益生菌的一种,可以调节机体肠道酸性环境,降低p H,抑制有害微生物在肠道中滋生,维持肠道内环境稳态而被畜牧业做为饲料添加剂广泛使用。番鸭作为一种重要的经济动物,因其肉
2017年10月,中共中央办公厅印发《关于在全国各地推开国家监察体制改革试点方案》,部署在全国范围内深化国家监察体制改革的探索实践,完成省、市、县三级监察委员会组建工作,实现对所有行使公权力的公职人员监察全覆盖。之后短短3个多月,全国省、市、县三级监察委员会全部组建完成,深化国家监察体制改革试点工作取得重要阶段性成果。2018年3月,全国人民代表大会通过了《宪法》修正案和《监察法》,为国家监察机关
随着广大人民生活水平的提高,为满足人民的物质需求和方便出行,铁路运输作为一种主流的运输方式,其运量大、效益高的特点受到国内外广泛关注。我国相继开通了京广高铁、京沪高铁、朔黄和大秦重载铁路。随着列车总重和行车频次的增加,钢轨磨耗的行为越来越凸显,一些客货混跑的小半径曲线段钢轨的侧面磨耗更加严重,这不仅给车辆运行带来了严重的安全隐患,还增加了铁路运输的成本,严重损害了铁路运输的经济效益。故本文研究了钢
小麦抽穗期直接反映小麦品种生育期的长短,适宜的抽穗期在维持小麦高产稳产中起着关键作用。本实验室前期利用普通小麦-野生二粒小麦染色体臂置换系(Chromosome arm substitution line,CASL)在野生二粒小麦染色体7B短臂上定位到一个LOD值为7.68,表型贡献率为9.14%的QTL。本研究利用全基因组重测序和转录组测序技术对CASL7BS的染色体组成进行鉴定;通过BSR-s
教材是课堂教学的要素之一,也是教学的主要依据。想要提高课堂教学质量,寻找一本理想的教材是非常必要的。理想教材最基本的要求是教材内容与教学目标相一致,能激发学生的学习兴趣和积极性,便于教与学,而满足这样的要求绝非易事。正因为如此,如何编写一本理想的第二语言教材成为第二语言教学中一个非常重要和紧迫的问题。第二语言教学应面向不同的教学对象,设置不同的课程,尽量采用不同的教学方法。此外,根据具体国情和文化
赭曲霉毒素A(Ochratoxin A,OTA)是由曲霉属、青霉属等不同菌种产生的真菌毒素。由于其具有强致畸性、神经毒性、免疫毒性和致癌作用,严重危害了公众健康和食品安全,因此,OTA的快速、准确检测研究受到极大关注。OTA检测方法常用的有质谱、高效色谱和基于抗体的免疫技术。这些方法对于OTA的测量具有良好的稳定性、准确性和可靠性,但它们耗时、复杂、需要大量的精密设备和高技能专业操作人员。为此,开