主题模型增强的故事生成神经网络框架研究

来源 :浙江大学 | 被引量 : 0次 | 上传用户:a954862
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本文主要关注自然语言处理中的故事生成任务,即如何让机器根据给定的简短故事描述(如:话题或者一句话)生成一个完整故事的问题,该任务考验机器是否能够很好地掌握外界知识以及生成上下文语义信息连贯的故事。近期有一些基于Seq2Seq(序列到序列)框架,结合注意力机制、强化学习、基于故事骨架以及故事线的工作在该任务上取得了一些成果。但是还存在若干问题:首先,输入输出两端信息量不匹配问题。给定话题往往是若干个词,所生成故事很长,输入端无法提供较为充足的信息。其次,近期主流做法依赖于为故事中的每一句话提供关键字,然而实际应用中这些关键字很难获取。此外,以往方法所生成的故事比较单一,缺少故事多样性。
  本文探索并提出了利用话题模型对故事生成神经网络进行语义增强的框架—TopNet以解决上述问题。首先,使用话题模型对故事进行建模,以此学习到文档-主题分布的映射(主题预测网络)和话题-词典分布的映射(重构文档解码器)。其次,训练一个主题映射模块,用于将故事生成任务的输入(即简短的描述)映射为待生成故事的主题分布,并进一步提出自回归采样机制从主题模型挑选出的候选信息里面进一步选取合适的信息作为故事生成模型输入的补充信息。最后,利用当前自然语言处理中广泛使用的Transformer作为故事生成模型,将原有故事描述以及采样出的补充信息一起作为故事生成模型的输人生成完整故事。经过实验,本文提出的方法在三个公开的数据集上面都取得了很好的效果,并通过一系列对比、切除实验进一步证明本文提出的方法的有效性。
其他文献
摘 要:现阶段,在精细化管理的研究领域中,相关研究人员的研究重点是深入分析与提炼精细化管理以及精细化管理与企业统筹管理的结合等内容。然而,有关精细化管理与营销服务管理相结合的研究数量和案例较少,尤其是在电力行业中运用精细化电力营销服务管理方法来提升电力营销工作效果的研究仍然不够具体和深入,且缺乏指导性,非常值得深入的思考与探究。  关键词:精细化管理;电力营销;服务;措施  一、电力营销服务现状 
期刊
摘 要:在我国经济快速发展的同时,建筑行业的发展如火如荼,而且高层建筑数量在不断的增多,建筑工程建设质量渐渐地成为人们关注的焦点问题,建筑工程的质量是建筑企业的形象体现,也是影响建筑企业信誉的关键,所以强化建筑工程质量尤为必要。  关键词:质量;监督;检验;建筑;材料  建筑工程的材料种类纷繁多样,有防水材料、保温材料、隔热材料、隔音材料等,名目繁多的材料需要进行质量检验和监督,才能保证工程建设的
期刊
摘 要:面对全球环境污染与能源危机等问题,作为能源消耗量比例较高的建筑行业必须改善施工技术,建筑施工过程中加强对节能技术的应用,不仅能够降低对能源的浪费,而且有利于降低建筑企业的施工成本。建筑工程节能施工技术在现阶段的建筑行业中应用范围较广,涉及到太阳能技术、风能技术等等。本文主要从建筑工程建设节能施工的必要性、建筑工程中节能施工技术的应用两个方面进行简单论述。  关键词:建筑工程;节能施工技术;
期刊
摘 要:电力工程中的电力自动化技术主要是通过计算机网络对信息进行标准化的处理,以通信的形式对自动化控制的各个阶段进行管理的一项现代化应用技术。本文就电力自动化技术在电力工程中的应用做了简单的分析,旨在通过对自动化技术应用的介绍来提高供电公司的工作质量与效率,从而降低事故发生率。  关键词:电力工程;电力自动化;技术;应用  在先进科学技术的不断推动下,电力自动化技术的应用在一定程度上决定了电力工程
期刊
在现实环境中,通过物体图像推断它自身的材质一直是一个具有挑战的问题,获得的材质可被广泛应用在三维物体的重建,克隆迁移等AR领域。由于物体自身的材质属性在图像中与物体几何、光照环境高度糅合在一起,只剥离出其中的单个属性存在三义性。因此,本文针对均质物体提出了一种新的方法来克服这个欠约束的逆向绘制问题。
  本文所提算法对光照与材质的估计进行了分离,分为三大模块。先通过对光照环境少量的先验,设计了全新的隐空间补全的图像生成算法,获得结构化合理的全景光照恢复。再结合光照结果与物体图像利用深度神经网络得到物
摘 要:随着经济的不断发展,城市用电量也不断增多,为了能够更好地为城市居民服务,电力公司需要结合城市不同特点,对配网进行一定的完善与建设。电力公司只有加强对城市配网的相关建设,才能够有助于提高居民生活水平,也有利于公司的长效发展。本文简单分析了城市配网存在的问题,并探讨了城市配网规划和建设的有关措施。  关键词:城市;配网;规划;建设  城市配网规划是建设城市和管理城市的基本内容之一,是保证城市土
期刊
摘 要:建筑装饰材料是室内设计的重要的基础载体,不同类型的装饰材料的使用对设计所产生的影响也是不同的。在新时代的背景下,室内设计者要扩宽思维,不断创新,努力为住户营造温馨舒适的居住环境。本文主要对建筑装饰材料在室内设计中的创新运用进行了分析。  关键词:建筑装饰材料;室内设计;创新运用  随着社会发展建设节奏的不断加快,各种建筑装饰材料也如同雨后春笋一样大批量的出现,将这些内容丰富、材质过关的材料
期刊
摘 要:在我国供电系统中,电气自动化技术的主要设计方面是继电保护和集中监控变配电站,在供电系统中的应用作用日益明显,对提高供电系统的自动化水平发挥了重要意义。电气自动化中牵引负荷的变化与非线性因素降低了无功补偿效率,随着电气化的不断推广,系统的升降压要求就越来越高。本文论述了电气自动化技术的优势特征,以及其在电力系统中的具体应用,最后分析了供电系统中电气自动化的设计。  关键词:供电系统;电气自动
期刊
摘 要:建筑施工质量是建筑工程的生命。建筑工程的质量优劣不仅仅关系到建筑企業的经济效益和声誉,更为重要的是直接影响到人民群众的生命安全和国家的民生大计。本文通过了解建筑工程质量管理现状,分析影响建筑工程管理的相关因素,找出质量管理存在的问题,提出了加强施工工序和质量管理的对策和方法。  关键词:建筑工程;施工质量;现场施工管理  近年来,建筑行业在市场经济的快速发展下得到了空前发展,但是建筑工程在
期刊
摘 要:随着经济的快速发展,国内建筑行业有了飞速的发展。作为其中重要组成部分的土木工程,其施工质量也受到人们的广泛关注,而过程中的监理工作是保证施工质量的基础。本文结合当前土木工程监理存在的问题,提出一些提高监理施工技术的措施,希望对相关人员有所启示。  关键词:土术工程;监理;问题;措施  土木工程项目建设是一项非常复杂、难度性较大的工作,工程项目建设施工中,很有外界自然因素以及人为因素都会影响
期刊