【摘 要】
:
现有大型知识库中,实体类型信息的缺失尤为严重,而实体类型又是实体最基础最本质的属性,对很多自然语言处理任务都具有决定性的作用,因此实体分类问题是一个十分重要并亟待解决的问题。实体分类问题旨在确定一个在一段特定文本中的实体的语义类型。近几年将神经网络应用到实体分类任务上是一种趋势,然而众多基于神经网络的分类方法通常只是单独地提取实体本身和其所在文本的特征,忽视了它们之间的内在联系和实体丰富的背景信息
论文部分内容阅读
现有大型知识库中,实体类型信息的缺失尤为严重,而实体类型又是实体最基础最本质的属性,对很多自然语言处理任务都具有决定性的作用,因此实体分类问题是一个十分重要并亟待解决的问题。实体分类问题旨在确定一个在一段特定文本中的实体的语义类型。近几年将神经网络应用到实体分类任务上是一种趋势,然而众多基于神经网络的分类方法通常只是单独地提取实体本身和其所在文本的特征,忽视了它们之间的内在联系和实体丰富的背景信息。为了尽可能多地利用知识库文本的丰富语义信息,引入上下文实体的概念,提出一种基于神经网络结构的细粒度实体分类模型,对一段文本所描述的目标实体进行分类,得到目标实体的细粒度类型。模型是一种编码器-解码器的结构,编码器从目标实体本身、整段文本、上下文实体、目标实体与上下文实体间的相关性四个方面分别对输入文本进行特征提取,将得到的四个部分的特征向量拼接作为目标实体的编码;解码器通过全连接层将目标实体编码变换成类型分布,进而得到预测的实体类型。采用带有Attention的Bi-LSTM网络对整段文本进行特征提取,采用带有Attention的CNN网络对实体间关系进行特征提取。特点在于,对上下文实体和实体间相关性的特征提取这两部分,将文本中除目标实体之外其他实体单独考虑,并对目标实体与这些实体的相关性建模,从多个角度挖掘文本的特征,从而完善实体编码的过程。通过在FIGER和OwnWiki两个数据集上的实验验证模型的有效性。
其他文献
近年来,互联网和移动社交软件的飞速发展大大促进了社会网络的形成和发展。社区作为社会网络的一个重要特性,一直是社会网络分析的研究热点。由于社区通常存在重叠,因此研究重叠社区更具有现实意义。现有的重叠社区检测方法在权重分布较为复杂的网络上大都表现欠佳。而密度峰值聚类算法(Density Peaks Clustering,DPC)能够高效准确地识别出任意形状的社区结构,自提出以来受到了学者们的广泛关注。
步态作为一种动态生物特征,能够在人不配合并且距离相对较远的情况下被识别,因此步态识别得到了大量研究者的广泛关注。但是步态识别受目标行走速度,穿戴情况,摄像头的角度和光照情况等因素的影响。其中穿戴情况的变换是其中最大的挑战之一。深度学习方法能自动学习步态的更高层次的特征表达,且其方法也更简单计算量更小。但深度学习方法使用单一身份信息,提取到的特征信息比较单一,同时存在视野域以及网络结构自身的问题,提
随着计算机技术的快速发展,通过叶片对植物进行实时分类和识别是当前研究的热点和难点。利用计算机技术对植物进行实时分类和识别,可用于数字化植物标本、林业信息化等领域。
传统神经网络模型的训练需要大量有标签的数据,在大数据时代,获取标记数据费时费力,考虑到聚类算法可以得到数据的标签,能否将聚类与神经网络结合起来设计新的模型就是本文要探讨的内容。本文通过分析聚类的目标函数与神经网络的训练目标,发现两者优化目标相同,可以进行融合进而构造一个基于聚类的无监督神经网络模型。我们首先将无监督学习融合到神经网络中,完成了基于聚类的无监督神经网络模型的构建,并给出了这个框架的具
早在上世纪70年代初,蔡少棠教授就提出了忆阻器的概念,但直到2008年HP实验室才发现了由TiO2材料构成的忆阻器。研究表明,忆阻器在非易失存储器、逻辑电路、人工神经网络和混
化肥不当施用引发了一系列生态资源问题,严重制约了农业生产的可持续。小麦生产中同样也存在着化肥不当施用的现象。探究一种能够提升农户合理施肥知识的有效途径对于实现农
矿产开发,在古往今来的社会经济生活中都是一个重要的方面,它与社会的发展密切相关。鄂东南地区自古以来作为我国重要的矿冶基地,在晚清时期随着列强侵略加剧、国家发展经济
现代人类社会的工业化和现代化发展过程中产生了严重的生态破坏和环境污染,人们的身体健康也受此影响,在经济水平得到巨大提升的现代,人们对食品安全问题越发重视,对有机农业
与时俱进地推动中国化的马克思主义被广大人民群众所认知和接受,实现马克思主义大众化,一直是理论界的一项重要任务。《人民日报》作为中国共产党的机关报,始终坚持党性原则,
海外并购逐渐成为中国企业进行对外投资的重要形式,但是由于国际环境的不确定性和国家之间存在的差异,中国企业的海外并购呈现出了交易达成困难的情况,其中的原因值得探讨。并购经验对于中国企业海外并购交易达成的影响已经得到广泛认同,但学术界的研究主要集中在海外并购经验上,并没有详细地对国内并购经验以及同行业并购经验与海外并购交易达成的关系进行研究。解决它将有益于企业合理地应用不同的并购经验,降低海外并购中的