基于主题事件的舆情分析系统的设计与实现

被引量 : 6次 | 上传用户:shifujia
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
当前的舆情分析系统一般都是针对一个行业或整个互联网的,其研究的广度过大导致深度不足。本项课题的目的是实现一种细粒度的舆情分析系统,可以对主题事件为单位的互联网舆情信息进行深度分析。通过本课题研究成果,可以对特定事件的舆情信息进行多维度的深入的分析,可以作为政府或企业的一些决策的建议。本文的研究方法主要是调研当前相关技术背景,分析不足并提出改善方案。在本文中对主题爬虫、命名实体识别、聚类技术和社会关系分析技术进行了重点研究。首先,通过对相关技术的研究,本文提出了基于站内搜索的分布式主题爬虫设计方案,提供了高效且易于使用的爬虫系统,该系统不再需要大量的配置种子链接,并且摒弃了传统的以链接为任务的分布式爬虫任务管理方法。然后,本文实现了基于CRF的命名实体识别算法,添加了一系列结果修正方法,可以对人名和机构名进行较高准确率的识别,并且实现了统计方法与规则词典的结合,大大提高了结果准确率。第三,本文提出了基于LDA降维的聚类分析算法,通过LDA模型进行降维可以提高程序处理效率。聚类算法中实现了改进后的K-MEANS算法,该算法降低了初始质心盲目选择带来的性能损失,可以较普通K-MEANS算法更高效的对文本信息进行聚类。最后本文实现了基于关联规则原理的社会关系分析,通过支持度和置信度两个属性对社会实体的相关度进行分析,通过该算法实现的社会实体关系挖掘模块可以较准确的识别事件相关网页中潜在的社会关系。通过对主题事件舆情分析系统的设计与实现,本文证实了此类舆情分析系统的存在价值,即利用此类舆情分析系统可以为政府或大型企业发现人们对特定主题事件的关注程度,及事件内部存在的一些隐藏的社会关系。同时通过对各个相关技术的研究提出了一系列的完善方案,对相关领域技术的研究具有一定的参考价值。
其他文献
根据废气涡轮增压器喘振产生的机理,对某船四冲程柴油机增压器喘振的原因进行了分析,并针对该故障产生的原因提出了相应的解决措施。
随着韩国现代化技术的不断进步以及多媒体和信息通讯的飞速发展,当代的教育理念也出现了很多变化,这突出地表现在多媒体教学上。利用电脑和多媒体授课给学生提供了多样化的学
史料是历史的组织细胞,是认识历史的证据。把其运用到历史教学中既能激发学生学习历史的兴趣,培养学科能力;又能促进学生探究能力、创新精神及公民道德意识的养成。随着史料
古斯塔夫·克里姆特(Gustav Klimt,1862-1918)是19世纪末20世纪初奥地利维也纳分离派(Vienns Secession)的绘画大师,他的绘画风格大胆而独特,其作品具有强烈的装饰形式感和象
随着全球化趋势的加强和现代化程度的加快,流行音乐以及其他种种因素看似对民族音乐文化带来了极大的冲击,但这只是在技术层面和形式层面上的,其核心的美学品质依然是民族的
徐志摩,作为我国现代新月派著名诗人,他的诗歌作品中独特的美学美感永远是诗坛的一座丰碑。在他短暂一生中,"康桥文化"成了他诗作中永不凋谢的主题。本文立足理论层面,通过对
农民思想政治教育是中国共产党思想政治教育体系的重要组成部分,在当前社会主义新农村建设时代背景下,加强党的农村思想政治教育工作具有重要的现实意义。中国共产党在农村的思
淫羊藿活性成分是天然药物的研究重点之一,现代药理研究显示淫羊藿具有多种药效功能,主要集中在免疫、生殖系统、心脑血管系统及抗衰老等方面,具有较高的药用和保健价值。其
中国民间传统图案艺术正在逐渐引起文化界和艺术家的重视和兴趣。伴随着对中国民间传统图案艺术在其性质、内涵、范围、特征等方面的学术研究,进一步巩固了对中国民间传统图
典故传承着中国传统文化讯息,唐诗中典故的丰富运用为其带来厚重的文化积淀。因此,如何翻译唐诗中典故不仅是中国古典文学翻译的课题之一,更是传播中国特色文化的重要途经。