基于大数据技术的社会管理数据管理与分类

来源 :武汉大学 | 被引量 : 0次 | 上传用户:slow1223rabbit
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近些年来,随着我国政府社会管理创新能力的不断增强,信息化建设水平的不断提高,社会管理数据越来越表现出海量、快速、多样和复杂等特点。如何在社会管理中应用大数据的理论和技术,从而提高社会管理主体的预警能力、及时处理能力和综合协调能力,实现科学和动态的社会管理,成为了当今社会管理领域的机遇和挑战。目前在我国社会管理领域中,传统关系型数据库依然是数据管理的主要方式,随着社会管理数据规模的不断增长,以及社会管理对数据管理方式要求的不断提高,关系型数据库越来越无法满足实际的数据存储和处理的要求。针对这一问题,文本以当前主流的大数据处理技术Spark为主,组合多种大数据生态圈技术,以某市实际的社会管理数据中的事件数据为研究对象,重点研究基于大数据的社会管理数据存储方案。此外,事件类型作为事件数据最重要的信息,对于后续的数据挖掘工作具有重要意义。为了提高事件数据分类的自动化水平,本文研究了基于Spark技术实现的并行化文本自动分类技术,并通过实验证明了方法的有效性。本文的主要工作和研究成果包括:(1)针对社会管理的实际需求,并结合大数据技术,设计并实现了一种基于Hadoop分布式文件系统和Hive数据仓库的社会管理事件数据管理平台。(2)基于特征加权的改进朴素贝叶斯分类算法,实现了一种基于Spark的并行化社会管理事件数据文本分类技术,并通过实验证明了其分类的有效性。
其他文献
地红霉素是第二代大环内酯类抗生素,广泛地应用于临床治疗,是一种安全有效的抗生素。但由于地红霉素存在着生产成本较高以及产品晶习不理想等问题,导致其应用范围受限。为了解决上述问题,需要对其结晶过程以及多晶型现象进行系统地研究,而目前国内外均缺乏此方面的研究报道。基于此,本文对地红霉素的结晶过程热力学、多晶型现象及结晶工艺优化进行了系统的研究。首先,本文研究了地红霉素两种新晶型的结晶热力学性质,使用静态
在电厂生产运行中,润滑油的应用非常普遍,尤以汽轮机中的运用最为典型。润滑油在使用一段时间后粘度、水分等参量会偏离初始值,因此润滑油需要定期取样检测,但取样检测有局限
尾水中污染物种类多,含量低,难以生物降解,进入水体后会对受纳水体的生态和环境产生影响。本论文采用分子光谱仪和气相色谱-串联质谱联用仪等手段对典型水样中特征有机污染物
随着经济全球化的迅速发展,中国企业的对外投资在各行各业中越来越频繁。乌克兰相较于中国经济具有很强的互补性,这是吸引中方企业对乌克兰投资的重要原因。本论文旨在确定和评估中国公司在乌克兰投资成功的关键要素。首先,通过文献综述法对近年来国内外相关文献进行研究,了解到目前中国在乌投资成功的要素包括工人工资、国内生产总值、基础设施支出、税收、通货膨胀、人均国内生产总值增长率、汇率和利率。其次,本论文回顾了与
本文采用机械合金化的方法制备高活性水解制氢用铝基复合材料,并优化其成分及机械合金化工艺参数,目的在于制备出产氢性能优良的水解制氢材料。本文采用XRD、SEM、EDS、XPS表征方法对铝基复合材料的物相组成、组织形貌、微观结构进行了分析。主要研究类容如下:(1)采用机械合金化的方法制备Al-Ga-In-SnCl2复合材料,优化其成分及机械合金化工艺参数,采用最优机械合金化工艺参数制备的Al-3%Ga
全球范围内的能源枯竭以及气候变化危机正威胁着人类社会的可持续发展。推动全球范围内的电气化进程并大力开发和利用可再生能源是解决未来能源供应危机的重要途径。然而大规模可再生能源发电具有间歇性以及随机性的特征,因此其很难在短时间内占据全球电能供应的主导地位,传统的化石能源发电主体地位目前依旧难以撼动。因此,除了大力开发和利用可再生能源以外,要求电力部门内部借助先进的信息技术以及设备进行深刻地变革与创新,
目的了解天津市某三甲综合医院呼吸科送检临床标本分离的鲍曼不动杆菌对临床常用抗菌药物的耐药情况及耐碳青霉烯类鲍曼不动杆菌的碳青霉烯酶基因型的流行情况,掌握和了解本病区鲍曼不动杆菌的耐药特点,为临床合理使用抗菌药物及预防院内感染提供参考。方法1.收集2019年1月-2019年12月呼吸科病房送检临床标本分离的47株非重复鲍曼不动杆菌。2.对收集的菌株标本进行细菌培养及鉴定。3.采用纸片扩散法进行抗菌药
骨缺损指骨的结构完整性被破坏,是临床常见病。创伤、感染、肿瘤、骨髓炎手术清创、以及各种先天性疾病是导致骨缺损的主要原因。临床上粉碎性骨折造成的大段骨缺损一直是外
清洁能源是能源结构中的重要组成部分,然而其具有间歇性与波动性使得目前清洁能源利用率不够理想。需求侧负荷资源丰富、调控灵活且具有储能功能,通过合理的聚合管控可对波动性强的清洁能源进行跟踪消纳。然而需求侧负荷资源分布分散,不利于集中管控,因此本文提出由拥有云平台的家电商作为负荷聚合商,对云平台下的分散负荷进行虚拟聚合,便于负荷管理。由于需求侧负荷消纳清洁能源涉及多个参与方,不同参与方的需求有所不同。电
目的通过对伏立康唑临床应用的真实世界研究,探索用药行为及相关因素对药物疗效、安全性、经济性的影响,以期为临床合理用药提供依据。方法1.用药行为横断面研究建立恶性血液病患者应用伏立康唑预防/治疗侵袭性真菌感染的横断面研究。根据纳入排除标准,利用医院电子病历系统收集2018年5月1日至2018年7月31日应用伏立康唑的患者病历信息,对患者的基线资料、疾病情况、治疗措施、临床用药行为、预后疗效、安全性进