基于MAS的数据挖掘模型自动选择方法研究

被引量 : 7次 | 上传用户:ALFU
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
各个行业部门积累了大量业务数据,迫切需要将这些数据转换成有用的信息和知识,数据挖掘(Data Mining, DM)引起信息产业界的极大关注。应用数据挖掘技术去解决各类实际问题,数据挖掘模型的选择与设计是主要的环节,也是能否有效处理应用问题的关键。传统的数据挖掘模型设计依赖建模人员的专业知识,在分析应用领域业务特征的基础上,通过重复的数据探索和算法测试建立挖掘模型,大大降低了工作效率与模型准确程度。随着新技术的出现,模型设计人员可能忽略一些重要的挖掘方法及有助于知识发现的算法技术。针对数据挖掘人工建模效率低、知识复用困难等问题,本文研究数据挖掘应用特征、技术特征及业务数据特征,探讨数据挖掘模型的自动建模方法,设计数据挖掘模型的评价体系;在数据挖掘自动建模方法研究的基础上,结合MAS(Multi-Agent System)技术,建立基于MAS的数据挖掘模型自动选择架构,并且应用于油田开发领域。首先,通过引入挖掘模型自动选择方法所涉及的建模概念,明确特征、框架、目标、活动、方法、实体的基本意义,开发了数据挖掘模型选择通用技术。完成数据特征、业务特征、数据挖掘技术特征的具体抽象与定义,以符号的形式建立特征系统;基于节点模式,结合目标分析、活动分析、方法设计三个方面研究数据挖掘模型自动选择框架。以数据挖掘模型选择及设计为总体目标,将挖掘行为抽象为数据预处理、初步模型设计、模型调整、模型评估、知识表示五个基本活动。数据挖掘模型选择框架规范了数据挖掘模型自动设计各个阶段的目标及活动,组织挖掘业务与挖掘技术特征的具体逻辑关系,框架的设计基于目标、活动、方法等基本概念,利用节点表达挖掘过程中不同场景下需要的期望、响应及措施,表达挖掘模型选择不同阶段、不同层面的模型设计活动。为了完成可行数据挖掘模型集合求解任务,设计了基于DMMS_F (Data Mining Model Selection based on Feature, DMMS_F)及DMMS_E (Data Mining Model Selection based on Experience, DMMS_E)的求解方法。其次,设计数据挖掘模型评价体系结构,研究从可行数据挖掘模型集合中选择相对适用的挖掘模型评估方法,进行挖掘模型评价目标建模,完成挖掘模型自动选择机制中模型评价目标的规范描述;探讨数据挖掘模型的综合评价方法,包括评价框架和评价因子的设计。兼顾主观因素与客观因素对挖掘模型评价的影响,研究基于层次的评价框架,采用可调整的方法设计评价因子的层次位置及权重,给出数据挖掘模型评价体系,设计挖掘模型质量的评价方法。随后,将MAS技术引入数据挖掘模型自动选择方法的研究,建立基于MAS的DMMAS (Data Mining Model Auto Selection)模型框架;提出Agent集群概念与设计,通过外交角色、管理角色及劳务角色的引入实现Agent集群在挖掘模型选择设计过程的协作与交互;研究数据挖掘模型选择支持环境,分离数据挖掘模型设计方案的推理与运行,构建一个能够在知识合理组织基础上实现可能有效数据挖掘方案选择与配置的设计平台;就Agent技术实现而言,探讨Agent体系结构的设计及Agent协作模型的设计;在逻辑环组织结构的基础上,设计Agent动态管理平台,实现Agent的动态管理,主要包括Agent动态管理平台环形组织结构和动态管理平台对于Agent的管理方法;在模型研究的基础上,从系统开发角度分析基于MAS的DMMAS系统设计。最后,在油田开发生产领域探讨了基于MAS的DMMAS应用,设计石油测井岩性识别挖掘模型选择框架及压裂措施选井系统,并从运行和应用角度评价其质量。在挖掘模型的设计中,应用数据挖掘模型通用选择建模的特征符合系统,并且给出具体的模型选择流程与结果,从开发角度展示了业务定义、自动数据选择、挖掘模型设计、模型比较等数据挖掘模型自动选择的实现,完成基于MAS的DMMAS模型的实例化。
其他文献
<正>一、问题由来笔者曾听一位教师讲授苏教版《化学反应原理》(2009版)"原电池的工作原理"一节,教师按照教材(见图1)演示实验,电流计发生偏转。总结双液电池的构成条件——
<正>一、我国代工企业诞生于"三来一补"三来一补的"三来"是指来料加工、来样加工、来件装配,"一补"是指补偿贸易,是大陆在改革开放初期尝试性地创立的一种企业贸易形式,最早
选用鲜活的草鱼为原料制成膨化鱼片,研究原料脱腥、干燥、贮藏条件等因素对产品品质的影响。通过分析比较10种脱腥剂对鱼片的脱腥效果、产品外观及膨化效果的影响,确定了鱼片
我国沿海和内河是矿、煤、粮、建材等大宗散货的重要运输通道,国内干散货航运在国民经济发展中有着举足轻重的作用。国际金融危机对干散货航运业造成了巨大冲击,运价曾出现大
经济收敛理论是20世纪90年代以来经济增长理论研究最为热门的论题之一。这个理论的核心,就在于考察不同经济体之间或一国内部不同地区之间经济增长速度的差异,寻找这种差异产
专利制度和其他知识产权制度一样,旨在专权利人利益和公众利益之间寻求一种平衡。一方面要保护专利权人的合法权益,于是规定了等同原则;另一方面对专利侵权的判定需有足够的法
运用文献资料、调查访谈、逻辑分析等方法,对目前我国高校校园体育文化发展现状进行分析。结果显示:我国高校体育文化发展呈现文化自觉不足,文化软实力弱的瓶颈现象;体育文化
随着磷化工产业的不断发展,工艺安全问题也越来越突出,对安全工作的管理日趋繁重。目前,我国磷化工生产企业的工艺安全评价工作基本没有统一的标准,安全评价工作基本上处于人
2009年国内运营商开始部署WCDMA网络。目前GSM网络拥有世界上最广大的用户并占据主导地位,WCDMA网络与GSM网络会在相当长的时间内广泛地共存。因此如何发挥GSM与CDMA各自的优
随着食用菌需求量的增加,食用菌菌渣的数量也在不断的增加。大量的食用菌菌渣随意丢弃造成了环境污染和资源浪费。以食用菌菌渣生产有机肥既可实现菌渣的资源化利用同时又可