文档介绍：工业控制技术研究所? Copyright by Song Zhihuan 自动化前沿自动化前沿第四讲第四讲数据挖掘技术及其应用数据挖掘技术及其应用宋执环宋执环浙江大学工业控制研究所浙江大学工业控制研究所控制科学与工程学系研究生课程工业控制技术研究所? Copyright by Song Zhihuan 主要内容主要内容??数据挖掘概述数据挖掘概述??数据预处理数据预处理??数据挖掘算法-分类与预测数据挖掘算法-分类与预测??数据挖掘算法-聚类数据挖掘算法-聚类??数据挖掘算法-关联分析数据挖掘算法-关联分析??序列模式挖掘序列模式挖掘??数据挖掘软件数据挖掘软件??数据挖掘应用数据挖掘应用工业控制技术研究所? Copyright by Song Zhihuan 一、数据挖掘概述一、数据挖掘概述工业控制技术研究所? Copyright by Song Zhihuan 数据挖掘概念数据挖掘概念??数据挖掘数据挖掘--从大量数据中寻找其规律的技从大量数据中寻找其规律的技术, 术, 是统计学、数据库技术和人工智能技是统计学、数据库技术和人工智能技术的综合。术的综合。??数据挖掘是从数据中自动地抽取模式、关联、变数据挖掘是从数据中自动地抽取模式、关联、变化、异常和有意义的结构化、异常和有意义的结构; ; ??数据挖掘大部分的价值在于利用数据挖掘技术改数据挖掘大部分的价值在于利用数据挖掘技术改善预测模型善预测模型。。数据挖掘与数据挖掘与 KDD KDD 工业控制技术研究所? Copyright by Song Zhihuan 数据挖掘与数据挖掘与 KDD KDD ??知识发现( 知识发现( KD KD ) ) ??输出的是规则输出的是规则??数据挖掘( 数据挖掘( DM DM ) ) ??输出的是模型输出的是模型??共同点共同点??两种方法输入的都是学****集( 两种方法输入的都是学****集( learning sets learning sets ) ) ??目的都是尽可能多的自动化数据挖掘过程目的都是尽可能多的自动化数据挖掘过程??数据挖掘过程并不能完全自动化,只能半自动化数据挖掘过程并不能完全自动化,只能半自动化工业控制技术研究所? Copyright by Song Zhihuan 数据挖掘的社会需求数据挖掘的社会需求国民经济和社会的信息化??社会信息化后,社会的运转是软件的运转社会信息化后,社会的运转是软件的运转??社会信息化后,社会的历史是数据的历史社会信息化后,社会的历史是数据的历史工业控制技术研究所? Copyright by Song Zhihuan 数据挖掘的社会需求数据挖掘的社会需求数据挖掘数据库越来越大有价值的知识可怕的数据工业控制技术研究所? Copyright by Song Zhihuan 数据挖掘的社会需求数据挖掘的社会需求数据爆炸,知识贫乏数据爆炸,知识贫乏苦恼: 淹没在数据中; 不能制定合适的决策! 数据数据知识知识决策决策 n模式 n趋势 n事实 n关系 n模型 n关联规则 n序列 n目标市场 n资金分配 n贸易选择 n在哪儿做广告 n销售的地理位置 n金融 n经济 n政府 nPOS. n人口统计 n生命周期工业控制技术研究所? Copyright by Song Zhihuan 数据挖掘的发展数据挖掘的发展? 1989 IJCAI 会议: 数据库中的知识发现讨论专题? Knowledge Discovery in Databases (G. Piatetsky -Shapiro and W. Frawley , 1991) ? 1991-1994 KDD 讨论专题? Advances in Knowledge Discovery and Data Mining (U. Fayyad, G. Piatetsky -Shapiro, P. Smyth, and R. Uthurusamy , 1996) ? 1995-1998 KDD 国际会议 ( KDD ’ 95-98) ? Journal of Data Mining and Knowledge Discovery (1997) ? 1998 ACM SIGKDD, SIGKDD ’ 1999-2002 会议,以及 SIGKDD Explorations ?数据挖掘方面更多的国际会议? PAKDD, PKDD, SIAM-Data Mining, (IEEE) ICDM, DaWaK , SPIE-DM, etc. 工业控制技术研究所? Copyright by Song Zhihuan 数据挖掘技术数据挖掘技术?技术分类?预言( Predication ): 用历史预测未来?描述( Description ): 了解