文档介绍：数据挖掘 jxhanxa@ 主要内容 1. 概述 2. 数据仓库与 OLAP 技术 3. 数据挖掘技术 4. 数据挖掘应用 6. 数据挖掘实例 1 概述 背景 数据挖掘定义 基本概念 主要功能 数据挖掘模型 实现流程 数据挖掘的应用 未来趋势 背景二十世纪末以来,全球信息量以惊人的速度急剧增长—据估计,每二十个月将增加一倍。许多组织机构的 IT系统中都收集了大量的数据(信息)。目前的数据库系统虽然可以高效地实现数据的录入、查询、统计等功能,但无法发现数据中存在的关系和规则,无法根据现有的数据预测未来的发展趋势。为了充分利用现有信息资源,从海量数据中找出隐藏的知识,数据挖掘技术应运而生并显示出强大的生命力。 背景数据挖掘是八十年代投资 AI研究项目失败后, AI转入实际应用时提出的。它是一个新兴的,面向商业应用的 AI研究。( AI(Artificial Intelligence ,人工智能) ) 1989 年8月,在美国底特律召开的第 11届国际人工智能联合会议的专题讨论会上首次出现数据库中的知识发现( Knowledge Discovery in Database ,KDD )这一术语。随后,在 1991 年、 1993 年和 1994 年都举行 KDD 专题讨论会,汇集来自各个领域的研究人员和应用开发者,集中讨论数据统计、海量数据分析算法、知识表示、知识运用等问题。最初,数据挖掘是作为 KDD 中利用算法处理数据的一个步骤,其后逐渐演变成 KDD 的同义词。 背景现在, 人们往往不加区别地使用两者。 KDD 常常被称为数据挖掘( Data Mining ), 实际两者是有区别的。一般将 KDD 中进行知识学****的阶段称为数据挖掘( Data Mining ), 数据挖掘是 KDD 中一个非常重要的处理步骤。数据挖掘是近年来出现的客户关系管理( Customer Relationship Manag e ment , CRM )、商业智能( Business Intelligen ce, BI)等热点领域的核心技术之一。 Data Mining... ? Finding patterns in data ? Describing the patterns - one way is by rules ? Predicting from the rules - classification - forecasting or ? Knowledge Discovery in Databases ? Extracting knowledge ? Representing knowledge acquired ? Using the knowledge for future examples 数据挖掘定义 数据挖掘定义?技术角度的定义数据挖掘( Data Mining) 是从大量的、不完全的、有噪声的、模糊的、随机的实际应用数据中,提取隐含在其中的、人们事先不知道的、但又是潜在有用的信息和知识的过程。与数据挖掘相近的同义词包括:数据融合、数据分析和决策支持等。这一定义包括好几层含义:数据源必须是真实的、海量的、含噪声的;发现的是用户感兴趣的知识;发现的知识要可接受、可理解、可运用;并不要求发现放之四海皆准的知识,仅支持特定的发现问题。 数据挖掘定义?商业角度的定义数据挖掘是一种新的商业信息处理技术,其主要特点是对商业数据库中的大量业务数据进行抽取、转换、分析和其他模型化处理,从中提取辅助商业决策的关键性信息。简言之,数据挖掘其实是一类深层次的数据分析方法。因此,数据挖掘可以描述为:按企业既定业务目标,对大量的企业数据进行探索和分析,揭示隐藏的、未知的或验证己知的规律性, 并进一步将其模型化的有效方法。 Data mining context ? Business intelligence model ? Levels of data analysis method hidden shallow surface simple database queries statistical analysis data mining