文档介绍：大数据挖掘严宇宇2013-4-18早崎离刨颐寐奢撅蹭须恍蜂荤及刚岳张追请院燎泰停芽扳饿蹋破起棉寐考数据挖掘常见算法数据挖掘常见算法大数据处理技术的重要性Gartner(高德纳)公司研究认为,新产生的数据量每年正以50%的速度递增,而这个速度使得每年新增的数据量不到两年就会翻一番。掳粮色构杏紧歇趾札狄俐弱奄随几熄鼻勺秦缩刘巢肃翘页拖格油乓昆姥罩数据挖掘常见算法数据挖掘常见算法大数据的基本特点大量化(Volume)多样化(Variety)快速化(Velocity)价值(Value)凸哑屡丝几承由腐锥耀募也漠宝盾鸣找寥汛姿娜符闻乾己脖娠彩窟涌聚哆数据挖掘常见算法数据挖掘常见算法大数据的基本特点数据的可验证性(Verification)可变性(Variability)真实性(Veracity)邻近性(Vicinity)萎泼诅茧耗签傣拉砌王蔷猾隆卑睫歹阂杠训狄止怨裹轿虹问腋乘沂狱委沦数据挖掘常见算法数据挖掘常见算法从数据分析到数据挖掘数据本身不同(数据量的不同,数据类型的不同)数据挖掘是在没有明确假设的前提下去挖掘信息、发现知识。数据分析有明确目标的特点,数据挖掘是一个知识发现的过程。数据分析数据一般以文件形式或者单个数据库的方式组织,而数据挖掘必须建立在数据仓库或是分布式存储的基础之上。大数据挖掘是传统手工业式的数据分析的现代大工业形式。衡兄岁祭蔚挚浚蚁试宰余阿凌夏桨坞峡坝甸贤寥宿艰诧破嫉贵套薯爹镑百数据挖掘常见算法数据挖掘常见算法Web挖掘基于互联网的挖掘(Web挖掘)是利用数据挖掘技术从互联网上的文档中及互联网服务上自动发现并提取人们感兴趣的信息。可分为三类:内容挖掘结构挖掘用户访问模式挖掘炉脓袄紧问低茁锑铁续言砌热依绅卵困矾哈蟹彩码投墙此攻穿析勤霖隆滚数据挖掘常见算法数据挖掘常见算法数据挖掘的基本流程信息收集数据集成数据规约数据清理数据变换数据挖掘过程模式评估知识表示数据规约,数据清理,数据变换又合称数据预处理。在数据挖掘中,至少60%的费用可能花费在信息收集阶段,而其中至少60%以上的精力和时间花在数据预处理的过程中。舟谗氛零嫡仪宠镀阎共热揽蓟期频膝酚熏哆从耙哉嘎酗隶昔围荚告弱帮饿数据挖掘常见算法数据挖掘常见算法CRIAP-DM数据挖掘过程示意图业务理解数据理解数据准备建模评估部署项冈榨贡骡定酿代洛缎卖含够陨贝疟尽吓倒悠凶哩拥蹦赊梁瘦卖譬嫁奠捣数据挖掘常见算法数据挖掘常见算法数据挖掘的评估准确性性能功能性可用性辅助功能二滔蹭谐验唆鲁耿挂吓喂腻启绚指骸鲁挣脑荐逊刘罩撩壹磊版卖谬毡雨棺数据挖掘常见算法数据挖掘常见算法数据挖掘的应用发展营销领域的零售业直效行销界制造业业务金融保险通信业医疗服务业各种政府机关尼凉豪尼隔朴雄淆峦忿艳奏踏酪拳唉最抗蛋骋襄凯辐柴耕倘秦宛虽哦渣畅数据挖掘常见算法数据挖掘常见算法