文档介绍：大数据时代与大数据
——数据分析的新理念
厦门大学数据挖掘研究中心
厦门大学经济学院统计系
朱建平博士、教授、博士生导师
/
xmjpzhu@
大数据时代与大数据 ——数据分析的新理念
第一部分:大数据与大数据时代
一、大数据产生的背景
二、国内发展现状
三、大数据概念的界定
第二部分:数据分析的新理念
四、如何理解大数据和分析大数据
五、大数据对统计学科和统计研究工作的影响
一、大数据产生的背景
1955年
信息公开
1965年
摩尔定律
1973年
最小数据集
1980年
标准数据接口
1988年
普适计算
2000年
数据驱动
1955年,约翰•摩斯提出《自由信息法》草案,几经周折,
直到1965年才被参议院投票通过,直到次年7月4日才被美国总统签字通过。
摩尔定律:同一个面积集成电路上可容纳的晶体管数目,一到两年将增加一倍,
亦即计算机硬件的处理速度和存储能力将提升一倍。
最小数据集的概念起源于美国医疗领域,指代国家的管理层面针对某个
业务管理领域强制搜集的数据指标。一些领域的最小数据集甚至被上升到立法高度。
数据在不同信息管理系统之间的共享也使数据接口的标准化越来越得到强调。
返回
主机型计算阶段
(puting)
个人型计算阶段
(puting )
普适计算阶段(puting)
二、国内发展现状
近年来,对大数据的研究和应用不仅引起了我国自然科学和人文社会科学界的广泛重视,也受到我国中央政府的高度关注:
这些是大数据产业的重要组成部分,与大数据产业发展密切相关。
《“十二五”国家战略性新兴产业发展规划》明确提出支持海量
数据存储、处理技术的研发与产业化
《物联网“十二五”发展规划》提出将信息处理技术
列为四项关键技术创新工程之一
2013年2月国家统计局召开的以大数据为主题的工作会议
2013年3月26日科研所又举办了“大数据在政府统计工作中的应用研究”课题研究专家咨询会
2013年3月4日国家统计局科研所重点讨论部署了“大数据在政府统计中的应用”的研究工作
2012年12月国家统计局在上海开展了大数据应用的调研活动
2012年11月国家统计局总统计师鲜祖德会见美国华裔大数据专家时,提出国家统计局十分重视大数据在统计中的应
用,并成立了课题组研究如何通过对大数据处理推进统计方法制度改革,改进政府统计工作
我国国家统计局科研所于2012年8月就召开了大数据应用研究座谈会,提出了在大数据时代运用现代信息技术建立
统计云架构的研究目标。
2013年4月11日,国家统计局总统计师鲜祖德率领大数据课题组赴百度公司调研,就大数据在政府统计中的应用及相
关合作事宜,与百度公司有关领导和专家进行了深入交流
2013年5月2日国家统计局科研所青年学术沙龙深入研讨大数据应用
2013年8月6日,国家统计局总统计师鲜祖德主持召开了“大数据在政府统计中的探索与应用研究”课题报告座谈会
2013年10月28日-29日,“第十七次全国统计科学讨论会”在浙江省杭州市召开。主题是:大数据背景下的统计。
2013年11月19日,国家统计局与阿里、百度等11家企业签署了大数据战略合作框架协议。
2013年11月19日下午,国家统计局与上海钢联电子商务股份有限公司、山东卓创资讯集团有限公司、58同城信息技术有限公司、天云融创数据科技(北京)有限公司、中国联合网络通信有限公司、天脉聚源(北京)传媒科技有限公司、百度在线网络技术(北京)有限公司、阿里巴巴(中国)有限公司、纽海信息技术(上海)有限公司、昆明泛亚有色金属交易所股份有限公司和南京擎天科技有限公司共11家企业在京签订了大数据战略合作框架协议,共同推进大数据在政府统计中的应用,不断增强政府统计的科学性和及时性。
《大数据在政府统计中的探索与应用》2013年10月1日出版
2014年2月25日,国家统计局局长马建堂赴北京市中关村,考察中关村国家自主创新示范区、中关村数海大数据交易平台和京东商城。他说,统计部门要孜孜不倦推动大数据在政府统计中应用,不断加大与各类企业在大数据应用中合作力度,努力打造政府统计数据来源第二轨,使统计数据更加真实准确,为社会提供更加优质统计服务。
2014年3月22日,国家社科基金重大项目《大数据与统计学理论的发展研究》开题研讨会在厦门大学举行。中国统计学会副会长兼秘书长、国家统计局统计科学研究所所长潘璠作为子课题五《大数据下的统计方法实际应用探索》的负责人,介绍了大数据在政府统计中的研究进展及相关应用动态。