文档介绍：大数据平台规划方案汇报目录二、大数据平台整体规划一、大数据应用发展趋势大数据所谓“大数据”,指的是所涉及的数据量规模巨大到无法通过目前主流软件工具,在合理时间内达到截取、管理、处理、并整理成为帮助企业经营决策更积极目的的信息。。大数据处理技术代表了新一代的技术架构,这种架构通过高速获取数据并对其进行分析和挖掘,从海量形式各异的数据源中更有效地抽取出富含价值的信息。从大量数据中挖掘高价值知识是各界对于大数据的一个共识。海量数据可广泛获得,所稀缺的是如何从中挖掘出智慧和观点。—— Google 首席经济学家 Hal Varian 大数据主要被用于分析和决策, 企业用以分析的数据越全面,分析的结果就越接近于真实。大数据分析意味着企业能够从这些新的数据中获取新的洞察力,并将其与已知业务的各个细节相融合,对企业产生新的价值。大数据对电信运营商的应用价值体现 31 5 42 自助分析、生产管道可视化、资源解耦随需而动,营销实时, 以业务效率提升为标志。提升业务效率数据集中到数据中心,多数据源管理,透明服务支持,实时的决策和预测能力提升整体经营管理水平。增强管理水平数据开放服务、与 OTT 厂商合作的后向收费、广告等新业务. 创新商业模式互联网化的电子渠道全景体验、个性化商品推荐、 LBS 位置营销、面向客户个体的深度洞察提升客户体验以技术驱动为标志,内存计算、 MPP 、 CEP …分而治之的分布式计算让运营商实时高效决策…. 技术高效、低成本数据平台现状精细化营销数据中心营账系统经分(BI) GN 口上网话单终端(DM) VAC 短彩信中心语音通话详单客服接触记录流媒体平台详单位置信令话单基站信息 116114 企业黄页信息渠道应用助销信息①经过一二期的建设,精细化运营平台的数据中心, 已经成为最大、内容最丰富的数据仓库; ②随着数据量的增长,需要对基础架构做长远规划; ③有必要深入挖掘数据价值, 研究新的商业模式,将成本中心转化为利润中心 5?增量式的、几乎无限的扩展扩展性?要求系统总是在线运行可用性?灵活可动态改变的数据模型灵活性扩展性纵向扩展横向扩展分布式资源集中计算和存储分布可用性单份数据数据复制?不要使用分布式事务处理一致性大数据处理的需求和特点低成本运营一体化运营精细化运营全网运营实时、智能化运营集中化建设、管理和维护可不断线性扩展提高资源综合利用率标准化功能组件,可共享可复用按业务量、按需支付 BASS 与 BOSS 、 CRM 的一体化 BSS 与 MSS 、 OSS 、 VAS 等跨域一体化对外部客户和应用的一体化片区化、网格化管理长尾市场、小众市场的支撑个性化、短周期需求的满足异地客户、家庭客户、集团客户一点接入、全网服务、全网客户画像全国统一套餐、全网营销、统一客服实时数据获取、处理、分析智能化主动事件触发智能管道移动互联网业务运营发展趋势对业务支撑平台的集中化要求对数据架构的集中化要求?集中化、大容量、高扩展、高可用数据库平台:支持全网型数据、跨域数据的整合,形成集中化管理的的企业级数据中心?高性能: 支持 3G 时代更高的实时性要求、支持?动态资源共享:支持多租户管理、资源动态按需供应?可重用、标准化组件:形成可重用组件,支持一次开发、各省共享的模式,形成规模型效益数据集中化趋势使得运营商面临着海量数据的存储及分析问题,大数据在支撑移动业务发展趋势中,充当重要角色。电信运营商数据集中化趋势 7电信运营面临的大数据挑战移动互联网和个人消费领域业务扩展和 CEM 导致海量数据的及时分析带来挑战运营商一体化集中运营和透明管控,催生巨大的经营分析数据仓库,对大数据的存储、性能、开放带来挑战 DPI 和信令监测,产生的大量事件在存储和用户通信行为分析的实时处理性能带来挑战 ICT 融合,核心网络、运营支撑和 VAS 业务数据的融合催生海量 User Profile 并集,对大数据的关联分析计算效能带来挑战移动互联网流量井喷与客户行为分析业务融合、能力互通带来数据融合提升客户体验要求分析网络服务数据 IT系统集中化和行业数据价值挖掘 BSS BI 数据: ?河南 17 个地市,每天抽取正常用户数 7000 多万,拨备用户数 3000 多万, DW 层用户表总量 1亿多条;语音清单每天 亿条数据, GPRS 清单每天 亿条数据;账务每天 亿条数据; GPRS 文件每个 100M 左右,其它文件 25M 。?日接口数据量: 2000G ,其中话单 220G , WAP 清单 300G ,工单服务 200G ,用户、帐务 300G ,其它 980G 。每月 124TB 数据量入库,历史数据保留 1年,总数据量 。?按照用户数简单测算, 亿用户下,总数据量》 10PB! 总部 3