文档介绍：CC云数据采集中心及大数据计算平台建设方案成都中蓝信息技术有限责任公司目 录1引言 92云数据采集中心 503大数据计算平台 724性能及成本分析 755存储空间规划表 766机房选型 777安全设计 788风险分析 :做强终端、云平台建设、正迈向大数据时代,当前正面向所有智能终端提供优质的服务,同时通过终端传感器或数据采集服务能够获取海量的数据,并且数据量会以TB级剧增。迫切需要建设一套高性能、高安全性、高可靠性,可扩展性的云数据采集中心,并搭建一个数据中心支撑平台,以满足当今高速增长的数据存储、管理、计算的需求,同时便于将来拓展和进一步的改造。黑电、白电、浏览器等产品终端传感器采集的海量文本、图片数据以及用户数据,为CC后续其他数据分析挖掘项目提供数据支撑的信息平台。对应方针——终端内容服务、云服务支撑与数据挖掘、个性化数据价值探索。大数据的管理,黑电和白电产品终端传感器采集的数据有用户行为的文本数据(log)、台标等图片数据以及自建的影视知识库的结构化数据、电商平台的海量镜像数据。当CC的用户量和采集的数据量与日俱增的时候,数据中心必须能通过添加更多服务节点来扩展性能和负载能力,业务发展的需要。 搭建分布式存储平台(能够存储海量非结构化数据和结构化数据)、分布式并行计算平台等等,满足海量数据的采集、存储、计算的需要,平台必须具备高可用性,高扩展性,高可靠性要求。l 为CC后面的产品(收视率统计,智能推荐系统,拍立购,开放平台等等)的应用和实施打下坚实的基础,的大数据提供运营支撑。l 云中心初期建立至少保证可以正常运营1~2年,硬件选型,软件开始要考虑到今后大规模扩容的要求。l 技术平台要有能力支持数据量最高1000W终端数量的数据存储、数据计算、信息推荐等的能力。,本项目将遵循以下建设原则:l 前瞻性和高标准整个项目要按照企业对大数据应用的需要的高要求和高标准建设,参考行业标杆应用,建立满足需求,面向未来的目标,整个项目具有一定前瞻性。l 经济性和实用性整个项目以现有需求为基础,充分考虑未来发展的需要来确定系统的架构,既要降低系统的初期投入,又能满足服务对象的需求,同时系统设计应充分考虑对已有投资的保护,对已建立的数据中心、基础平台、应用软件应提供完备的整合方案。l 先进性和成熟性为了确保项目具有较长的生命周期,应充分考虑到管理创新、技术发展需要,按照先进的建设理念,选择先进的技术架构和成熟技术,满足业务需求。l 高性能和安全性规范地进行系统建设和开发,提供合理且经济有效的应急方案,确保系统的稳定,向各类服务对象提供可靠的服务。具有安全性,在系统遭到攻击或崩溃时能快速恢复,确保重要数据的机密性和完整性。 GB9361-88计算站场地安全要求l GB50173-93电子计算机机房设计规范l GB2887-89计算站场地技术条件l GB50174-2008电子信息系统机房设计规范l GB50462-2008电子信息系统机房施工及验收规范l GB50311-2007综合布线工程设计规范l GB50312-2007综合布线系统工程验收规范l GB50395-2007视频安防监控系统设计规范l GB50263-2007气体灭火系统施工及验收规范l GB50394-2007入侵报警系统工程设计规范l GB/T20269-2006信息安全技术—信息系统安全管理要求l GB/T20984-2007信息安全技术—信息安全风险评估规范l GB/T22239-2008信息安全技术—信息系统安全等级保护基本要求l GB/T22240-2008信息安全技术—信息系统安全等级保护定级指南l GA/T388-2002B计算机信息系统安全等级保护管理要求l GB/T8567-1988计算机软件产品开发文件编制指l GB/T1