文档介绍：一、网络安全现状及主要问题当前移动互联网、大数据及云技术
等更新进程不断加快，数据量成指数级增长，人们对于大数据时代下
网络安全的相关问题也越来越关注。信息技术创新发展伴随的
安全威胁与传统安全问题相互交织，使得网络空间安全问题日益复杂隐蔽，面临的网络安全风险不断加大，各种网络攻击事件层出不穷。 2016 年，我国互联网网络安全状况总体平稳，未出现影响互联网正常运行的重大网络安全事件，但移动互联网恶意程序数量持续高速上涨且具有明显趋利性；来自境外的针对我国境内的网站攻击事件频繁发生；联网智能设备被恶意控制，并用于发起大流量分布式拒绝服务攻击的现象更加严重；网站数据和个人信息泄露带来的危害不断扩大；欺诈***软件在互联网上肆虐；具有国家背景黑客组织发动的高级持
续性威胁攻击事件直接威胁了国家安全和稳定。由于大数据网
络安全攻击事件仍呈高发态势，而且内容多又复杂，利用大数据分析技术特有的特点，为大规模网络安全事件监测分析提供计算支撑力量，并且对海量的基础数据进行深度挖掘及分析处理，及时监测发现网络
安全事件，实现对整体网络安全态势的感知。二、大数据基本
概述及分析技术一大数据基本概述随着信息技术全面融入社会生活，整个世界的信息量正在不断增多，而且增长的速度也在不断加快。所谓的大数据是指无法在一定时间范围内用常规软件工具进行获取、存储、管理和处理分析的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的
信息资产。大数据的规模之大，其在获取、存储、分析等方面
已经远远超出传统软件工具能力范围，业界通常用 4 个即、、、来概
括大数据的特征，分别是大量化，多样化，快速化，价值密度低。
二大数据技术除了提供为大家所共识的分布式数据存储功能之外，还
提供了叫做的数据处理功能。是一种编程模型，用于大规模数
据集大于 1 的并行运算。概念 " 映射 " 和" 归约 " ，其来源于函数
式编程语言或者矢量编程语言里的特性。是一个计算框架，其
表现形式就是具有一个输入，操作这个输入，通过本身定义好的计算模型，得到一个输出，这个输出就是最终需要的结果，计算模型如下图所示三大数据分析技术是一个基于内存计算的开源的集群分布式
计算系统，非常小巧玲珑，由加州伯克利大学实验室的为主的小团队
所开发。
使用的语言是，项目的部分的代码只有
63 个文件，非
常短小精悍。
由于是基于内存计算，效率要高于拥有，中间输
出和结果可以保存在内存中，从而不再需要读写，节省了磁盘耗时，
号称性能比快
100 倍。
是继 - 之后新兴的基于内存的大数据计算
框架，相对于来说，具有一定的优势。
一是计算速度快。
大
数据处理首先追求的是速度。
官方指出允许集群中的应用程序
在内存中以 100
倍的速度运行，即使在磁盘上运行也能快
10 倍。
二是应用灵活。
在简单的及操作之外，还支持查询、流式查询
及复杂查询，比如开箱即用的机器学****算法。
同时，用户可以
在同一个工作流中