1 / 5
文档名称:

大数据分析工具有哪些.docx

格式:docx   大小:15KB   页数:5页
下载后只包含 1 个 DOCX 格式的文档,没有任何的图纸或源代码,查看文件列表

如果您已付费下载过本站文档,您可以点这里二次下载

分享

预览

大数据分析工具有哪些.docx

上传人:wu190701 2019/2/9 文件大小:15 KB

下载得到文件列表

大数据分析工具有哪些.docx

相关文档

文档介绍

文档介绍:大数据分析工具有哪些“大数据”概念最早由维克托·迈尔·舍恩伯格和肯尼斯·库克耶在编写《大数据时代》中提出,指不用随机分析法(抽样调查)的捷径,而是采用所有数据进行分析处理。那么,大数据的分析工具有哪些呢?下面和小编一起看看吧! 大数据分析Storm:ApacheStorm是一种开源的分布式实时计算系统。Storm加速了流数据处理的过程,为Hadoop批处理提供实时数据处理。 Spark:Spark是一个兼容Hadoop数据源的内存数据处理平台,运行速度相比于HadoopMapReduce更快。Spark适合机器学****以及交互式数据查询工作,包含Scala、Python和JavaAPI,这更有利于开发人员使用。 ***流处理工具Summingbird:与Storm和Scalding相似,开发者可以使用非常接近原生的Scala或者Java在Summingbird上执行MapReduce作业。 AWSKinesis:AmazonKinesis是一种实时数据流处理管理服务。它可以收集和处理来自不同数据源的数据,允许开发者编写可处理实时信息的应用程序,来源网站click-streams、营销和财务信息、制造工具和社交媒体,和操作日志和计量数据。 DataTorrent:DataTorrent是实时流媒体平台,可使企业执行数据处理或转换结构化与非结构化数据、实时数据流到数据中心。该产品主要利用和YARN技术。 SpringXD:通过任意数量的处理器,SpringXD架构支持事件驱动的数据流摄入。流是由Spring集成适配器支持。 SQLStream:SQLStream为流媒体分析、可视化和机器数据持续集成提供了一个分布式流处理平台。大数据(Hadoop)即服务ElasticMapReduce:AmazonElasticMapReduce(亚马逊EMR)是一个web服务,提供大量数据处理。通过一个大小可调整的AmazonEC2实例集群,EMR使用Hadoop来分配并处理数据。 Qubole:Qubote的大数据服务提供Hadoop集群内置数据连接器和大数据项目图形编辑器。 Mortar:Mortar是一个通用的大规模科学数据平台。它建立在AmazonWeb服务云,使用弹性MapReduce(EMR)启动Hadoop集群并处理大型数据集。Mortar可运行ApachePig,这是一个构建在Hadoop上的数据流语言。此外,Mortar还可运行Hadoop]、Pig、Java、Python和Luigi等,让用户专注于研究科学数据,无需担心IT基础设施。 Rackspace:RackspaceHadoop集群可运行HadoopRackspace托管专用服务器,自旋向上Hadoop公共云,或配置自己的私有云。 Joyent:JoyentHadoop是一个基于ApacheHadoop项目大数据托管环境云的解决方案。提供数据存储服务获取、分析和访问任何数据格式、数据管理服务以处理、监控和运行Hadoop及数据平台服务安全、存档和规模一致的可用性。 Google:Hadoop在谷歌的云平台上使用开源的ApacheHadoop谷歌计算引擎的虚拟机。SQL-in-Hadoop解决方案ApacheHive:ApacheHive优化了大型数据集分布式存储的查询和管理过程。Mapr