MapReduce服务

MapReduce服务

基于开源大数据生态系统，包括Spark、Hive、Hadoop等

资源申请

产品简介

　　MapReduce服务结合云技术和Hadoop、Hive、Spark等开源技术，提供安全、低成本、高可靠、安全的任务管理、集群管理、监控与告警等大数据处理分析服务。

产品特性

弹性伸缩

支持按需横向调整集群节点规模，且业务不中断；支持纵向调整集群单节点内存、CPU和硬盘不影响集群使用
高可靠性

分布式架构，多副本存储可以保证出现故障时自动恢复
离线存储与计算

支持海量数据离线存储与计算
易用性

可通过管理控制台，方便对节点，组件进行监控告警配置和运维操作
集群环境安全稳定

集群环境稳定，支持Kerberos认证保证安全

应用场景

离线数据分析
流式数据处理
海量数据存储

　　把大量的日志和数据同步到MapReduce服务的数据节点上，通过Hive、Spark等主流计算框架快速分析数据，获取有价值信息。
　　支持丰富的实时数据源，把业务产生的流式数据通过kafka接入MapReduce集群后，利用Spark Streaming来处理流式数据。
　　通过MapReduce集群数据节点可以存储PB级的数据。

产品功能

监控和告警

提供对集群节点的监控和告警服务，包括CPU使用率、内存使用率、硬盘使用率等

提供对集群节点的监控和告警服务，包括CPU使用率、内存使用率、硬盘使用率等
弹性扩展

可根据业务需求弹性增加或减少节点，适应多变的业务场景

可根据业务需求弹性增加或减少节点，适应多变的业务场景
计算作业管理

支持MapReduce、Spark、Hive等多种计算作业，随时查看作业的运行状态

支持MapReduce、Spark、Hive等多种计算作业，随时查看作业的运行状态
安全认证

支持Kerberos认证，保证集群安全

支持Kerberos认证，保证集群安全