EMR本地盘实例大规模数据集测试

直达最佳实践:【EMR本地盘实例大规模数据集测试
最佳实践频道:【点击查看更多上云最佳实践

这里有丰富的企业上云最佳实践,从典型场景入门,提供一系列项目实践方案,降低企业上云门槛的同时满足您的需求!

场景描述

阿里云为了满足大数据场景下的存储需求,在云上推出了本地盘D1机型,这个系列提供了本地盘而非云盘作为存储,提高了磁盘的吞吐能力,发挥Hadoop的就近计算优势。阿里云EMR产品针对本地盘机型,推出了一整套的自动化运维方案,帮助用户方便可靠地使用本地盘机型,不需要关注整个运维过程同时数据的高可靠和服务的高可用。

解决问题

1、云盘多份冗余数据导致成本高
2、磁盘吞吐量不高
3、节点的高可靠分布问题
4、本地盘与节点的故障监控问题
5、数据迁移时自动决策问题
6、自动故障节点迁移与数据平衡问题

产品列表

  • EMR(E-MapReduce)
  • 本地盘
  • VPC

EMR本地盘实例大规模数据集测试

直达最佳实践 》》

EMR本地盘实例大规模数据集测试

上一篇:ACM算法竞赛:抄课文


下一篇:喝汽水问题的两种算法实现