360SDN.COM

首页/Hadoop/列表

Hadoop as Service,HaaS混合云部署解决方案

来源:EMC易安信中国技术社区  2017-09-19 09:01:16    评论:0点击:

这篇解决方案主要介绍了如何在现有的EMC联邦的混合云环境中快速部署Hadoop即服务。HaaS的实现是通过在EMC联邦混合云提供的IaaS基础上,集成VMware Big Data Extensions、Pivotal HD、和EMC Isilon,并通过VMware vRealize Automation进行控制的、可供最终用户自助服务、自动化的Hadoop部署解决方案。

 

 

白皮书的主要内容介绍了这些实现HaaS的组件的具体操作与配置的步骤,分别是:

 

VMware Big Data Extensions(BDE)

 

Serengeti是一个VMware的开源项目,它让Hadoop可以在VMware vCenter管理的环境中运行。而VMware Big Data Extensions是Serengeti的商业版本,它运行于Serngeti Management Server之上,提供了额外的诸如针对vSphere Web Client的GUI、优化vSphere中物理计算资源的分配等等企业级HaaS功能。而这些功能需要配合Pivotal HD(PHD)安装后才能够实现。白皮书中第三章提供了详细的安装PHD与配置BDE的过程。安装完BDE和PHD之后,用户可以通过在GUI中创建虚拟的Hadoop集群(关于虚拟化Hadoop集群的优势可以参考:)、定义发布版本、拓扑、计算规模、节点的类型等等。

 

 

支持HDFS的Isilon存储阵列

 

Isilon作为数据存储的载体,当通过BDE结合Isilon创建Hadoop集群的时候,Hadoop的数据节点可以根据配置创建在Isilon阵列上,并通过Secure Access Zone URL实现安全隔离。Isilon的横向扩展架构能够与Hadoop紧密集成,方便计算端和存储端都可以横向扩展。白皮书的第四章提供了Isilon配置HDFS的详细步骤以及设置Secure Access Zone的方法。

 

自定义的VMware vRealize Automation工作流

 

通过VMware vCloud Orchestrator中自定义的工作流,可以实现Hadoop集群的自动化,并通过自助服务门户提供给最终用户,将经过预先配置好的Hadoop部署,根据不同情形让用户在目录中进行选择并部署。白皮书的第5章提供了创建工作流的步骤。

 

总的来看,这篇白皮书花了大部分内容介绍了在EMC的混合云中实现HaaS的三个组件的具体配置过程,是一篇很好的配置参考文档。

其它参考文章:

说说EMC解决方案中的那些产品和案例

 

 

阅读原文

为您推荐

友情链接 |九搜汽车网 |手机ok生活信息网|ok生活信息网|ok微生活
 Powered by www.360SDN.COM   京ICP备11022651号-4 © 2012-2016 版权