资讯专栏INFORMATION COLUMN

Sahara顺利毕业,将加速OpenStack与Hadoop的融合

xiangzhihong / 1364人阅读

摘要:旧称项目的负责人昨天正式宣布,从孵化项目顺利毕业,将从下一版本开始作为核心项目之一。是技术的一种实现,目前被各行业广泛采用,已成为大数据处理的行业标准。

OpenStack Sahara(旧称:Savanna)项目的负责人Sergey Lukjanov昨天正式宣布,Sahara从OpenStack孵化项目顺利毕业,将从OpenStack下一版本Juno开始作为OpenStack 核心项目之一。Sahara是在2013年由领先的Apache Hadoop贡献方Hortonworks公司,较大的OpenStack 系统集成商Mirantis公司,以及全球领先的开源解决方案及版OpenStack的较大贡献方红帽公司联合发起的,致力于共同在 OpenStack上实现Apache Hadoop,使OpenStack用户能够轻松供应和管理弹性Hadoop集群,加快Hadoop在OpenStack上的开发和部署进程。

Apache Hadoop是MapReduce技术的一种实现,目前被各行业广泛采用,已成为大数据处理的行业标准。Sahara项目旨在为OpenStack用户提供一种简单、快捷地部署以及管理Hadoop集群的方案,类似于亚马逊Elastic MapReduce (EMR) 服务。

Sahara项目的架构图如下:


  • Horizon——提供GUI以使用所有Sahara的特性。
  • Keystone——认证用户并提供安全令牌,用以与OpenStack通信,用以给用户分配特定的OpenStack权限。
  • Nova——为Hadoop集群配置虚拟机。
  • Glance——用于储存Hadoop虚拟机镜像,每个镜像都包含了已安装的OS和Hadoop;预安装的Hadoop应该给予我们在节点布置上的便利。
  • Swift——可以作为需要进行Hadoop作业的预存储。

用户需要给Sahara提供一些信息来建立集群,比如Hadoop版本、集群拓扑、节点硬件详情以及一些其它的信息。在用户提供这些参数之后,Sahara将帮助用户在几分钟之内建立起集群,同样还可以帮助用户根据需求对集群进行扩展(增加或者删除工作节点)。

云计算提供基础架构平台,大数据应用在这个平台上运行,这是目前公认非常高效的处理大数据的方法之一。使用Sahara方案可有效满足如下使用场景:

1. 在OpenStack云环境中快速部署Hadoop集群;

2. 更充分地利用通用OpenStack IaaS云环境中未被利用的计算资源;

3. 与亚马逊EMR类似,为临时的或突发的数据分析任务,提供数据分析即服务(Analytics as a Service)

OpenStack和Hadoop的融合,既较大限度提高了服务器的资源利用率,又大大降低了大数据处理的准入门槛。可以预见,作为云计算和 大数据的桥梁之一,Sahara将会推动OpenStack云平台和Hadoop的整合,逐步进入大数据处理市场,更快速地借助云计算平台和大数据处理技 术把数据转换为商业价值。

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/3873.html

相关文章

  • OpenStack 上部署 Hadoop

    摘要:看一个用例场景大量的数据存储在关系数据库管理系统环境中。当数据集越来越大时,关系数据库管理系统表现不佳。可在几分钟内部署集群。像其他服务一样,服务可以通过强大的和仪表板进行管理。编排即服务用于配置和编排数据处理集群的部署。 OpenStack 控制计算、存储和网络资源池。本文主要关注 OpenStack 如何在大数据用例中扮演关键角色。OpenStack 上的大数据现在,数据随处生成,数据量...

    luffyZh 评论0 收藏0
  • Google正式加入OpenStack基金会 推动Docker混合云加速融合

    摘要:这对于所有的希望尝试云的企业来说是个好消息,因为他们还没准备为云环境重写所有应用,但又希望在投身云计算时有为云优化的全新的应用。 今天,一位最具重量级的新成员签约加入OpenStack基金会,这就是——Google!双方的合作承将在例如Murano应用目录、Magnum容器流程管理服务等一系列开源项目持续贡献工程资源。这使得OpenStack在同一个Dashboard中管理虚拟的、非虚拟的、...

    MASAILA 评论0 收藏0
  • IaaS演进!一文读懂裸金属和容器即服务

    摘要:英特尔机架规模设计则能实现以机架为单位的软硬件解耦,为裸金属即服务提供容量更大的资源池,并可通过开放的和协议如和,高效发掘管理和调配这些资源。 江湖上,一直流传着得IaaS(基础设施即服务),得公有云天下的说法。想握紧IaaS这柄云端杀手锏, 大热的裸金属即服务和容器即服务,还不了解一下? 它们为什么如此受人...

    MadPecker 评论0 收藏0
  • 开源八预言:桌面linuxHadoop要火

    摘要:开源八大预言必亡要火安卓与一起占整个市场八成多占据全球智能手机操作系统市场超过一半的份额,是目前世界上更受欢迎的移动操作系统。开源八大预言必亡要火击败据市场研究公司称,年对于来说也许是迄今为止较好的一年。 近两年,在IT圈中开源这个词已经变得越来越常见,人人开口闭口谈云计算OpenStack、大数据Hadoop、手机Android,开源Linux。开发者、运维人员和IT媒体们也开始关注Euc...

    zhangke3016 评论0 收藏0
  • 多云之下,重构企业IT思考

    摘要:另有一项来自年云和采用行情报告调查显示,全球企业用户正以惊人的速度将应用软件和数据从公共云迁移到本地环境和私有云环境。浪潮商用机器应云而生,在很大程度上,为中国企业用户带来了多云时代的创新选择。81%的企业已意识到使用同一云厂商可能会带来的危险性,于是多云策略成为了企业用户2018年开始谈论的焦点。来自Rightscale的《2018年云计算状态报告》显示,平均每家企业都在接入多个公有云。另...

    leo108 评论0 收藏0

发表评论

0条评论

最新活动
阅读需要支付1元查看
<