资讯专栏INFORMATION COLUMN

Apache Hadoop 3.1.0 正式发布,原生支持GPU和FPGA

Drummor / 2644人阅读

摘要:月日,正式发布了,是年系列的第一个小版本,并且带来了许多增强功能。不过需要注意的是,这个版本并不推荐在生产环境下使用,如果需要在正式环境下使用,请等待或版本。更多的详情请参见官方

4月6日,Apache Hadoop 3.1.0 正式发布了,Apache Hadoop 3.1.0 是2018年 Hadoop-3.x 系列的第一个小版本,并且带来了许多增强功能。不过需要注意的是,这个版本并不推荐在生产环境下使用,如果需要在正式环境下使用,请等待 3.1.1 或 3.1.2 版本。

如果想及时了解Spark、Hadoop或者HBase相关的文章,欢迎关注微信公共帐号:iteblog_hadoop

这个版本的 Hadoop 带来了许多重大的变化,如下:

YARN 原生支持 GPU(详见 YARN-6223)

YARN 原生支持 FPGA(详见 YARN-5983)

支持原生的 YARN 服务(详见 YARN-5079 / YARN-4793 / YARN-4757 / YARN-6419)

YARN 新的调度放置策略

支持 docker container

容量调度(Capacity Scheduler):支持在执行队列映射时自动创建叶队列(详见 YARN-7117)

允许将存储在 HDFS 之外的数据映射到 HDFS 并从 HDFS 进行寻址。

更多的详情请参见官方 Release Notes: http://hadoop.apache.org/docs/r3.1.0/hadoop-project-dist/hadoop-common/release/3.1.0/RELEASENOTES.3.1.0.html

Changelog:http://hadoop.apache.org/docs/r3.1.0/hadoop-project-dist/hadoop-common/release/3.1.0/CHANGES.3.1.0.html

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/3935.html

相关文章

  • 机器学习的十三套框架

    摘要:十三套框架助你玩转机器学习技术在今天的文章中,我们将共同了解十三款机器学习框架,一部分去年刚刚发布另一部分则在不久前进行了全部升级。目前该项目正积极添加对的支持能力,不过此类项目一般更倾向于直接面向各承载机器学习任务的主流环境。 导读过去几年以来,机器学习已经开始以前所未有的方式步入主流层面。这种趋势并非单纯由低成本云环境乃至极为强大的GPU硬件所推动; 除此之外,面向机器学习的可用框架也迎...

    OpenDigg 评论0 收藏0
  • 谷歌说到做到:正式发布其云平台的GPU功能!

    摘要:三个月前,谷歌宣布会在年年初推出这项功能针对机器学习及其他专门的工作负载,支持高端图形处理单元。现在是年年初,谷歌言必出行必果今天正式发布谷歌云平台上的,供广大开发人员使用。 三个月前,谷歌宣布会在2017年年初推出这项功能:针对机器学习及其他专门的工作负载,支持高端图形处理单元(GPU)。现在是2017年年初,谷歌言必出行必果:今天正式发布谷歌云平台上的GPU,供广大开发人员使用。正如所料...

    opengps 评论0 收藏0
  • 阿里云服务器各实例规格名称的含义,实例规格是怎么选择?

    摘要:阿里云实例规格级别有哪些云服务器实例规格族可分为企业级实例规格族和入门级实例规格族。选购云服务器时,需要选择云服务器实例的规格信息实例规格族,也就是配置信息,实例规格族涉及到架构分类和应用场景等。阿里云ecs各实例规格名称的含义,实例规格是什么。 我们在了解和购买阿里云产品的时候,实例、实例规格是出现比较多的,所以有必要从概念和作用方面做个了解: 1、阿里云实例规格族包括哪些类型? (1)阿...

    nanchen2251 评论0 收藏0
  • 解密Apache HAWQ —功能强大的SQL-on-Hadoop引擎

    摘要:我们缓存资源的主要原因是减少与全局资源管理器之间的交互代价。资源管理器同时需要保证查询不使用超过分配给该查询的资源,否则查询之间会相互影响,可能导致系统整体不可用。主要向其他组件提供元数据的存储及查询服务。对外的接口为元数据查询语言。 作者简介:常雷,博士,Pivotal中国研发中心研发总监,HAWQ并行Hadoop SQL引擎创始人,Pivotal HAWQ团队负责人,曾任EMC高级研究员...

    willin 评论0 收藏0
  • FPGA加速:面向数据中心云服务的探索实践

    摘要:以下是腾讯云专家章恒在可信云大会上做的加速面向数据中心和云服务的探索和实践的演讲全文章恒各位嘉宾下午好,我是来自腾讯的章恒,今天分享的主题是加速面向数据中心和云服务上的探索和实践。 欢迎大家前往腾讯云+社区,获取更多腾讯海量技术实践干货哦~ 本文由columneditor 发表于云+社区专栏作者介绍:章恒——腾讯云FPGA专家,目前在腾讯架构平台部负责FPGA云的研发工作,探索FPG...

    harriszh 评论0 收藏0

发表评论

0条评论

最新活动
阅读需要支付1元查看
<