后台-系统设置-扩展变量-手机广告位-首页/栏目头部广告位

Hadoop托管集群

云计算与Hadoop11年来相爱相杀!

Hadoop托管集群
Apr 25,2019

同时诞生于2006年,十年间云计算革了架构的命,那Hadoop呢?Doug Cutting,在外界看来至少有两个称谓:作为技术大牛他是Hadoop之父,作为商业领袖他是Cloudera首席架构师。近日,Doug Cu

如何根据数据冷热程度分层存储,让HDFS更高效?

Hadoop托管集群
Apr 25,2019

陶捷中国移动苏州研发中心高级软件开发工程师目前负责中国移动大数据平台产品线CMH套件产品的研发,拥有丰富的Hadoop大数据平台研发和建设经验;开源Hadoop社区贡献者。曾任职

最常见的7 种 Hadoop 和 Spark 项目案例

Hadoop托管集群
Apr 25,2019

如果您的 Hadoop 项目将有新的突破,那么它必定与下边介绍的七种常见项目很相像。有一句古老的格言是这样说的,如果你向某人提供你的全部支持和金融支持去做一些不同的和创新

Apache Hadoop 3.0.0 GA版正式发布,可以部署到线上

Hadoop托管集群
Apr 25,2019

今天凌晨 Apache Hadoop 3.0.0 GA 版本正式发布,这意味着我们就可以正式在线上使用 Hadoop 3.0.0 了!这个版本是 Apache Hadoop 3.0.0 的第一个稳定版本,有很多重大的改进,比如

原创翻译 | Hadoop和企业信息管理:利用大数据的解决方案

Hadoop托管集群
Apr 25,2019


过去几年,大数据在全球商业环境中的重要性已得到坚定的确认。2017年看起来是 Apache Hadoopimplementation (在开源开发和更多的商业选择方面)在企业层面上,由于企业信

打赢数据安全攻坚战,从Hadoop-security治理说起!

Hadoop托管集群
Apr 25,2019

作者介绍汪涉洋,来自美国视频网站hulu的工程师,毕业于北京理工大学计算机专业,目前从事大数据基础架构方面的工作,个人知乎专栏“大数据SRE的总结”:http://dwz.cn/7ygSgc。前言

HDFS 副本存放磁盘选择策略详解

Hadoop托管集群
Apr 25,2019

在 HDFS 中,DataNode 将数据块存储到本地文件系统目录中,具体的目录可以通过配置 hdfs-site.xml 里面的 dfs.datanode.data.dir 参数。在典型的安装配置中,一般都会配置多个目

Apache Hadoop 3.1.0 正式发布,原生支持GPU和FPGA

Hadoop托管集群
Apr 25,2019

4月6日,Apache Hadoop 3.1.0 正式发布了,Apache Hadoop 3.1.0 是2018年 Hadoop-3.x 系列的第一个小版本,并且带来了许多增强功能。不过需要注意的是,这个版本并不推荐在生产环

在 OpenStack 上部署 Hadoop

Hadoop托管集群
Apr 25,2019

OpenStack 控制计算、存储和网络资源池。本文主要关注 OpenStack 如何在大数据用例中扮演关键角色。OpenStack 上的大数据现在,数据随处生成,数据量呈指数增长。来自 Web 服

Hadoop和大数据最炫目的60款顶级开源工具

Hadoop托管集群
Apr 25,2019

说到处理大数据的工具,普通的开源解决方案(尤其是Apache Hadoop)堪称中流砥柱。弗雷斯特调研公司的分析师Mike Gualtieri最近预测,在接下来几年,“100%的大公司”会采用Hadoop。

一文理解 Apache Hadoop 机架感知

Hadoop托管集群
Apr 25,2019

背景分布式的集群通常包含非常多的机器,由于受到机架槽位和交换机网口的限制,通常大型的分布式集群都会跨好几个机架,由多个机架上的机器共同组成一个分布式集群。机架内的机

Hadoop真的要死了吗?

Hadoop托管集群
Apr 25,2019

10 月 3 日,Hortonworks 宣布将与其主要竞争对手 Cloudera 合作创建一家年收入约为 7.3 亿美元、拥有 2,500 名客户、市场估值达 52 亿美元的公司,这令很多人感到意外。Splic

一文理解 Apache Hadoop 机架感知

Hadoop托管集群
Apr 25,2019

背景分布式的集群通常包含非常多的机器,由于受到机架槽位和交换机网口的限制,通常大型的分布式集群都会跨好几个机架,由多个机架上的机器共同组成一个分布式集群。机架内的机

通过BulkLoad快速将海量数据导入到Hbase

Hadoop托管集群
Apr 25,2019

在第一次建立HBase表的时候,我们可能需要往里面一次性导入大量的初始化数据。我们很自然地想到将数据一条条插入到Hbase中,或者通过MR方式等。但是这些方式不是慢就是在导入

HBase在人工智能场景的使用

Hadoop托管集群
Apr 25,2019

近几年来,人工智能逐渐火热起来,特别是和大数据一起结合使用。人工智能的主要场景又包括图像能力、语音能力、自然语言处理能力和用户画像能力等等。这些场景我们都需要处理

Strata+Hadoop World 北京首届会议

Hadoop托管集群
Apr 25,2019

Strata +Hadoop World 即将于8月3-6号在北京举行。Strata+Hadoop World 是“不容错过”的数据盛会,是全球最顶尖的数据系列会议——聚焦在大数据、机器学习、普适计算和分析

如何保证Hadoop数据湖不变成“数据洪水”

Hadoop托管集群
Apr 25,2019

数据湖的提出距今已经有了几年时间了,特别是在当今时代中,基于Hadoop建立的数据湖在大数据处理中占有的位置越来越重要。但是如何保证数据湖不像南方水灾一样泛滥,依然是一个

如何在Hadoop 2.0上实现深度学习?

Hadoop托管集群
Apr 25,2019

位于波士顿的数据科学团队正在利用前沿的工具和算法,通过对用户数据的分析来优化业务行为。 数据科学很大程度上依赖机器算法,它能帮助我们发现数据的特征。要想洞察互联网般

顶级Hadoop发行版的四个对比因素

Hadoop托管集群
Apr 25,2019

通过检查较高级的Hadoop发行版的关键特征,你可以决定哪些订阅适合你的组织。虽然软件组件构成的Hadoop生态系统堆栈是开源技术,但是采用付费订阅使用其供应商的商业Hadoop平

想要从大数据中获益?请先做好Hadoop管理

Hadoop托管集群
Apr 25,2019

Hadoop管理正在成为大数据用户和供应商首先考虑的分部署处理框架,它在企业的业务运营中中扮演着越来越重要角色。Comcast公司的IT团队在对Hadoop数据湖泊进行性能管理时,考虑

Hadoop十年 推动数据驱动型分析快速发展

Hadoop托管集群
Apr 25,2019

Hadoop迎来了10周年的生日。关于Hadoop,有很多大事件依然历历在目:Hadoop成为Apache的子项目并获得命名,第一版Hadoop代码发布,第一批用户部署了该代码。为了纪念这些事件,大数

优步在Hadoop上做增量处理的案例

Hadoop托管集群
Apr 25,2019

优步的任务是提供“对每个人来说,在任何地方都可以获得像自来水一样可靠的出行服务”。为了履行这一承诺,优步依赖于在每个层面做出数据驱动的决策。大部分的决策都得益于更

Hadoop namenode高可用性分析:QJM核心源代码解读

Hadoop托管集群
Apr 25,2019

背景介绍HDFS namenode 在接受写操作时会记录日志,最早 HDFS 日志写本地,每次重启或出现故障后重启,通过本地镜像文件+操作日志,就能还原到宕机之前的状态,不会出现数据不一致。

到2021年,Hadoop大数据分析市场产值将达406.9亿美元

Hadoop托管集群
Apr 25,2019

据市场研究咨询公司MarketsandMarkets新发布的一份市场研究报告声称,Hadoop大数据市场产值预计会从2016年的67.1亿美元猛增至2021年的406.9亿美元,2016年至2021年的年复合增

ZooKeeper 原理及其在 Hadoop 和 HBase 中的应用

Hadoop托管集群
Apr 25,2019

简介ZooKeeper是一个开源的分布式协调服务,由雅虎创建,是Google Chubby的开源实现。分布式应用程序可以基于ZooKeeper实现诸如数据发布/订阅、负载均衡、命名服务、分布式协

推荐文章

热门标签

    热门文章 最新文章 文章云

站内导航

全站搜索