hadoop集群运维

hadoop集群运维精品文章

• 

  魅族大数据运维平台实践

  ...群。当时只有三个节点，因为我们起步比较晚，没有赶上Hadoop1.0，直接是用YARN来跑的大数据集群，而且默认就上了HA功能； 2014年9月节点增加到20个，数据日增30GB； 2015年6月上线Spark和Hbase，同时节点达到100个，数据日增10T； 2016...

  appetizerio 2019-05-28 17:04 评论0 收藏0
• 

  译 | 像使用一台主机一样管理集群

  ... 当单机的 CPU 性能和硬盘容量逐渐碰到了天花板，通过 Hadoop 这样的集群化技术来突破单机性能瓶颈就越来越流行。当然在 Hadoop 出现之前，集群方案早就应用于高性能的生产系统，例如 Weblogic 或者集群化的 WEB 服务器（复杂均...

  Jingbin_ 2019-06-28 15:03 评论0 收藏0
• 

  大会实录|清华徐葳：人工智能让数据中心更好运维

  ...luxio缓存非常有用，它还为Ceph和NFS适配了一个接口，还有Hadoop集群，HDFS里面也有几百块盘，将这三种东西适配城了两个借口，适合放在Docker里面，也适合放在Hadoop里面，且它加了些缓存，这样用机器人内存吸收了很多流量，上...

  bergwhite 2019-06-26 18:18 评论0 收藏0
• 

  智能运维 | 如何做好持续集成——Jenkins on Mesos 实践

  ...务器或虚拟服务器组成，用于运行应用程序的任务，比如Hadoop和MPI作业。第二级调度由被称作Framework的组件组成。Framework包括调度器（Scheduler）和执行器（Executor）进程，其中每个节点上都会运行执行器。Mesos能和不同类型...

  lsxiao 2019-06-28 15:15 评论0 收藏0