hadoop博客

hadoop博客精品文章

• 

  基于Docker编译Hadoop

  摘要: 将编译Hadoop所需要的依赖软件安装到Docker镜像中，然后在Docker容器中编译Hadoop，可以提高编译效率，同时避免污染主机。编译其他软件时，也可以参考这篇博客的方法。 GitHub地址: kiwenlau/compile-hadoop 在前一篇博客中，...

  用户84 2019-06-28 15:14 评论0 收藏0
• 

  hadoop配置与wordcount

  hadoop配置与wordcount 参考的博客大多都是hadoop2.x和低版本的java之上的，配置过程写出来看似很简单，看别人的博客也感觉步骤都差不多，但是自己配置时候出了很多问题：datanode启动不了，网页不能正常显示，datanode莫名死掉...

  _Zhao 2019-08-16 16:41 评论0 收藏0
• 

  hadoop运行第一个实例wordcount

  ...语： 这几周事情比较多，两周没写博客了，这周总算把hadoop的实例给运行起来，然后跑了一下官方的wordcount例子（用于统计文件中单词出现的次数）。接下来是我成功运行实例的记录。运行的前提是安装配置好hadoop（可以参考...

  light 2019-08-19 10:35 评论0 收藏0
• 

  基于Docker搭建Hadoop集群之升级版

  摘要: kiwenlau/hadoop-cluster-docker是去年参加Docker巨好玩比赛开发的，得了二等奖并赢了一块苹果手表，目前这个项目已经在GitHub上获得了236个Star，DockerHub的镜像下载次数2000+。总之，项目还算很受欢迎吧，这篇博客将介绍项目的...

  Zoom 2019-06-28 15:13 评论0 收藏0
• 

  [HADOOP] Standby NN无法启动

  ...起也起不来，如下日志: 2016-01-03 14:04:19,293 FATAL org.apache.hadoop.hdfs.server.namenode.ha.EditLogTailer: Unknown error encountered while tailing edits. Shutting down standby NN. java.io.IOException: Fail...

  android_c 2019-08-14 15:10 评论0 收藏0