随笔分类 -  hadoop

• spark 3种模式启动
  只有注册用户登录后才能阅读该文。
  posted @ 2017-08-14 08:55 hbm 阅读(5) 评论(0) 推荐(0)
• <Linux> Ubuntu error： ssh: connect to host master port 22: No route to host lost connection
  摘要：iptables当找到匹配的规则时，就会执行相应的动作，而不会向下继续匹配。因为ssh端口开放的规则在all规则之后，所以永远都不会匹配到，也就是ssh永远被禁止。 root下执行：iptables -I INPUT -p tcp --dport 22 -j ACCEPT 即可。 阅读全文
  posted @ 2017-07-11 14:25 hbm 阅读(364) 评论(0) 推荐(0)
• MapReduce的分区与 分组二次排序
  摘要：原创作品，允许转载，转载时请务必以超链接形式标明文章 原始出处 、作者信息和本声明。否则将追究法律责任。http://computerdragon.blog.51cto.com/6235984/1287721 问题描述： 输入文件格式如下： name1 2 name3 4 name1 6 name1 阅读全文
  posted @ 2017-06-06 17:49 hbm 阅读(269) 评论(0) 推荐(0)
• 问题
  摘要：java.lang.Exception: java.lang.ArrayIndexOutOfBoundsException: 0 阅读全文
  posted @ 2017-06-05 22:54 hbm 阅读(93) 评论(0) 推荐(0)
• 大数据实战：用户流量分析系统
  摘要：文章出处：http://blog.csdn.net/sdksdk0/article/details/51628874 作者：朱培 本文是结合Hadoop中的mapreduce来对用户数据进行分析，统计用户的手机号码、上行流量、下行流量、总流量的信息，同时可以按照总流量大小对用户进行分组排序等。是一个 阅读全文
  posted @ 2017-06-03 09:41 hbm 阅读(211) 评论(0) 推荐(0)
• Hadoop MapReduce统计手机流量案例学习(结合Partitioner)
  只有注册用户登录后才能阅读该文。
  posted @ 2017-06-03 09:20 hbm 阅读(7) 评论(0) 推荐(0)
• Hadoop 简单的用户手机流量统计的MapReduce程序总结
  只有注册用户登录后才能阅读该文。
  posted @ 2017-06-02 21:20 hbm 阅读(7) 评论(0) 推荐(0)
• Hadoop简单的用户手机流量统计的MapReduce程序(一)
  只有注册用户登录后才能阅读该文。
  posted @ 2017-06-02 21:15 hbm 阅读(5) 评论(0) 推荐(0)
• Hadoop2.4.1 简单的用户手机流量统计的MapReduce程序(三)
  只有注册用户登录后才能阅读该文。
  posted @ 2017-06-02 21:15 hbm 阅读(6) 评论(0) 推荐(0)
• Hadoop 简单的用户手机流量统计的MapReduce程序（二）
  只有注册用户登录后才能阅读该文。
  posted @ 2017-06-02 21:03 hbm 阅读(9) 评论(0) 推荐(0)
• hadoop之端口被占用问题namenode无法启动
  摘要：amenode日志报错 org.apache.Hadoop.http.HttpServer2: HttpServer.start() threw a non Bind IOExceptionJava.NET.BindException: Port in use: 0.0.0.0:50070 查询st 阅读全文
  posted @ 2017-05-26 15:29 hbm 阅读(1204) 评论(0) 推荐(0)
• Hadoop Java eclipse开发实用快捷键收藏
  只有注册用户登录后才能阅读该文。
  posted @ 2017-05-24 11:56 hbm 阅读(1) 评论(0) 推荐(0)
• 转】MyEclipse使用总结——MyEclipse文件查找技巧
  只有注册用户登录后才能阅读该文。
  posted @ 2017-05-24 11:45 hbm 阅读(0) 评论(0) 推荐(0)
• Eclipse/MyEclipse如何快速提取变量（最强帮手）
  只有注册用户登录后才能阅读该文。
  posted @ 2017-05-24 11:42 hbm 阅读(0) 评论(0) 推荐(0)
• 4 weekend110的hdfs下载数据源码跟踪铺垫 + hdfs下载数据源码分析-getFileSystem（值得反复推敲和打断点源码）
  只有注册用户登录后才能阅读该文。
  posted @ 2017-05-24 11:40 hbm 阅读(0) 评论(0) 推荐(0)
• Hadoop案例之年份温度排序
  只有注册用户登录后才能阅读该文。
  posted @ 2017-05-16 10:22 hbm 阅读(4) 评论(0) 推荐(0)
• 用Eclipse搭建Hadoop2.6.1开发环境及遇到问题
  只有注册用户登录后才能阅读该文。
  posted @ 2017-05-09 18:30 hbm 阅读(3) 评论(0) 推荐(0)
• no datanode to stop
  只有注册用户登录后才能阅读该文。
  posted @ 2017-05-09 14:02 hbm 阅读(1) 评论(0) 推荐(0)
• hadoop的namenode起不来，Directory /tmp/hadoop-hadoop/dfs/name is in an inconsistent state
  只有注册用户登录后才能阅读该文。
  posted @ 2017-05-09 11:57 hbm 阅读(6) 评论(0) 推荐(0)
• hadoop ubunt集群调试
  只有注册用户登录后才能阅读该文。
  posted @ 2017-04-28 20:25 hbm 阅读(8) 评论(0) 推荐(0)