• 博客园logo
  • 会员
  • 众包
  • 新闻
  • 博问
  • 闪存
  • 赞助商
  • HarmonyOS
  • Chat2DB
    • 搜索
      所有博客
    • 搜索
      当前博客
  • 写随笔 我的博客 短消息 简洁模式
    用户头像
    我的博客 我的园子 账号设置 会员中心 简洁模式 ... 退出登录
    注册 登录
MoreSS
博客园 | 首页 | 新随笔 | 新文章 | 联系 | 订阅 订阅 | 管理

2012年8月2日

hadoop 之生命在于折腾-----hadoop连接问题(Too many fetch-failures 、map reduce 卡住以及Error reading task outputhttp)
摘要: 刚开始弄hadoop的时候出现Too many fetch-failures的异常,我以为是磁盘不能及时响应而引起的,特地去hdoop群上问了别人,在测试过程中出现Too many fetch-failures 可不可以理解成正常的啊?有人回答我说,可以。靠,被骗了!!!! 我今天在测试io的时候又出现了Error reading task outputhttp的异常,完了,我郁闷了,开始在网上找解决方案,有人说要删userlogs,我删了,没用。 最后,在我随便修改ubuntu系统的时候,突然发现,出现那三种常见异常的原因是系统没有找到对应的ip引起的。 解决方案,配置好:/e... 阅读全文
posted @ 2012-08-02 17:01 MoreSS 阅读(1312) 评论(0) 推荐(0)
 
ubuntu(12.04) 修改计算机名
摘要: 1 sudo hostname newMechineName2 sudo vi /etc/hostname 把原来的机器名改为新的 newMechineName3 sudo vi /etc/hosts 修改 127.0.1.1 对应的计算机名为新的计算机名称 阅读全文
posted @ 2012-08-02 15:01 MoreSS 阅读(677) 评论(0) 推荐(0)
 
Ganglia 原理
摘要: 原理Ganglia 项目是由加州大学发起的,现在已经成为一个应用非常广泛集群监控软件。可以监视和显示集群中的节点的各种状态信息,比如如:cpu 、mem、硬盘利用率, I/O负载、网络流量情况等,同时可以将历史数据以曲线方式通过php页面呈现。同时具有很好的扩展性,允许用户加入自己所要监控的状态信息。2.1 ganglia工作原理 图 1 Ganglia整体结构图Ganglia包括如下几个程序,他们之间通过XDL(xml的压缩格式)或者XML格式传递监控数据,达到监控效果。集群内的节点,通过运行gmond收集发布节点状态信息,然后gmetad周期性的轮询gmond收集到的信息,然后存入rrd. 阅读全文
posted @ 2012-08-02 09:49 MoreSS 阅读(5948) 评论(0) 推荐(0)
 
 

公告


博客园  ©  2004-2025
浙公网安备 33010602011771号 浙ICP备2021040463号-3