随笔分类 -  Hadoop

【转】Unable to load native-hadoop library for your platform(已解决)
摘要：1、增加调试信息寻找问题 2、两种方式解决unable to load native-hadoop library for you platform 附：libc/glibc/glib简介 参考： 1、http://my.oschina.net/swuly302/blog/515853【66号公路： 阅读全文
posted @ 2018-05-21 14:39 健身男儿挑灯夜读 阅读(4897) 评论(0) 推荐(0)
虚拟机如何设置静态IP
摘要：一、本机环境 Mac、VMware Fusion 10， CentOS6.8 二、设置静态IP地址 1、选择网络连接模式，选择NAT模式 注意： 1）必须要选择NAT模式，否则你的虚拟机与主机始终会在同一个网段，主机IP变了之后，虚拟机IP也会自动变化，达不到静态IP的目的 2）在虚拟机关闭状态下， 阅读全文
posted @ 2018-05-20 12:30 健身男儿挑灯夜读 阅读(708) 评论(0) 推荐(0)
【转载】Hadoop NameNode 高可用 (High Availability) 实现解析
摘要：转载：https://www.ibm.com/developerworks/cn/opensource/os-cn-hadoop-name-node/ NameNode 高可用整体架构概述 在 Hadoop 1.0 时代，Hadoop 的两大核心组件 HDFS NameNode 和 JobTrack 阅读全文
posted @ 2018-04-12 23:05 健身男儿挑灯夜读 阅读(240) 评论(0) 推荐(0)
Hadoop2.x异常总结
摘要：问题1： 在执行bin/hdfs namenode -format格式化HDFS命令时，抛出异常，异常如下： 出错原因： hdfs-site.xml配置错误，错误配置如下： 解决办法：将错误配置改成正确配置， 正确配置如下 问题2：hadoop启动时报dfs.namenode.servicerpc- 阅读全文
posted @ 2018-02-08 00:01 健身男儿挑灯夜读 阅读(234) 评论(0) 推荐(0)
Hadoop安装与配置
摘要：Hadoop介绍 上面是官方介绍，翻一下来总结一句话就是：Hadoop是一个高可用，用于分布式处理大规模计算的工具。 Hadoop1.2 下载 . Hadoop1.2 安装 1. 安装jDK 2. 配置hadoop集群 1) 在hadoop-env.sh配置JAVA_HOME 2）配置core-si 阅读全文
posted @ 2017-11-05 17:48 健身男儿挑灯夜读 阅读(217) 评论(0) 推荐(0)