摘要: 保持网络畅通 或者 配置代理 能够访问cdh的仓库 https://repository.cloudera.com/artifactory/cloudera-repos/ 编译hadoop版本 hadoop-2.6.0-cdh5.7.0 jdk版本 1.7 java version "1.7.0_8 阅读全文
posted @ 2018-12-07 16:34 Questions张 阅读(478) 评论(0) 推荐(0)
摘要: 1 下载snappy包并编译 wget https://github.com/google/snappy/releases/download/1.1.3/snappy-1.1.3.tar.gz tar xvfz snappy-1.1.3.tar.gz cd snappy-1.1.3/ ./confi 阅读全文
posted @ 2018-12-07 16:30 Questions张 阅读(580) 评论(0) 推荐(0)
摘要: shell-init: 获取当前目录时出错: getcwd: 无法访问父目录: 没有那个文件或目录chdir: 获取当前目录时出错: getcwd: 无法访问父目录: 没有那个文件或目录chdir: 获取当前目录时出错: getcwd: 无法访问父目录: 没有那个文件或目录Warning: /mnt 阅读全文
posted @ 2018-12-07 14:35 Questions张 阅读(5998) 评论(0) 推荐(0)
摘要: 1 下载地址 http://archive.cloudera.com/cdh5/cdh/5/ 版本 sqoop-1.4.6-cdh5.7.0 安装包 sqoop-1.4.6-cdh5.7.0.tar.gz 上传到hadoop服务器环境 2 解压软件 [root@hdp1 /mnt/software] 阅读全文
posted @ 2018-12-07 14:32 Questions张 阅读(195) 评论(0) 推荐(0)
摘要: 18/12/07 01:09:03 INFO mapreduce.ImportJobBase: Beginning import of staffException in thread "main" java.lang.NoClassDefFoundError: org/json/JSONObjec 阅读全文
posted @ 2018-12-07 14:26 Questions张 阅读(3137) 评论(0) 推荐(0)
摘要: 第一步 生成对应的ssh key 1 后面输入你的用户名 或者 邮箱 2 输入一个独立的ssh key名字 区别之前的名字 第二步 编辑 config文件 在.ssh/目录下面 在config文件配置如下信息 对照你自己的远程git服务器域名 以及 本地生成sshke私钥名 以及 git用户添加 H 阅读全文
posted @ 2018-12-07 11:54 Questions张 阅读(406) 评论(0) 推荐(0)
摘要: 浏览器使用频率非常高,书签栏可以定时整理,我习惯使用Chrome,有时候也使用Safari所以难免需要同步Chrome书签到Safari 操作详见下面操作 阅读全文
posted @ 2018-12-02 14:46 Questions张 阅读(2031) 评论(0) 推荐(0)
摘要: 1.idea插件官网http://plugins.jetbrains.com/idea 搜索并下载对应的插件的zip包 2.打开软件进行离线安装 IDEA-->Setting-->Plugins--> 按钮"Install plugin from disk..." 找到刚才下载的插件包,安装完成重启 阅读全文
posted @ 2018-12-02 11:10 Questions张 阅读(2402) 评论(0) 推荐(0)
摘要: HDFS2.0概述 一背景,Hadoop1.0中HDFS和MapReduce在高可用,扩展性等方面存在问题 HDFS存在问题,1,NameNode单点故障,难以应用于在线场景。2,NameNode压力过大,且内存受限,影响系统扩展。 MapReduce存在的问题,1,JobTracker访问压力大, 阅读全文
posted @ 2018-11-27 16:34 Questions张 阅读(1227) 评论(0) 推荐(0)
摘要: 1 Mac电脑配置 阿里云配置机器 选择配置 按量付费 选择三台机器 2核8G 镜像选择CentOS7.4 网络设置 默认 系统配置 勾选好 添加有序后缀 设置好释放时间 最后再次确认信息 第二部 使用Zoc7 建立连接 并保持到zoc7软件 菜单栏 第三部 filezilla上传软件 jdk zo 阅读全文
posted @ 2018-11-27 16:07 Questions张 阅读(326) 评论(0) 推荐(0)