Questions张

2018年12月7日

摘要： 1 下载地址 http://archive.cloudera.com/cdh5/cdh/5/ 版本 sqoop-1.4.6-cdh5.7.0 安装包 sqoop-1.4.6-cdh5.7.0.tar.gz 上传到hadoop服务器环境 2 解压软件 [root@hdp1 /mnt/software] 阅读全文

posted @ 2018-12-07 14:32 Questions张阅读(200) 评论(0) 推荐(0)

Sqoop异常:Exception in thread "main" java.lang.NoClassDefFoundError: org/json/JSONObject

摘要： 18/12/07 01:09:03 INFO mapreduce.ImportJobBase: Beginning import of staffException in thread "main" java.lang.NoClassDefFoundError: org/json/JSONObjec 阅读全文

posted @ 2018-12-07 14:26 Questions张阅读(3140) 评论(0) 推荐(0)

Mac下配置多个SSH KEY访问远程Git服务

摘要：第一步生成对应的ssh key 1 后面输入你的用户名或者邮箱 2 输入一个独立的ssh key名字区别之前的名字第二步编辑 config文件在.ssh/目录下面在config文件配置如下信息对照你自己的远程git服务器域名以及本地生成sshke私钥名以及 git用户添加 H 阅读全文

posted @ 2018-12-07 11:54 Questions张阅读(409) 评论(0) 推荐(0)

2018年12月2日

Safari导入Chrome书签

摘要：浏览器使用频率非常高，书签栏可以定时整理，我习惯使用Chrome，有时候也使用Safari所以难免需要同步Chrome书签到Safari 操作详见下面操作阅读全文

posted @ 2018-12-02 14:46 Questions张阅读(2038) 评论(0) 推荐(0)

离线安装IDEA插件

摘要： 1.idea插件官网http://plugins.jetbrains.com/idea 搜索并下载对应的插件的zip包 2.打开软件进行离线安装 IDEA-->Setting-->Plugins--> 按钮"Install plugin from disk..." 找到刚才下载的插件包,安装完成重启阅读全文

posted @ 2018-12-02 11:10 Questions张阅读(2415) 评论(0) 推荐(0)

2018年11月27日

HDFS2.0架构以及HA详解

摘要： HDFS2.0概述一背景，Hadoop1.0中HDFS和MapReduce在高可用，扩展性等方面存在问题 HDFS存在问题，1，NameNode单点故障，难以应用于在线场景。2，NameNode压力过大，且内存受限，影响系统扩展。 MapReduce存在的问题，1，JobTracker访问压力大，阅读全文

posted @ 2018-11-27 16:34 Questions张阅读(1239) 评论(0) 推荐(0)

阿里云3台机器搭建Hadoop HA服务

摘要： 1 Mac电脑配置阿里云配置机器选择配置按量付费选择三台机器 2核8G 镜像选择CentOS7.4 网络设置默认系统配置勾选好添加有序后缀设置好释放时间最后再次确认信息第二部使用Zoc7 建立连接并保持到zoc7软件菜单栏第三部 filezilla上传软件 jdk zo 阅读全文

posted @ 2018-11-27 16:07 Questions张阅读(328) 评论(0) 推荐(0)

阿里云3台机器组成集群配置ssh免密码登陆

摘要： 1 查询阿里云局网ip 注意：需要配置同一地区同一可用区的机器才是一个局网 2 配置好hosts文件 3 hostname确认也是正确的 4 生成公钥私钥三台机器同样操作 ssh-keygen -t rsa 然后一路回车 5 远程拷贝公钥每台机器都敲 ssh-copy-id root@hado 阅读全文

posted @ 2018-11-27 13:28 Questions张阅读(590) 评论(0) 推荐(0)

HDFS简介

摘要： HDFS概述简介:根据Google的GFS的开源实现，Hadoop分布式文件系统，是一个分布式文件存储系统。优点 1，高容错性：数据自动保存为多个副本，副本丢失后自动恢复，（block元数据信息+心跳），多副本，提供容错机制，副本丢失或宕机自动恢复，默认存3份。 2，适合批处理：移动数据而非移动阅读全文

posted @ 2018-11-27 12:01 Questions张阅读(352) 评论(0) 推荐(0)

2018年11月5日

Java添加过期注解

摘要：加上 @Deprecated 后方法名称显示：中划线（删除线）意为：发生这些变化并不会影响编译，只是提醒一下程序员，这个方法以后是要被删除的，最好别用。就是如果一个类从另外一个类继承，并且override被继承类的Deprecated方法，在编译时将会出现一个警告。阅读全文

posted @ 2018-11-05 09:35 Questions张阅读(10014) 评论(1) 推荐(0)

公告