git版本回退
摘要：
回退到指定版本 查看版本 可看到之前的版本信息，包括版本ID(类似于0467962fe045dfaaf101297563f2a82f5674fe0b ) 回退到指定版本 回退到上一版本 回退到上上个版本 回退到之前50个版本 阅读全文
posted @ 2017-12-20 16:35 嘣嘣嚓 阅读(170) 评论(0) 推荐(0)
linux修改文件所属用户、用户组
摘要：
修改hive.log文件为hadoop用户，hadoop组 sudo chown 用户名:用户组 文件 修改某个文件夹及其自文件 sudo chown -R 用户名:用户组 文件夹 阅读全文
posted @ 2017-12-20 16:30 嘣嘣嚓 阅读(300) 评论(0) 推荐(0)
retry.RetryInvocationHandler (RetryInvocationHandler.java:invoke(140)) - Exception while invoking getFileInfo of class ClientNamenodeProtocolTranslatorPB over bdata236/192.168.1.236:9000 after 3 fail
摘要：
报错信息如下 我出现这个问题的原因是两个namenode都是standby状态，发现是因为zkfc没有起来，启动zkfc就OK了。 进入hadoop/bin目录下 还有可能是因为防火墙问题,关闭即可 阅读全文
posted @ 2017-12-20 16:27 嘣嘣嚓 阅读(7868) 评论(0) 推荐(0)
Hadoop切换namenode为active
摘要：
hadoop切换namenode为active 进入hadoop/bin目录下 重新启动zkfc ，hadoop/sbin下 查看50070端口发现切换完毕。 阅读全文
posted @ 2017-12-20 16:22 嘣嘣嚓 阅读(950) 评论(0) 推荐(0)
Netty使用LineBasedFrameDecoder解决TCP粘包/拆包
摘要：
TCP粘包／拆包 TCP是个”流”协议，所谓流，就是没有界限的一串数据。TCP底层并不了解上层业务数据的具体含义，它会根据TCP缓冲区的实际情况进行包的划分，所以在业务上认为，一个完整的包可能会被TCP拆分成多个包进行发送，也有可能把多个小的包封装成一个大的数据包发送，这就是所谓的TCP粘包和拆包问 阅读全文
posted @ 2017-11-29 18:04 嘣嘣嚓 阅读(5147) 评论(0) 推荐(0)
Netty入门例子
摘要：
新建maven项目，添加依赖 TimeServer TimeServerHandler TimeClient TimeClientHandler 先运行TimeServer,再运行TimeClient 阅读全文
posted @ 2017-11-29 16:46 嘣嘣嚓 阅读(350) 评论(0) 推荐(0)
CDH离线安装
摘要：
1. 安装准备 系统:Centos 6 Cloudera Manager分配如下： 安装版本：CDH-5.8.0 所需安装文件 CDH相关 CDH相关 CDH-5.8.0-1.cdh5.8.0.p0.42-el6.parcel CDH-5.8.0-1.cdh5.8.0.p0.42-el6.parce 阅读全文
posted @ 2017-11-19 20:42 嘣嘣嚓 阅读(928) 评论(0) 推荐(1)
Mac安装使用kettle
摘要：
kettle是一个ETL工具 下载安装 https://jaist.dl.sourceforge.net/project/pentaho/Data Integration/ 选择版本后下载，并解压，如图 安装后有一个data-integration文件夹，里边有一个spoon.sh，terminal 阅读全文
posted @ 2017-11-09 18:15 嘣嘣嚓 阅读(6924) 评论(0) 推荐(0)
echo > 和 echo >>的区别
摘要：
echo > 会将目标文件清空后再写入 echo >> 在目标文件后追加写入 阅读全文
posted @ 2017-10-12 13:24 嘣嘣嚓 阅读(324) 评论(0) 推荐(0)
sqoop job 增量导入
摘要：
使用sqoop job做增量导入 在执行导入模式为 incremental 的sqoop job 时，sqoop会获取上次导入操作的 –check-column的value值，也就是说使用sqoop job在做增量导入的时候，不用手动指定 --last-value的值但是也有这样的一种情况，sqoo 阅读全文
posted @ 2017-09-27 13:56 嘣嘣嚓 阅读(1632) 评论(0) 推荐(0)
浙公网安备 33010602011771号