摘要：
很多时候root权限被上收，每次申请都特别麻烦。但是有时候排查问题，安装软件啥的都需要使用root权限才方便。所以可以这么干😄 1、先申请root用户。然后创建一个新用户user1 2、给user1加sodu权限 主要命令： 创建用户：useradd -d /home/user1/ user1 设 阅读全文
摘要：
如何设置Virtual Box虚拟机CentOS7为静态IP地址 最近要搭建一个Kubernetes集群，需要设置虚拟机为静态IP地址不变。翻了一些资料，参差不齐，有些也比较过时了。自己实测总结了一下，整理如下，供有需要的同学参考。 1、虚拟机设置，“网卡1”选择“桥接网卡” 2、ip addr查看 阅读全文
摘要：
修改gerrit的commit-msg插件，在git commit的时候能够检查comments log是否满足格式和要求。comments log中可以强制要求加入开发任务编号，与敏捷项目电子看板中的开发任务关联，方便全流程的数据分析和研发改进。 阅读全文
摘要：
刚才翻了翻2年以前用python2.7写的一个爬虫程序，主要功能就是把各地市知识产权局/专利局网站的专利相关项目、课题通知，定期爬取和分析，辅助企业进行项目申请。 这里要谈的不是爬虫功能的实现，而是今天重跑程序的时候发现，日志文件正常展现中文，但是终端展现的确实乱码。影响体验，着实比较郁闷。 相关代 阅读全文
摘要：
需要分别从Oracle和文本文件往HBase中导入数据，这里介绍几种数据导入方案。 1.使用importTSV导入HBase importTSV支持增量导入。新数据插入，已存在数据则修改。 1.1.首先将待导入文本test_import.txt放到hdfs集群 文本格式如下（从网上找的虚拟话单数据） 阅读全文
摘要：
这里介绍使用java api来访问和操作HBase，例如create、delete、select、update等操作。 1.HBase配置 配置HBase使用的zookeeper集群地址和端口。 2.创建表 3.插入数据 指定表名、rowkey、cf、qualifier和value，插入数据到HBa 阅读全文
摘要：
1.使用hbase shell连接hbase 2.输入help可以查看帮助 3.输入list查看当前hbase中的所有表 4.使用create创建表test 其中test是表名，cf是列族。该表只创建了一个列族。 5.使用list查看表test的信息 6.使用put往表test中添加数据 格式：pu 阅读全文
摘要：
名称 : crontab crontab 是用来让使用者在固定时间或固定间隔执行程序之用，换句话说，也就是类似使用者的时程表。-u user 是指设定指定 user 的时程表，这个前提是你必须要有其权限(比如说是 root)才能够指定他人的时程表。如果不使用 -u user 的话，就是表示设 定自己 阅读全文
摘要：
HBase安装和部署 使用的HBase版本是1.2.4 1.安装步骤（默认hdfs已安装好） # 修改hbase-site.xml（更多配置参数请参考官方文档） # 设置slave vim regionservers # 设置环境变量 vi ~/.bash_profile # 执行 source ~ 阅读全文
摘要：
修改Sqoop1.4.6源码实现--fields-terminated-by选项支持多字节分隔符 最近项目中需要使用sqoop实现oracle与hdfs的数据交换，从oracle数据表导入到hdfs集群，以及把hdfs数据导出到oracle数据表。客户要求Hdfs文本文件中，字段分隔符必须是“|@| 阅读全文