2017年3月21日
storm-安装
摘要： 1. 单机安装storm测试环境 http://www.myexception.cn/open-source/1809563.html 2. 集群storm安装 http://blog.csdn.net/tanggao1314/article/details/52348632 2. storm 将处 阅读全文
posted @ 2017-03-21 21:43 woxiaohaha 阅读(771) 评论(0) 推荐(0)
kafka -client
摘要： 1. 使用java连接kafka读取消息，首先将kafka安装包中libs中的所有jar导入到工程中，否则可能导致类库找不到的问题 package test.kafka; import java.util.HashMap; import java.util.List; import java.util.Map; import java.util.Properties; import k... 阅读全文
posted @ 2017-03-21 21:38 woxiaohaha 阅读(398) 评论(0) 推荐(0)
gitlab api
摘要： gitlab 相关API文档 http://docs.gitlab.com/ee/api/projects.html 阅读全文
posted @ 2017-03-21 21:35 woxiaohaha 阅读(186) 评论(0) 推荐(0)
heka 解析 syslog
摘要： 1. 安装go语言 wget https://storage.googleapis.com/golang/go1.4.3.linux-amd64.tar.gz 2. 安装heka 依赖：cmake, protobuf, protobuf-c 3. 修改/etc/rsyslog.conf 将审计log 阅读全文
posted @ 2017-03-21 21:32 woxiaohaha 阅读(1044) 评论(0) 推荐(0)
redis安装
摘要： 参考 http://www.runoob.com/redis/redis-install.html 命令汇集 http://www.runoob.com/redis/redis-keys.html 关键命令: select 0 选择0个数据库 keys * 列举所有的key ./redis-cli 阅读全文
posted @ 2017-03-21 21:26 woxiaohaha 阅读(88) 评论(0) 推荐(0)
heka 那些坑
摘要： heka 消息处理 1. /usr/local/share/heka/lua_modules/elasticsearch.lua 貌似使用的是美国时区，比中国时间晚8个小时，不知道heka在哪里修改时间，直接在63行代码，添加时间对齐 secs = secs + 8 * 60 * 60 2. hek 阅读全文
posted @ 2017-03-21 21:22 woxiaohaha 阅读(1116) 评论(0) 推荐(0)
2017年3月13日
socat-端口转发
摘要： 需求: 内网一台超级计算机，无公网ip，外网一台普通机器，有公网ip，将外网请求转发到内网机器 实现:socat 安装: 公网机器: 内网机器: 例如: socat -d -d -d -v tcp:外网ip:8080,forever,intervall=10,fork tcp:localhost:9 阅读全文
posted @ 2017-03-13 05:49 woxiaohaha 阅读(4581) 评论(2) 推荐(0)
2017年3月9日
web-URL参数解析
摘要： 需求: 对URL进行去重，去掉所有的参数中value内容，只保留path和key 解决方案: 1. 首先根据 分号字符(?) 分割出path和param 2. 然后在对param进行解析，使用&进行分割，获得每个itema 3. 最后对itema使用=进行分割，保留key 4. 最后拼接path和k 阅读全文
posted @ 2017-03-09 16:36 woxiaohaha 阅读(574) 评论(0) 推荐(0)