摘要：
要用php执行python命令，发现命令行可以正常输出结果，但是浏览器无法输出结果。 经过在命令后加上2>&1，打印错误信息排查，发现是在import第三方库时报权限错误。 于是修改php-fpm.conf的user和group为root，成功解决。 注意php-fpm默认不能以root用户运行，但 阅读全文
摘要：
input { tcp { port => 514 type => syslog } udp { port => 514 type => syslog }}output { kafka { bootstrap_servers => "localhost:9092" topic_id => "mysq 阅读全文
摘要：
pom.xml DetectTopology.java package com.hc.mysqldetect; import java.util.Properties; import org.apache.storm.Config;import org.apache.storm.LocalClust 阅读全文
摘要：
在spark中读取es的数据pom.xml 4.0.0 com.test spark 0.0.1-SNAPSHOT jar UTF-8 2.11.6 2.11.6 ... 阅读全文
摘要：
在mapreduce中读取protobuf数据时，会遇到一个坑BytesWritable。当你把byte[]数据保存到BytesWritable后，通过BytesWritable.getBytes()再读到的数据并不一定是原数据，可能变长了很多，这是因为BytesWritable采用了自动内存增长算... 阅读全文
摘要：
spark1.3.1搭配hadoop2.6.0，同时支持standalone和yarnspark-env.shexport SCALA_HOME=/home/hadoop/scala-2.11.6 #standaloneSPARK_WORKER_CORES=8SPARK_WORKER_MEMORY... 阅读全文
摘要：
hadoop2.6.0配置模板core-site.xml hadoop.tmp.dir /home/hadoop/hadoop/tmp fs.defaultFS hdfs://master:9000 hdfs-si... 阅读全文
摘要：
jnetpcap是用java对libpcap的一个封装，它可以用来监听网卡，捕获数据包CaptureCore.javapackage nssa.nm.capture; import java.util.ArrayList;import java.util.List;import javax.swin... 阅读全文
摘要：
保护linux系统的安全，首先考虑的就是ssh登录的安全日志来源如下：/var/log/secure（centos）/var/log/auth.log（ubuntu）其实日志名是可以配置的，不过一般没人改，配置方法如下：/etc/ssh/sshd_confSyslogFacility AUTHPR... 阅读全文