05 2017 档案

摘要:1.下载Windows版的NetCat https://eternallybored.org/misc/netcat/ 2.启动NetCat nc -l -p 9999 3.将SAPRK_HOME\conf\log4j.properties拷贝到项目根目录下,将“INFO”改为“ERROR”,保证只 阅读全文
posted @ 2017-05-28 22:50 静若清池 阅读(781) 评论(0) 推荐(0)
摘要:一、定义DateTime Message 参考文档:https://github.com/mgravell/protobuf-net/blob/master/src/Tools/bcl.proto DateTime中包含两个属性:value,TimeSpanScale;value为时间值,TimeS 阅读全文
posted @ 2017-05-28 19:18 静若清池 阅读(1532) 评论(0) 推荐(0)
摘要:使用spark-submit提交local任务时,会输出很多Info信息: 可以修改log4j的日志级别,只输出关键信息: 1.修改$SPARK_HOME/conf/log4j.properties 如果有log4j.properties.template,则复制一份为log4j.propertie 阅读全文
posted @ 2017-05-26 17:13 静若清池 阅读(1497) 评论(0) 推荐(0)
摘要:一、下载Saprk程序 https://d3kbcqa49mib13.cloudfront.net/spark-2.1.1-bin-hadoop2.7.tgz 解压到d:\spark-2.1.1-bin-hadoop2.7 二、下载winutil.exe https://github.com/ste 阅读全文
posted @ 2017-05-16 14:57 静若清池 阅读(2635) 评论(0) 推荐(0)
摘要:根据.proto文件生成对应的Java类: 注:protoc下载: http://repo1.maven.org/maven2/com/google/protobuf/protoc/ 阅读全文
posted @ 2017-05-03 23:39 静若清池 阅读(13200) 评论(0) 推荐(0)