傾聽雨落

摘要： storm绝对是我见过最难启动的集群，没有之一！从安装 zeromq jzmq错误，到zookeeper集群启动错误，磕磕绊绊，耗费我2天（下班后开始计算），今天终于搞定了，纪念下！ 下面是启动storm nimbus时的错误，不知道为什么出这个错误，查看lib文件下，有jar包，百度啊 谷歌啊都搜 阅读全文

摘要： 用虚拟机搭建zookeeper集群一直拒绝连接，异常如下： 2016-02-22 00:49:45,687 [myid:1] - WARN [QuorumPeer[myid=1]/0:0:0:0:0:0:0:0:2181:QuorumCnxManager@382] - Cannot open cha 阅读全文

摘要： fatal error: all goroutines are asleep - deadlock! 这个错误的原因是: 在main goroutine线，期望从管道中获得一个数据，而这个数据必须是其他goroutine线放入管道的 但是其他goroutine线都已经执行完了(al... 阅读全文

摘要： slurper 可以将任何格式的数据导入HDFS, 这里有github地址 这里鄙视下百度，居然搜索不到！ 第一步，下载安装 git clone git@github.com:alexholmes/hdfs-file-slurper.git cd hdfs-file-slurper mvn pack 阅读全文

摘要： R语言最让我兴奋的点还是各种图形的绘制！比如散点图、直方图等等。今天学习一下！#R 有三种绘图系统#base 容易上手，但是很难扩展#grid 修正了一些base的缺点#lattice 建立在grid之上 为常见的图表提供了函数#数据集data(obama_vs_mccain,pa... 阅读全文

摘要： 大年初一，看了看春晚的开头，闲极无聊，正好手边有从同事那借来的《学习R》这本书，那就学学吧，说不定以后会用到，顺便逃避爸妈催婚，单身狗的春节就是受虐！(PS:公司老大常常说我，学那么多东西，用不到，有啥用？我没有反驳过，其实我一直想说，如果我不学，恐怕永远不会有机会用到！) 从哪... 阅读全文

摘要： 了解过flume的人，差不多都看过这张或则类似的图片，本文即实现上图部分内容。（由于条件有限，目前是单机上实现） flume-agent配置文件 #flume agent conf source_agent.sources = server source_agent.sinks = avroSink 阅读全文

摘要： scala中有一个灰常强大的东西，叫做模式匹配。可以理解为Switch，只是比它更加强大。 var sign = -1 val ch:Char = '+' /** * 模式匹配：更好用的switch */ ch match { case '-' => sign... 阅读全文

摘要： scala是一种多范式编程语言，其特色之一就是函数式编程，本节就来学习它！在变量中存放函数 val num = 3.14 val fun = ceil _ // _将ceil方法转换成了函数 println(fun(num)) val array = Ar... 阅读全文

摘要： 特质，很像java中的接口，但是又有些不同，比如实现方法，当然java8也可以在接口中实现一个方法了，但是只能定义一个default方法。 当做接口使用//特质trait Logger { def log(msg:String)}trait ConsoleLogger ext... 阅读全文