2014年11月22日

php递归获取无限分类菜单

摘要: 从数据库获取所有菜单信息,需要根据id,pid字段获取主菜单及其子菜单,以及子菜单下的子菜单,可以通过函数递归来实现。1, 'title'=>"一级1",'pid'=>0), array('id'=>2, 'title'=>"一级2",'pid'=>0), array('id'=... 阅读全文

posted @ 2014-11-22 21:08 超大杯摩卡星冰乐 阅读(1739) 评论(0) 推荐(0) 编辑

2014年11月6日

Hadoop on Docker

摘要: 最初接触Docker是在2013年初,当时Docker才刚起步不久,知之甚少。在不到一年的时间里,Docker已经家喻户晓,成为时下最热门的云计算技术之一,出现了许多围绕docker的新兴产品(仅供参考):Flynn:一个使用go语言编写的开源PaaS平台,目标是简化分布式环境中应用的部署和维护... 阅读全文

posted @ 2014-11-06 23:26 超大杯摩卡星冰乐 阅读(7663) 评论(2) 推荐(3) 编辑

2014年11月5日

如何使不同主机上的docker容器互相通信

摘要: docker启动时,会在宿主主机上创建一个名为docker0的虚拟网络接口,默认选择172.17.42.1/16,一个16位的子网掩码给容器提供了65534个IP地址。docker0只是一个在绑定到这上面的其他网卡间自动转发数据包的虚拟以太网桥,它可以使容器和主机相互通信,容器与容器间通信。问题是,... 阅读全文

posted @ 2014-11-05 17:01 超大杯摩卡星冰乐 阅读(7385) 评论(1) 推荐(1) 编辑

2014年10月24日

使用kafka consumer api时,中文乱码问题

摘要: 使用Intelli idea调试kafka low consumer时,由于broker存储的message有中文,idea中console端是可以正确显示的然后mvn package打包到服务器上执行,结果中文乱码。然后在kafka consumer代码中byte转为string时,使用了各种编码... 阅读全文

posted @ 2014-10-24 18:36 超大杯摩卡星冰乐 阅读(15013) 评论(2) 推荐(0) 编辑

2014年10月23日

kafka-hadoop-consumer

摘要: 写了一个工具,从kafka传输数据到hdfs,采用的api,可以消费指定的kafka topic或者为了简便可以消费所有的topic中各个partition的数据。地址:https://github.com/voyage1314/kafka-hadoop-consumer 阅读全文

posted @ 2014-10-23 17:43 超大杯摩卡星冰乐 阅读(642) 评论(0) 推荐(0) 编辑

hadoop重启后,hdfs目录权限问题

摘要: 今天重启了下Hadoop集群,使用Eclipse调试hdfs api的时候报错:[WARNING] java.lang.NullPointerException at org.conan.kafka.HdfsUtil.batchWrite(HdfsUtil.java:50) at org... 阅读全文

posted @ 2014-10-23 11:17 超大杯摩卡星冰乐 阅读(493) 评论(0) 推荐(0) 编辑

导航