摘要：使用storm实时处理kafka中topic的数据，想要查看该topic的消费情况 如何实现：进入zookeeper的客户端界面：./zkCli.sh 查看目录： 于此回应的代码层面： 此处为topic对应的消费组，其存储路径实在zookeeper下面 接下来查看消费组目录下的对应情况： 可以看到此 阅读全文

摘要：一、启动kafka 集群 二、创建一个Kafka的topic (localhost:2181指的是zk主机) 三、查看创建分区的详细信息，即(but now that we have a cluster how can we know which broker is doing what? To s 阅读全文

摘要：JSON(JavaScript Object Notation) 是一种轻量级的数据交换格式。它使得人们很容易的进行阅读和编写。同时也方便了机器进行解析和生成。 太官方不容易理解，简单来说就是将Json格式的数据，同一种更为明细的机构显示出来。 字符串要符合要求，结构才会更加明晰，欢迎评论补充指正。 阅读全文

摘要：a) Zookeeper：帮助命令-help i. ls /查看zk下根节点目录 ii. create /zk_test my_data//在测试集群没有创建成功 iii. get /zk_test my_data//获取节点信息 iv. set / zk_test my_data//更改节点相关信 阅读全文

摘要：官方文档链接：http://hadoop.apache.org/docs/r2.6.5/hadoop-project-dist/hadoop-common/FileSystemShell.html#test HDFS设计的主要目的是对海量数据进行处理，也就是说在其上能够存储很大量文件（可以存储TB级 阅读全文

摘要：Hadoop运行环境选择 搭建一个虚拟机，然后再在这个虚拟机上直接安转部署Linux操作系统来实现Linux运行环境。(windows不安全) 虚拟机(虚拟化软件)的介绍： vmware,virtualbox 查看相关安装教程https://zhuanlan.zhihu.com/p/34798226 阅读全文