进阶仙女

摘要： 第一个shell命令： 说明：#！/dev/bash是一个约定的标记，它告诉系统这个脚本需要什么解释器来执行，即使用哪一种 Shell。这里使用的是Bourne Again Shell echo '':向窗口输出文本 保存为firstshell.sh 运行方式： 首先要赋予权限，chmod +x f 阅读全文

摘要： 在搭建集群环境时，需要各个节点的主机时间是一致的，否则会出现问题，连接时间相应不对。要进行是时间同步。 使用yum 云进行下载时间同步服务。 下载之后如何验证： 如何进行具体的操作： 第一种：a、cp /usr/share/zoneinfo/Asia/Shanghai /etc/localtime 阅读全文

摘要： &: 避免在终端屏幕上运行，在命令后面加上& 实现后台运行。例如：sh test.sh & 这种情况下，作业依然会将需要输出的内容显示在屏幕上 重定向： 当作业需要大量输出时，我们可以将作业的输出内容重定向到一个文件中， eg1:sh test.sh > test.file & (> test指定t 阅读全文

摘要： Traceback (most recent call last): File "./storm.py", line 766, in <module> main() File "./storm.py", line 763, in main (COMMANDS.get(COMMAND, unknown 阅读全文

摘要： 原因：接收人中有一个邮箱无用，因此造成不能识别，因此出现错误 解决：将错误的接收人删除即可 阅读全文

摘要： 使用storm实时处理kafka中topic的数据，想要查看该topic的消费情况 如何实现：进入zookeeper的客户端界面：./zkCli.sh 查看目录： 于此回应的代码层面： 此处为topic对应的消费组，其存储路径实在zookeeper下面 接下来查看消费组目录下的对应情况： 可以看到此 阅读全文

摘要： 一、启动kafka 集群 二、创建一个Kafka的topic (localhost:2181指的是zk主机) 三、查看创建分区的详细信息，即(but now that we have a cluster how can we know which broker is doing what? To s 阅读全文

摘要： JSON(JavaScript Object Notation) 是一种轻量级的数据交换格式。它使得人们很容易的进行阅读和编写。同时也方便了机器进行解析和生成。 太官方不容易理解，简单来说就是将Json格式的数据，同一种更为明细的机构显示出来。 字符串要符合要求，结构才会更加明晰，欢迎评论补充指正。 阅读全文

摘要： a) Zookeeper：帮助命令-help i. ls /查看zk下根节点目录 ii. create /zk_test my_data//在测试集群没有创建成功 iii. get /zk_test my_data//获取节点信息 iv. set / zk_test my_data//更改节点相关信 阅读全文

摘要： 官方文档链接：http://hadoop.apache.org/docs/r2.6.5/hadoop-project-dist/hadoop-common/FileSystemShell.html#test HDFS设计的主要目的是对海量数据进行处理，也就是说在其上能够存储很大量文件（可以存储TB级 阅读全文