上一页 1 2 3 4 5 6 7 8 ··· 21 下一页
摘要: 下载地址:http://archive.apache.org/dist/flume/ 解压完毕 切换到安装目录下/usr/local/flume/apache-flume-1.6.0-bin/conf 1.简单示例 1.1 netcat模式 创建demoagent.conf 测试:Windows用t 阅读全文
posted @ 2019-04-30 10:54 Rest探路者 阅读(433) 评论(0) 推荐(0) 编辑
摘要: 1.配置 三台服务器搭建Storm集群:CentOS7One,CentOS7Two,CentOS7Three 在CentOS7One机器上配置 1.1 zookeeper配置 目录:/opt/zookeeper/zookeeper-3.4.10/conf 编辑zoo.cfg 1.2 storm配置 阅读全文
posted @ 2019-04-25 11:09 Rest探路者 阅读(280) 评论(0) 推荐(0) 编辑
摘要: 1.基本概念 Topologies : 拓扑,也俗称一个任务,拓扑 Spouts : 拓扑的消息源,Spout消息源 Bolts : 拓扑的处理逻辑单元,Bolt消息处理者 tuple:消息元组,如Spout发送给Bolt、Bolt发送给Bolt的内容被看作是一个消息元组 Streams : 流 S 阅读全文
posted @ 2019-04-25 10:27 Rest探路者 阅读(238) 评论(0) 推荐(0) 编辑
摘要: 1.配置 在CentOS7Three上配置,注意:一定要安装bin包,不能安装src包 /usr/local/hbase/hbase-2.0.5/conf 编辑hbase-env.sh,替换成如下配置 编辑hbase-site.xml,增加配置 编辑regionservers 复制Hadoop的co 阅读全文
posted @ 2019-04-23 15:22 Rest探路者 阅读(853) 评论(0) 推荐(0) 编辑
摘要: 1.Hive配置MySQL Hive只是一个工具,无需配置多台机器,我在CentOS7One机器上配置Hive /usr/local/hive/apache-hive-1.2.1-bin/conf 编辑hive-site.xml 配置MySQL连接地址 配置MySQL驱动包 配置数据库用户名 配置数 阅读全文
posted @ 2019-04-23 15:07 Rest探路者 阅读(657) 评论(0) 推荐(0) 编辑
摘要: 1.HBase介绍 Apache HBase™ is the Hadoop database, a distributed, scalable, big data store. Use Apache HBase™ when you need random, realtime read/write a 阅读全文
posted @ 2019-04-23 11:20 Rest探路者 阅读(256) 评论(0) 推荐(0) 编辑
摘要: Fiddler内置命令 我猜你肯定忽略了下边这个小黑框: 虽然它不是很显眼,但用好它,会让你的工作效率提高 N 倍! 这跟喜欢 Linux 的朋友一样,肯定更倾向于用一两个命令代替鼠标不断的点点点操作。 Fiddler 将每个 HTTP 请求都作为一个会话(session)保留在左侧的框框中,而你可 阅读全文
posted @ 2019-04-22 15:59 Rest探路者 阅读(1646) 评论(0) 推荐(0) 编辑
摘要: 1.大量字段的sql语句 去掉`` 把``替换掉格式化 把所有的字段前面加上":" 编写正则替换之 替换结果为 2.爬虫请求参数格式化 待格式化字符串1 get请求的原始数据 打开editplus,ctrl+f 格式化结果如下,最后一行自行调整 待格式化字符串2 从Fiddler的WebForms拷 阅读全文
posted @ 2019-04-22 15:15 Rest探路者 阅读(369) 评论(0) 推荐(0) 编辑
摘要: # JSONPath - XPath for JSON A frequently emphasized advantage of XML is the availability of plenty tools to analyse, transform and selectively extract 阅读全文
posted @ 2019-04-17 14:41 Rest探路者 阅读(1058) 评论(0) 推荐(0) 编辑
摘要: 1.HA架构注意事项 2.搭建准备 准备七台机器 3.安装过程 在CentOS7One机器上安装jdk、hadoop的过程不再赘述,参考本文 首先配置免密 CentOS7One需要免密连接CentOS7Five,CentOS7Six,CentOS7Seven,用以启动zookeeper,datano 阅读全文
posted @ 2019-04-12 19:58 Rest探路者 阅读(698) 评论(0) 推荐(0) 编辑
上一页 1 2 3 4 5 6 7 8 ··· 21 下一页
levels of contents