2020年1月7日
Hbase的shell命令
摘要： 在使用Hbase前要在hadoop的基础上搭建分布式，环境搭建好后，输入bin/hbase-daemon.sh start master bin/hbase-daemon.sh start regionserver启动Hbase 可以在浏览器输入网址http://ip地址:60010测试是否启动成功 阅读全文
posted @ 2020-01-07 09:40 愚乐丶 阅读(971) 评论(0) 推荐(0)
2019年12月25日
常见的反爬手段及解决思路
摘要： 1. BAN USERAGENT：很多的爬虫请求头就是默认的一些很明显的爬虫头python-requests/2.18.4，诸如此类，当运维人员发现携带有这类headers的数据包，直接拒绝访问，返回403错误 解决办法：加User-Agent2. BAN IP：网页的运维人员通过分析日志发现最近某 阅读全文
posted @ 2019-12-25 16:58 愚乐丶 阅读(946) 评论(0) 推荐(0)