摘要: 环境: selenium-java 3.9.1 firefox 57.0 geckodriver 0.19.1 1.大概的思路就是模拟用户点击行为,关于滚动条的问题,我是模拟下拉箭头,否则只能每个相册只能爬到30个链接 2.多开标签页的原因是因为爬取多个相册时,当你爬完第一个相册无论采取什么方式总会 阅读全文
posted @ 2018-09-05 22:16 tele 阅读(710) 评论(0) 推荐(0)
摘要: 在服役前要配置好新增主机的环境变量,ssh等信息,个人环境介绍 hadoop002(namenode),hadoop003(resourcemanager),hadoop004(secondarynamenode),准备新增hadoop005 一.服役数据节点 1.在namenode节点主机下的${ 阅读全文
posted @ 2018-09-05 21:57 tele 阅读(1061) 评论(0) 推荐(0)