摘要: 多线程的使用: import threading def func(x): print(x) t= threading.Thread(target=func,args=(12,)) # 线程启动 t.start() # 主进程阻塞,等待子进程的退出 t.join() # 设置线程为主线程的守护线程 阅读全文
posted @ 2018-09-17 23:18 skaarl 阅读(642) 评论(0) 推荐(1)
摘要: 常见的反爬手段和解决思路 反反爬的主要思路 反反爬的主要思路就是:尽可能的去模拟浏览器,浏览器在如何操作,代码中就如何去实现。浏览器先请求了地址url1,保留了cookie在本地,之后请求地址url2,带上了之前的cookie,代码中也可以这样去实现。 很多时候,爬虫中携带的headers字段,co 阅读全文
posted @ 2018-09-17 00:06 skaarl 阅读(6769) 评论(0) 推荐(1)