摘要: js混淆爬虫--天气网 混淆加密网站 今天在爬取污染物时遇到下面网站,总的来说碰到了两大方面的爬虫难题。(混淆加密和debug检测)。 待爬取的网站 数据获取 一开始就遇到右键禁用,debug检测。 没办法,ctrl+s,直接把网站保存到了本地。 这样可以f12了,找到主页面,一通找,找到了ajax 阅读全文
posted @ 2020-10-19 17:43 boblee12 阅读(131) 评论(0) 推荐(0) 编辑
摘要: import pymysql import pymongo # 创建mysql的数据库连接 con = pymysql.connect(host='', port='', user='', password='', db='') # 获取游标 cur = con.cursor(cursor=pymy 阅读全文
posted @ 2020-08-20 13:58 boblee12 阅读(107) 评论(0) 推荐(0) 编辑