• 博客园logo
  • 会员
  • 周边
  • 新闻
  • 博问
  • 闪存
  • 众包
  • 赞助商
  • Chat2DB
    • 搜索
      所有博客
    • 搜索
      当前博客
  • 写随笔 我的博客 短消息 简洁模式
    用户头像
    我的博客 我的园子 账号设置 会员中心 简洁模式 ... 退出登录
    注册 登录
老猫历险记
博客园 | 首页 | 新随笔 | 新文章 | 联系 | 订阅 订阅 | 管理
上一页 1 2 3 4 5 6 7 ··· 10 下一页

2020年7月16日

91家纺网,利用cookies登录
摘要: import requests from lxml import etree import time import re from selenium import webdriver chrome_options = webdriver.ChromeOptions() chrome_options. 阅读全文
posted @ 2020-07-16 14:25 老猫历险记 阅读(363) 评论(0) 推荐(0)
 
selenium验证码pic处理代码,以91家纺网为例
摘要: # encoding:utf-8 from PIL import Image from selenium import webdriver from selenium.webdriver import ActionChains chrome_options = webdriver.ChromeOpt 阅读全文
posted @ 2020-07-16 10:15 老猫历险记 阅读(240) 评论(0) 推荐(0)
 
91家纺网,登录代码
摘要: import re import os import base64 #import ast from urllib import parse from datetime import datetime import cv2 import random import requests import t 阅读全文
posted @ 2020-07-16 10:14 老猫历险记 阅读(6287) 评论(0) 推荐(0)
 
 

2020年7月15日

91家纺网,模拟浏览器登录
摘要: import re import os import base64 #import ast from urllib import parse from datetime import datetime import cv2 import random import requests import t 阅读全文
posted @ 2020-07-15 18:04 老猫历险记 阅读(1568) 评论(0) 推荐(0)
 
 

2020年7月14日

91家纺网,models
摘要: from settings import * class BaseModel(Model): class Meta: database = db #设计数据表的时候有几个重要点一定要注意 """ char类型, 要设置最大长度 对于无法确定最大长度的字段,可以设置为Text 设计表的时候 采集到的数 阅读全文
posted @ 2020-07-14 18:08 老猫历险记 阅读(210) 评论(0) 推荐(0)
 
91家纺网,setting文件
摘要: #91家纺网爬虫数据库配置信息 from peewee import * import redis #mysql #db = MySQLDatabase("91jiafan", host="127.0.0.1", port=3306, user="root", password="123456") 阅读全文
posted @ 2020-07-14 18:07 老猫历险记 阅读(135) 评论(0) 推荐(0)
 
91家纺网,更新
摘要: import re #import ast from threading import Thread import threading from urllib import parse from datetime import datetime import random import reques 阅读全文
posted @ 2020-07-14 18:06 老猫历险记 阅读(276) 评论(0) 推荐(0)
 
91家纺网,更新
摘要: import re #import ast from threading import Thread from urllib import parse from datetime import datetime import random import requests import time im 阅读全文
posted @ 2020-07-14 08:38 老猫历险记 阅读(260) 评论(0) 推荐(0)
 
 

2020年7月13日

91家纺网,注释掉第一个mysql数据表格内容
摘要: import re #import ast from threading import Thread from urllib import parse from datetime import datetime import random import requests import time im 阅读全文
posted @ 2020-07-13 14:02 老猫历险记 阅读(90) 评论(0) 推荐(0)
 
爬虫工具代码
摘要: #工具函数,整体测试不行 import requests import time ''' def get_html(url): # 代理服务器 print("开始下载url : {}".format(url)) proxyHost = "http-dyn.abuyun.com" proxyPort  阅读全文
posted @ 2020-07-13 08:39 老猫历险记 阅读(174) 评论(0) 推荐(0)
 
 
上一页 1 2 3 4 5 6 7 ··· 10 下一页

公告


博客园  ©  2004-2026
浙公网安备 33010602011771号 浙ICP备2021040463号-3