• 博客园logo
  • 会员
  • 周边
  • 新闻
  • 博问
  • 闪存
  • 众包
  • 赞助商
  • Chat2DB
    • 搜索
      所有博客
    • 搜索
      当前博客
  • 写随笔 我的博客 短消息 简洁模式
    用户头像
    我的博客 我的园子 账号设置 会员中心 简洁模式 ... 退出登录
    注册 登录
老猫历险记
博客园 | 首页 | 新随笔 | 新文章 | 联系 | 订阅 订阅 | 管理

2020年7月2日

91家纺网,十次更新
摘要: """ 抓取 解析 存储 """ import re #import ast from urllib import parse from datetime import datetime import requests import time from scrapy import Selector 阅读全文
posted @ 2020-07-02 18:08 老猫历险记 阅读(158) 评论(0) 推荐(0)
 
91家纺网,九次更新,连接MySQL测试用代码,由于获取到的数据为list,但是保存的对应数据库类型不是list类型,所以无法保存,需要二次处理。
摘要: """ 抓取 解析 存储 """ import re #import ast from urllib import parse from datetime import datetime import requests import time from scrapy import Selector 阅读全文
posted @ 2020-07-02 16:53 老猫历险记 阅读(164) 评论(0) 推荐(0)
 
简单的ajax加载,不需要解密的明文类型
摘要: 上图为加载过程 上图中红色框选内容为需要response的参数 #此处发送请求获取商品购买数据 url_sales = parse.urljoin(domain,'default.php?act=evallist') data = { 'id': product_id, 'page': '0', ' 阅读全文
posted @ 2020-07-02 11:07 老猫历险记 阅读(106) 评论(0) 推荐(0)
 
91家纺网,八次更新
摘要: """ 抓取 解析 存储 """ import re #import ast from urllib import parse from datetime import datetime import requests from scrapy import Selector from models  阅读全文
posted @ 2020-07-02 10:55 老猫历险记 阅读(330) 评论(0) 推荐(0)
 
91家纺网,七次更新
摘要: """ 抓取 解析 存储 """ import re #import ast from urllib import parse from datetime import datetime import requests from scrapy import Selector from models  阅读全文
posted @ 2020-07-02 10:17 老猫历险记 阅读(248) 评论(0) 推荐(0)
 
 

公告


博客园  ©  2004-2026
浙公网安备 33010602011771号 浙ICP备2021040463号-3