摘要: 酷我音乐 本文实现了酷我音乐的付费/免费音乐的下载功能,根据提示输入关键词即可下载。 # -*- coding: utf-8 -*- """ @author : 爬虫王者 @function : 根据关键词下载酷我音乐 http://bd.kuwo.cn/ 包括付费、免费 """ import re 阅读全文
posted @ 2022-12-19 22:19 爬虫王者 阅读(439) 评论(0) 推荐(1)
摘要: 登录常用手段就是: request.post请求 selenium等自动化工具 这里讲一下使用requests实现自动登录网站 现在网站登录基本上都有验证码,requests登录的难点在于将验证码与账号联系起来,这里是cookie和referer。 def login_dianxiaomi(): " 阅读全文
posted @ 2022-12-18 11:22 爬虫王者 阅读(556) 评论(0) 推荐(0)
摘要: 宅男爬虫学习第一课! 宅男们的福利来啦~ 话不多说,直接上代码! # -*- encoding: utf-8 -*- # FUNCTION: Capture beauty picture import requests from bs4 import BeautifulSoup import os 阅读全文
posted @ 2022-12-17 11:10 爬虫王者 阅读(58) 评论(0) 推荐(0)
摘要: 打开产品页,爬取商品数据及评论数据 # -*- coding: utf-8 -*- """ @function : 沃尔玛部分商品数据及评论 """ import math import random import re import time import json import requests 阅读全文
posted @ 2022-12-17 10:35 爬虫王者 阅读(1354) 评论(0) 推荐(0)
摘要: 一、创建虚拟环境 1.安装virtualenv,virtualenvwrapper pip install virtualenv virtualenvwrapper 安装好之后创建存放虚拟环境目录,这里我存在 ~/pythonvenv 里,查看当前路径:pwd,返回/home/cch/pythonv 阅读全文
posted @ 2022-12-17 10:31 爬虫王者 阅读(259) 评论(0) 推荐(0)
摘要: 当需要对全局变量进行更改时,则会出现不安全的情况 # -*- coding: utf-8 -*- """ @date : 2022/8/17 16:06 @function : 自动转发 """ import json import time import requests from loguru 阅读全文
posted @ 2022-12-17 10:02 爬虫王者 阅读(180) 评论(0) 推荐(0)