摘要：
Scrapy爬虫框架介绍 pip install scrapyscrapy -h 更好地理解原理： Scrapy爬虫框架解析 requests库和Scarpy爬虫的比较 Scrapy爬虫的常用命令 scrapy -h 阅读全文
posted @ 2020-07-17 10:22
木子欢儿
阅读(186)
评论(0)
推荐(0)
摘要：
高效文本处理 - 1 原始文本 张伟 13497113770 \n 王伟 18848534265 \n 王芳 14055574177 \n 李伟 18778349318 \n 王秀英 17868446857 \n 李秀英 13837762154 \n 李娜 14251562703 \n 张秀英 17 阅读全文
posted @ 2020-07-14 16:53
木子欢儿
阅读(616)
评论(0)
推荐(0)
摘要：
我们一直使用 print 方法打印爬虫获取的数据，接下来你将把这些数据保存到特定格式文件中。 CSV 格式 Python 提供了标准库 csv 来读写 csv 数据。 新建一个 Python 文件，输入以下代码，并运行。 import csv file = open('movies.csv', 'w 阅读全文
posted @ 2020-07-14 16:09
木子欢儿
阅读(549)
评论(0)
推荐(0)
摘要：
网页结构的相似性 爬虫的目的，是从网站中 自动化 的 批量 提取数据。 首先尝试完成以下操作: 从以下链接中提取电影的标题和标题后的年份: https://movie.douban.com/subject/1292052/ https://movie.douban.com/subject/19626 阅读全文
posted @ 2020-07-14 15:54
木子欢儿
阅读(261)
评论(0)
推荐(0)
摘要：
使用 pip 安装 requests_html 库 pip install requests_html 根据你的网络情况，通常需要几分钟时间。 在你的电脑任意位置，新建一个 crawler.py 文件。输入并执行以下 4 行代码： from requests_html import HTMLSess 阅读全文
posted @ 2020-07-14 15:38
木子欢儿
阅读(1548)
评论(0)
推荐(0)
摘要：
#-*- coding:utf-8 -*- import os import re def update(): pipList = os.popen('pip3 list').readlines() #这里就相当于我们在cmd里面输入pip3 list 展示 pip3 安装的所有包 #print(p 阅读全文
posted @ 2020-07-12 11:38
木子欢儿
阅读(556)
评论(0)
推荐(0)
摘要：
爬取网站： http://quote.eastmoney.com/center/gridlist.html https://stockapp.finance.qq.com/mstats/ import requests from bs4 import BeautifulSoup import tra 阅读全文
posted @ 2020-07-12 11:11
木子欢儿
阅读(514)
评论(0)
推荐(0)
摘要：
以下代码基于 Github 中的一个短信轰炸的代码，并在其基础上进行了一点改进。不过首先声明，不得利用本代码做违法的事，使用本代码所产生的任何后果本人都不承担任何责任。 代码是用python语言写的，只需要安装所需要的几个包就可以了。短信轰炸机的原理就是通过爬虫自动请求发送验证码，这样所要轰炸的手机 阅读全文
posted @ 2020-07-10 17:42
木子欢儿
阅读(25717)
评论(4)
推荐(0)
摘要：
https://www.taobao.com/ #CrowTaobaoPrice.py import requests import re def getHTMLText(url):#获得网页信息 headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 1 阅读全文
posted @ 2020-07-09 17:26
木子欢儿
阅读(936)
评论(0)
推荐(0)
摘要：
正则表达式的概念 正则表达式的语法 Re库的基本使用 练习： >>> import re >>> match=re.search(r'[1-9]\d{5}','BIT 100081') >>> if match: print(match.group(0)) 100081 >>> 练习： >>> im 阅读全文
posted @ 2020-07-09 15:55
木子欢儿
阅读(343)
评论(0)
推荐(0)
浙公网安备 33010602011771号