木子欢儿 - 博客园

2020年7月14日

摘要：我们一直使用 print 方法打印爬虫获取的数据，接下来你将把这些数据保存到特定格式文件中。 CSV 格式 Python 提供了标准库 csv 来读写 csv 数据。新建一个 Python 文件，输入以下代码，并运行。 import csv file = open('movies.csv', 'w 阅读全文

posted @ 2020-07-14 16:09 木子欢儿阅读(546) 评论(0) 推荐(0)

【Python爬虫】一个简单的网络爬虫

摘要：网页结构的相似性爬虫的目的，是从网站中自动化的批量提取数据。首先尝试完成以下操作: 从以下链接中提取电影的标题和标题后的年份: https://movie.douban.com/subject/1292052/ https://movie.douban.com/subject/19626 阅读全文

posted @ 2020-07-14 15:54 木子欢儿阅读(261) 评论(0) 推荐(0)

【Python爬虫】用CSS 选择器提取网页数据

摘要：使用 pip 安装 requests_html 库 pip install requests_html 根据你的网络情况，通常需要几分钟时间。在你的电脑任意位置，新建一个 crawler.py 文件。输入并执行以下 4 行代码： from requests_html import HTMLSess 阅读全文

posted @ 2020-07-14 15:38 木子欢儿阅读(1540) 评论(0) 推荐(0)

2020年7月12日

【Python】自动化升级所有pip安装的包

摘要： #-*- coding:utf-8 -*- import os import re def update(): pipList = os.popen('pip3 list').readlines() #这里就相当于我们在cmd里面输入pip3 list 展示 pip3 安装的所有包 #print(p 阅读全文

posted @ 2020-07-12 11:38 木子欢儿阅读(555) 评论(0) 推荐(0)

【Python爬虫】股票数据定向爬虫

摘要：爬取网站： http://quote.eastmoney.com/center/gridlist.html https://stockapp.finance.qq.com/mstats/ import requests from bs4 import BeautifulSoup import tra 阅读全文

posted @ 2020-07-12 11:11 木子欢儿阅读(507) 评论(0) 推荐(0)

2020年7月10日

【Python】短信轰炸机

摘要：以下代码基于 Github 中的一个短信轰炸的代码，并在其基础上进行了一点改进。不过首先声明，不得利用本代码做违法的事，使用本代码所产生的任何后果本人都不承担任何责任。代码是用python语言写的，只需要安装所需要的几个包就可以了。短信轰炸机的原理就是通过爬虫自动请求发送验证码，这样所要轰炸的手机阅读全文

posted @ 2020-07-10 17:42 木子欢儿阅读(25644) 评论(4) 推荐(0)

2020年7月9日

【Python爬虫】淘宝商品比价定向爬虫

摘要： https://www.taobao.com/ #CrowTaobaoPrice.py import requests import re def getHTMLText(url):#获得网页信息 headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 1 阅读全文

posted @ 2020-07-09 17:26 木子欢儿阅读(932) 评论(0) 推荐(0)

【Python爬虫】Re(正则表达式)库入门

摘要：正则表达式的概念正则表达式的语法 Re库的基本使用练习： >>> import re >>> match=re.search(r'[1-9]\d{5}','BIT 100081') >>> if match: print(match.group(0)) 100081 >>> 练习： >>> im 阅读全文

posted @ 2020-07-09 15:55 木子欢儿阅读(338) 评论(0) 推荐(0)

【Pyhton爬虫】中国大学排名爬虫

摘要： http://www.zuihaodaxue.com/zuihaodaxuepaiming-zongbang-2020.html 代码： import requests from bs4 import BeautifulSoup import bs4 def getHTMLtext(url):#获取阅读全文

posted @ 2020-07-09 10:28 木子欢儿阅读(294) 评论(0) 推荐(0)

2020年7月8日

【教程】VsCode搭建Java开发环境

摘要：配置Java开发环境主要参考官方教程：https://code.visualstudio.com/docs/java/java-tutorial 1.先安装JDK JDK下载地址：https://www.oracle.com/java/technologies/javase-downloads.h 阅读全文

posted @ 2020-07-08 20:00 木子欢儿阅读(11407) 评论(1) 推荐(3)

点滴记忆

你知道的越多，你不知道的越多。

公告