2020年11月29日
利用pandas读取MySQL和MongoDB数据库中数据
摘要： 连接MySQL数据库，并读取数据： 1 import pymysql 2 import pandas as pd 3 4 #显示所有列 5 pd.set_option('display.max_columns', None) 6 #显示所有行 7 pd.set_option('display.max 阅读全文
posted @ 2020-11-29 17:57 不迁徙候鸟 阅读(218) 评论(0) 推荐(0)
是否允许爬取
摘要： 1 # 开始写爬虫前，先确定目标网页是否允许爬取相关页面 2 from urllib.robotparser import RobotFileParser 3 4 UrlRobots = 'https://book.douban.com/robots.txt' 5 6 def GetRobotsTx 阅读全文
posted @ 2020-11-29 15:56 不迁徙候鸟 阅读(162) 评论(0) 推荐(0)