• 博客园logo
  • 会员
  • 众包
  • 新闻
  • 博问
  • 闪存
  • 赞助商
  • HarmonyOS
  • Chat2DB
    • 搜索
      所有博客
    • 搜索
      当前博客
  • 写随笔 我的博客 短消息 简洁模式
    用户头像
    我的博客 我的园子 账号设置 会员中心 简洁模式 ... 退出登录
    注册 登录
 






天生自然

 
 

Powered by 博客园
博客园 | 首页 | 新随笔 | 联系 | 订阅 订阅 | 管理

随笔分类 -  吴裕雄--天生自然PYTHON语言学习笔记

上一页 1 2 3 4 5 6 7 8 9 下一页

 
吴裕雄--天生自然python学习笔记:解决WebDriverException: Message: unknown error: missing or invalid 'entry.level'
摘要:会出现这个错误是因为你的chrome浏览器与下载的chromedriver.exe版本不一致造成的。 到这个地址:https://npm.taobao.org/mirrors/chromedriver/79.0.3945.36/下载下图所示的驱动,要注意看自己操作系统来下载 如果是windows系统 阅读全文
posted @ 2019-12-11 22:35 吴裕雄 阅读(828) 评论(0) 推荐(0)
吴裕雄--天生自然python学习笔记:python用 Selenium 组件实现浏览器操作自动化
摘要:一般情况下,我们都是用手工操作的方式来对浏览器进行各种操作 。 实际上, 只要我们安装一个自动化操作组件, Python 就可以让我们的很多操作实现自动化 。 Selenium 组件 在开发网页时,用户接口的测试向来是一件相当不容易的事情,如果用手动方 式进行测试的各种操作,不仅效率低而且容易出错 阅读全文
posted @ 2019-12-11 22:09 吴裕雄 阅读(438) 评论(0) 推荐(0)
吴裕雄--天生自然python学习笔记:python通过“任务计划程序”实现定时自动下载或更新运行 PM2.5 数据抓取程序数据
摘要:在 Windows 任务计划程序中,设置每隔 30 分钟自动抓取 PM2.5 数据,井保存 在 SQLite 数据库中 。 import sqlite3,ast,requests,os from bs4 import BeautifulSoup #cur_path=os.path.dirname(_ 阅读全文
posted @ 2019-12-11 20:38 吴裕雄 阅读(387) 评论(0) 推荐(0)
吴裕雄--天生自然python学习笔记:python通过“任务计划程序”实现定时自动下载或更新数据
摘要:对于需要定时下载或更新的数据,在操作系统中通过“任务计划程序”功能来 实现是个很酷的办法。通过“任务计划程序飞我们可以对所开发的程序的运行时间( 开 始时间至结束时间、每隔多久运行一次)进行设置。现在 ,我们通过“任务计划程序” 来实现上例中开发的程序的自动运行。 阅读全文
posted @ 2019-12-11 20:20 吴裕雄 阅读(424) 评论(0) 推荐(0)
吴裕雄--天生自然python学习笔记:抓取网络公开数据
摘要:当前,有许多政府或企事业单位会在网上为公众提供相关的公开数据。以 http://api.help.bj.cn/api/均 .cn/api /网站为例,打开这个链接,大家可以看到多种可供调用的数据 。 进入 http://api.help.bj.cn/api/网站,单击“空气质量 API ” 。 我们 阅读全文
posted @ 2019-12-11 20:03 吴裕雄 阅读(393) 评论(0) 推荐(0)
吴裕雄--天生自然python学习笔记:python实现自动网页测试
摘要:Python 可实现的网页测试的功能十分强大,甚至能通 过编程来实现让绝大多数的测试过程自动化。 这对很多开 发者来说,绝对是不可多得的神器。 hash lib 纽件可以判别文件是否有过更改,只需要用 md5 方法对指定的文件进行编码,即可进行比对。 Selenium 是相当著名的网页自动化测试纽件 阅读全文
posted @ 2019-12-11 19:34 吴裕雄 阅读(417) 评论(0) 推荐(0)
吴裕雄--天生自然python学习笔记:编写网络爬虫代码获取指定网站的图片
摘要:我们经常会在网上搜索井下载图片,然而一张一张地下载就太麻烦了,本案例 就是通过网络爬虫技术, 一次性下载该网站所有的图片并保存 。 网站图片下载并保存 将指定网站的 .jpg 和 .png 格式的图片全部下载井保存在自己本地新建的 images 文件夹中 。 import requests,os from bs4 import BeautifulSoup from ur... 阅读全文
posted @ 2019-12-11 12:18 吴裕雄 阅读(366) 评论(0) 推荐(0)
吴裕雄--天生自然python学习笔记:编写网络爬虫代码获取北京市PM2.5 实时数据
摘要:掌握了前面所讲的正则表达式、网页解析以及 BeautifulSoup 抓取基本内容后,就可以编写网络爬虫代码获取数据了。 从 http://www.pm25x.com/ 网站抓取北京的 PM2.5 实时数据 。 抓取北京市 PM2.5 实时数据 现在我们的目的很明确,就是取回北京市 PM2.5 当时的实时数值。 因为这个结果会实时改变,所以你们实际取得的数值会和此时我在案例中抓取到的数据有所不同, 阅读全文
posted @ 2019-12-11 11:50 吴裕雄 阅读(589) 评论(0) 推荐(0)
吴裕雄--天生自然python学习笔记:网页解析
摘要:抓取万水书苑网页中所有<a>标签中的超链接井显示。 import requests from bs4 import BeautifulSoup url = 'http://www.wsbookshow.com/' html = requests.get(url) html.encoding="gbk" sp=BeautifulSoup(html.text,"html.parser") links= 阅读全文
posted @ 2019-12-11 11:17 吴裕雄 阅读(169) 评论(0) 推荐(0)
吴裕雄--天生自然python学习笔记:python爬虫与网页分析
摘要:我们所抓取的网页源代码一般都是 HTML 格式的文件,只要研究明白 HTML 中 的标签( Tag )结构,就很容易进行解析并取得所需数据 。 HTML 网页结构 HTML 网 页是由许多标签( Tag )构成,标签需用 。字符括起来 。 大部分标签 成对出现,与开始标签对应的结束标签前多 一个“/ ” 字符,例如 < html><斤itml>。 少 数标签非成对出现 ,如 <i mg src=’ 阅读全文
posted @ 2019-12-11 10:59 吴裕雄 阅读(290) 评论(0) 推荐(0)
吴裕雄--天生自然python学习笔记:案例:用正则表达式查找邮件账号
摘要:抓取万水书苑“ ht甲://www.w sbookshow.com/ ”网站中的所有 E-mai l 账号。 import requests,re regex = re.compile('[a-zA-Z0-9_.+-]+@[a-zA-Z0-9-]+\.[a-zA-Z0-9-.]+') url = 'http://www.wsbookshow.com/' html = requests.ge... 阅读全文
posted @ 2019-12-11 09:56 吴裕雄 阅读(228) 评论(0) 推荐(0)
吴裕雄--天生自然python学习笔记:WEB数据抓取与分析
摘要:常见的正则表达式功能介绍 直接调用 re.match ()方法 上例若用 match 方法搜索 ,得到的结果将会是 None 。 阅读全文
posted @ 2019-12-11 00:04 吴裕雄 阅读(441) 评论(0) 推荐(0)
吴裕雄--天生自然python学习笔记:Python uWSGI 安装配置
摘要:本文主要介绍如何部署简单的 WSGI 应用和常见的 Web 框架。 以 Ubuntu/Debian 为例,先安装依赖包: apt-get install build-essential python-dev Python 安装 uWSGI 1、通过 pip 命令: pip install uwsgi 2、下载安装脚本: curl http://uwsgi.it/install | bash -s 阅读全文
posted @ 2019-12-09 18:32 吴裕雄 阅读(240) 评论(0) 推荐(0)
吴裕雄--天生自然python学习笔记:Python MongoDB
摘要:MongoDB 是目前最流行的 NoSQL 数据库之一,使用的数据类型 BSON(类似 JSON)。 PyMongo Python 要连接 MongoDB 需要 MongoDB 驱动,这里我们使用 PyMongo 驱动来连接。 pip 安装 pip 是一个通用的 Python 包管理工具,提供了对 Python 包的查找、下载、安装、卸载的功能。 安装 pymongo: $ python3 -m 阅读全文
posted @ 2019-12-09 17:10 吴裕雄 阅读(344) 评论(0) 推荐(0)
吴裕雄--天生自然python学习笔记:Python3 日期和时间
摘要:Python 程序能用很多方式处理日期和时间,转换日期格式是一个常见的功能。 Python 提供了一个 time 和 calendar 模块可以用于格式化日期和时间。 时间间隔是以秒为单位的浮点小数。 每个时间戳都以自从1970年1月1日午夜(历元)经过了多长时间来表示。 Python 的 time 模块下有很多函数可以转换常见日期格式。如函数time.time()用于获取当前时间戳 import 阅读全文
posted @ 2019-12-09 16:35 吴裕雄 阅读(218) 评论(0) 推荐(0)
吴裕雄--天生自然python学习笔记:Python3 JSON 数据解析
摘要:JSON (JavaScript Object Notation) 是一种轻量级的数据交换格式。它基于ECMAScript的一个子集。 Python3 中可以使用 json 模块来对 JSON 数据进行编解码,它包含了两个函数: json.dumps(): 对数据进行编码。 json.loads(): 对数据进行解码。 在json的编解码过程中,python 的原始类型与json类型会相互转换,具 阅读全文
posted @ 2019-12-09 12:05 吴裕雄 阅读(224) 评论(0) 推荐(0)
吴裕雄--天生自然python学习笔记:Python3 XML 解析
摘要:什么是 XML? XML 指可扩展标记语言(eXtensible Markup Language),标准通用标记语言的子集,是一种用于标记电子文件使其具有结构性的标记语言。 XML 被设计用来传输和存储数据。 XML 是一套定义语义标记的规则,这些标记将文档分成许多部件并对这些部件加以标识。 它也是元标记语言,即定义了用于定义其他与特定领域有关的、语义的、结构化的标记语言的句法语言。 Python 阅读全文
posted @ 2019-12-09 11:52 吴裕雄 阅读(266) 评论(0) 推荐(0)
吴裕雄--天生自然python学习笔记:Python3 多线程
摘要:多线程类似于同时执行多个不同程序,多线程运行有如下优点: 使用线程可以把占据长时间的程序中的任务放到后台去处理。 用户界面可以更加吸引人,比如用户点击了一个按钮去触发某些事件的处理,可以弹出一个进度条来显示处理的进度。 程序的运行速度可能加快。 在一些等待的任务实现上如用户输入、文件读写和网络收发数据等,线程就比较有用了。在这种情况下我们可以释放一些珍贵的资源如内存占用等等。 每个独立的线程有... 阅读全文
posted @ 2019-12-09 11:28 吴裕雄 阅读(275) 评论(0) 推荐(0)
吴裕雄--天生自然python学习笔记:Python3 SMTP发送邮件
摘要:SMTP(Simple Mail Transfer Protocol)即简单邮件传输协议,它是一组用于由源地址到目的地址传送邮件的规则,由它来控制信件的中转方式。 python的smtplib提供了一种很方便的途径发送电子邮件。它对smtp协议进行了简单的封装。 Python创建 SMTP 对象语法如下: import smtplib smtpObj = smtplib.SMTP( [host [ 阅读全文
posted @ 2019-12-08 23:41 吴裕雄 阅读(288) 评论(0) 推荐(0)
吴裕雄--天生自然python学习笔记:Python3 网络编程
摘要:Python 提供了两个级别访问的网络服务。: 低级别的网络服务支持基本的 Socket,它提供了标准的 BSD Sockets API,可以访问底层操作系统Socket接口的全部方法。 高级别的网络服务模块 SocketServer, 它提供了服务器中心类,可以简化网络服务器的开发。 什么是 Socket? Socket又称"套接字",应用程序通常通过"套接字"向网络发出请求或者应答网络... 阅读全文
posted @ 2019-12-08 22:52 吴裕雄 阅读(240) 评论(0) 推荐(0)
 

上一页 1 2 3 4 5 6 7 8 9 下一页