摘要: 一、python: Python具有丰富和强大的库。它常被昵称为胶水语言,能够把用其他语言制作的各种模块(尤其是C/C++)很轻松地联结在一起。常见的一种应用情形是,使用Python快速生成程序的原型(有时甚至是程序的最终界面),然后对其中有特别要求的部分,用... 阅读全文
posted @ 2022-10-07 20:57 I'm_江河湖海 阅读(138) 评论(0) 推荐(0) 编辑
摘要: 队列是一种只允许在一端进行插入操作,而在另一端进行删除操作的线性表。 在Python文档中搜索队列(queue)会发现,Python标准库中包含了四种队列,分别是queue.Queue / asyncio.Queue / multiprocessing.Que... 阅读全文
posted @ 2022-10-07 20:57 I'm_江河湖海 阅读(1741) 评论(0) 推荐(0) 编辑
摘要: 队列是一种只允许在一端进行插入操作,而在另一端进行删除操作的线性表。 在Python文档中搜索队列(queue)会发现,Python标准库中包含了四种队列,分别是queue.Queue / asyncio.Queue / multiprocessing.Que... 阅读全文
posted @ 2022-10-07 20:57 I'm_江河湖海 阅读(120) 评论(0) 推荐(0) 编辑
摘要: 先给大家分享点鸡汤: “Don’t think of the overwhelming majority of the impossible.” “不要去想不可能之事” “Grew up your bliss and the world.” ... 阅读全文
posted @ 2022-10-07 20:57 I'm_江河湖海 阅读(97) 评论(0) 推荐(0) 编辑
摘要: 先给大家分享点鸡汤: “Don’t think of the overwhelming majority of the impossible.” “不要去想不可能之事” “Grew up your bliss and the world.” ... 阅读全文
posted @ 2022-10-07 20:57 I'm_江河湖海 阅读(99) 评论(0) 推荐(0) 编辑
摘要: 醒来的时候登QQ发现有人找我要一份贴吧爬虫的源代码,想起之前练手的时候写过一个抓取百度贴吧发帖记录中的邮箱与手机号的爬虫,于是开源分享给大家学习与参考。 需求分析: 本爬虫主要是对百度贴吧中各种帖子的内容进行抓取,并且分析帖子内容将其中的手机号和邮箱地址抓取出... 阅读全文
posted @ 2022-10-07 20:57 I'm_江河湖海 阅读(160) 评论(0) 推荐(0) 编辑
摘要: 醒来的时候登QQ发现有人找我要一份贴吧爬虫的源代码,想起之前练手的时候写过一个抓取百度贴吧发帖记录中的邮箱与手机号的爬虫,于是开源分享给大家学习与参考。 需求分析: 本爬虫主要是对百度贴吧中各种帖子的内容进行抓取,并且分析帖子内容将其中的手机号和邮箱地址抓取出... 阅读全文
posted @ 2022-10-07 20:57 I'm_江河湖海 阅读(135) 评论(0) 推荐(0) 编辑
摘要: 如果待处理任务满足: 可拆分,即任务可以被拆分为多个子任务,或任务是多个相同的任务的集合;任务不是CPU密集型的,如任务涉及到较多IO操作(如文件读取和网络数据处理)则使用多线程将任务并行运行,能够提高运行效率。 假设待处理的任务为:有很多文件目录,对于每个文... 阅读全文
posted @ 2022-10-07 20:57 I'm_江河湖海 阅读(163) 评论(0) 推荐(0) 编辑
摘要: 如果待处理任务满足: 可拆分,即任务可以被拆分为多个子任务,或任务是多个相同的任务的集合;任务不是CPU密集型的,如任务涉及到较多IO操作(如文件读取和网络数据处理)则使用多线程将任务并行运行,能够提高运行效率。 假设待处理的任务为:有很多文件目录,对于每个文... 阅读全文
posted @ 2022-10-07 20:57 I'm_江河湖海 阅读(249) 评论(0) 推荐(0) 编辑
摘要: 注:本文使用的开发环境如下,如不同系统或环境之间可能存在差异,本文不做其它说明 操作系统 : MacOS 10.13.4 Python版本 : Python 3.5.4 Django版本 : 2.0.5 celery 版本 : 4.1.0 celery后端... 阅读全文
posted @ 2022-10-07 20:57 I'm_江河湖海 阅读(16) 评论(0) 推荐(0) 编辑
摘要: 注:本文使用的开发环境如下,如不同系统或环境之间可能存在差异,本文不做其它说明 操作系统 : MacOS 10.13.4 Python版本 : Python 3.5.4 Django版本 : 2.0.5 celery 版本 : 4.1.0 celery后端... 阅读全文
posted @ 2022-10-07 20:57 I'm_江河湖海 阅读(67) 评论(0) 推荐(0) 编辑
摘要: 摘要 django框架本身自带有登录注册,也可以自己写登录注册,下面将介绍这这2种方式实登录注册 一、自己写登录注册登出 1.注册regist 注册采用的是form表单,提交到数据库,在登录的时候,查询数据看,看用户有没有注册,如果用户没有注册,则返回注册页面... 阅读全文
posted @ 2022-10-07 20:57 I'm_江河湖海 阅读(301) 评论(0) 推荐(0) 编辑
摘要: 摘要 django框架本身自带有登录注册,也可以自己写登录注册,下面将介绍这这2种方式实登录注册 一、自己写登录注册登出 1.注册regist 注册采用的是form表单,提交到数据库,在登录的时候,查询数据看,看用户有没有注册,如果用户没有注册,则返回注册页面... 阅读全文
posted @ 2022-10-07 20:57 I'm_江河湖海 阅读(302) 评论(0) 推荐(0) 编辑
摘要: 学习爬虫有一小段时间了,于是决定把自己学爬虫时所学的,写过的代码以及看过的文档记录下来,权当小结。第一次写这些,如果有错误,请多指教。 首先我们需要了解一下什么是爬虫。 根据百度百科上给出的定义,” 网络爬虫(又被称为网页蜘蛛,网络机器人,在FOAF社区中间,... 阅读全文
posted @ 2022-10-07 20:57 I'm_江河湖海 阅读(45) 评论(0) 推荐(0) 编辑
摘要: 学习爬虫有一小段时间了,于是决定把自己学爬虫时所学的,写过的代码以及看过的文档记录下来,权当小结。第一次写这些,如果有错误,请多指教。 首先我们需要了解一下什么是爬虫。 根据百度百科上给出的定义,” 网络爬虫(又被称为网页蜘蛛,网络机器人,在FOAF社区中间,... 阅读全文
posted @ 2022-10-07 20:57 I'm_江河湖海 阅读(21) 评论(0) 推荐(0) 编辑
摘要: 前言 先让我们来看看一个用到相对文件路径的函数调用的问题。假设现在有两个脚本文件main.py和func.py,他们的路径关系是: 1.2|--dir13 |--main.py4 |--dir25 |--func.py6 |... 阅读全文
posted @ 2022-10-07 20:57 I'm_江河湖海 阅读(464) 评论(0) 推荐(0) 编辑
摘要: 前言 先让我们来看看一个用到相对文件路径的函数调用的问题。假设现在有两个脚本文件main.py和func.py,他们的路径关系是: 1.2|--dir13 |--main.py4 |--dir25 |--func.py6 |... 阅读全文
posted @ 2022-10-07 20:57 I'm_江河湖海 阅读(144) 评论(0) 推荐(0) 编辑
摘要: 常用快捷键: Ctrl + D 复制选定的区域或行 Ctrl + Y 删除选定的行 Ctrl + Alt + L 代码格式化 Ctrl + Alt + O 优化导入(去掉用不到... 阅读全文
posted @ 2022-10-07 20:57 I'm_江河湖海 阅读(32) 评论(0) 推荐(0) 编辑
摘要: 常用快捷键: Ctrl + D 复制选定的区域或行 Ctrl + Y 删除选定的行 Ctrl + Alt + L 代码格式化 Ctrl + Alt + O 优化导入(去掉用不到... 阅读全文
posted @ 2022-10-07 20:57 I'm_江河湖海 阅读(39) 评论(0) 推荐(0) 编辑
摘要: 无论try语句中是否抛出异常,finally中的语句一定会被执行。我们来看下面的例子: try: f = open("/tmp/output", "w") f.write("hello") #raise Exception("somethin... 阅读全文
posted @ 2022-10-07 20:57 I'm_江河湖海 阅读(29) 评论(0) 推荐(0) 编辑