06 2019 档案

正则爬取某段子网站前20页段子(request库)
摘要：首先还是谷歌浏览器抓包对该网站数据进行分析，结果如下： 该网站地址：http://www.budejie.com/text 该网站数据都是通过html页面进行展示，网站url默认为第一页，http://www.budejie.com/text/2为第二页，以此类推 对网站的内容段子所处位置进行分析， 阅读全文
posted @ 2019-06-30 16:45 springionic 阅读(406) 评论(0) 推荐(0)
requests库爬取豆瓣热门国产电视剧数据并保存到本地
摘要：首先要做的就是去豆瓣网找对应的接口，这里就不赘述了，谷歌浏览器抓包即可，然后要做的就是分析返回的json数据的结构： https://movie.douban.com/j/search_subjects?type=tv&tag=%E5%9B%BD%E4%BA%A7%E5%89%A7&sort=rec 阅读全文
posted @ 2019-06-29 19:01 springionic 阅读(1297) 评论(0) 推荐(0)
Python字典推导式将cookie字符串转化为字典
摘要：Python中的列表推导式一般是大家所熟悉的，可以极大的简洁代码；而Python中的字典推导式和列表推导式也是大同小异的 cookie: PHPSESSID=et4a33og7nbftv60j3v9m86cro; Hm_lvt_51e3cc975b346e7705d8c255164036b3=156 阅读全文
posted @ 2019-06-26 21:50 springionic 阅读(2549) 评论(0) 推荐(0)
爬取百度贴吧前1000页内容（requests库面向对象思想实现）
摘要：此程序以李毅吧为例子，以面向对象的设计思想实现爬取保存网页数据，暂时并未用到并发处理，以后有机会的话会加以改善 首先去百度贴吧分析贴吧地址栏中url后的参数，找到分页对应的参数pn，贴吧名字对应的参数kw 首先创建类，写好__init__方法，run方法，__init__方法里先可以直接写pass 阅读全文
posted @ 2019-06-25 20:04 springionic 阅读(356) 评论(0) 推荐(0)
牛客网：连续子数组的最大和
摘要：题目描述 HZ偶尔会拿些专业问题来忽悠那些非计算机专业的同学。今天测试组开完会后,他又发话了:在古老的一维模式识别中,常常需要计算连续子向量的最大和,当向量全为正数的时候,问题很好解决。但是,如果向量中包含负数,是否应该包含某个负数,并期望旁边的正数会弥补它呢？例如:{6,-3,-2,7,-15,1 阅读全文
posted @ 2019-06-25 12:15 springionic 阅读(272) 评论(0) 推荐(0)
在字符串中找出第一个只出现一次的字符，Python实现
摘要：要求： 1. 不能依赖库函数直接实现此功能，需使用基础的数据结构实现 2. 时间复杂度 O(n) 思路： 1. 用字典存储每个字符在字符串中出现的次数 2. 列表是有序的，用来存储字符的出现先后 3. 最后，从前向后遍历列表，找出第一个出现次数为1的字符，即为符合条件的字符 阅读全文
posted @ 2019-06-06 16:56 springionic 阅读(6091) 评论(0) 推荐(0)
关于时间日期的程序，主要datetime模块
摘要：以每年的立春作为起始点，每N天为一个单元，任给一个日期，返回该日期所在单元的起始和结束日期。例如：N=3, 输入日期20180208，返回 20180207,20180209（2018年的立春是20180204，所以第一个单元是20180204-20180206，第二个单元是 20180207-20 阅读全文
posted @ 2019-06-05 21:59 springionic 阅读(397) 评论(0) 推荐(0)
检测Python程序本身是否已经在运行
摘要：为runner.py实现一个函数，检测是否有其他的runner.py进程在正在执行？ 除主要用到os模块，还用到了第三方模块psutil 阅读全文
posted @ 2019-06-05 21:56 springionic 阅读(5831) 评论(0) 推荐(0)
用Python快速找到出现次数最多的数据
摘要：给你一个文件，每行一个iip？ 阅读全文
posted @ 2019-06-05 21:53 springionic 阅读(1978) 评论(0) 推荐(1)
阿里云服务器地址端口不能公网访问的问题，及让端口通过防火墙的命令
摘要：今天在阿里云的服务器上测试一个Flask程序，命名指定了 ip：0.0.0.0，port：5000，但是外网IP确怎么也访问不了网页 上网上好个查，发现阿里云的服务器端口开放需要去阿里云的“安全组配置”开放相应端口，才能正常使用； 这步操作大家可以直接百度“阿里云开放端口”就可以百度到具体操作 但是 阅读全文
posted @ 2019-06-04 22:44 springionic 阅读(6480) 评论(0) 推荐(0)
Django2.1 authenticate 会关联数据库 is_active 的解决办法
摘要：# 会检测用户是否是活跃状态（is_active）,不活跃则返回None（默认配置）AUTHENTICATION_BACKENDS = ['django.contrib.auth.backends.ModelBackend'] 在 settings.py 文件里加上下面的配置就行 # 不会检测用户的 阅读全文
posted @ 2019-06-01 20:01 springionic 阅读(545) 评论(0) 推荐(0)
celery异步发送邮件
摘要：利用Django框架发送邮件的详细过程，在前两天的博客中有所记录，但是单纯的那样发邮件是有非常大的问题的，这就需要celery异步发送来解决 首先我们来看一下邮件发送的过程： Django网站先发送到smtp服务器 smtp服务器再把邮件发送到目的邮箱 这里有两个不确定时间： Django网站 >s 阅读全文
posted @ 2019-06-01 13:41 springionic 阅读(1209) 评论(1) 推荐(0)