随笔分类 - python
摘要:之前在下载港交所的文件的时候会碰到有些文件异常的情况,文件下载下来,但是不能打开。查到其他的方法不是判断错误就是很麻烦。 整理出一个非常简单的方法,将文件以二进制方式打开,然后判断文件的开头是否符合pdf标准: 处理我这个情况非常好用,不一定适用于所有情况 python实现: def is_pdf_
阅读全文
摘要:在使用django migrate功能时,默认数据库的字符集不是utf8. 是latin 1,然后在后台管理model时,不允许有中文字符插入 解决方案: 在使用migrate建库之前先把数据库建立起来,并选定自己的数据库字符集是utf8. 如下: 在运行migrate的时候,会沿用这个库,里面的表
阅读全文
摘要:# 与能查到的多数博文做法不太一样,自认为这样更简单有效 1. 下载插件 https://plugins.jetbrains.com/plugin/11084-pylint 2. 从磁盘安装插件 注意:无需解压,直接用zip文件安装 3. 重启pycharm,确保插件是开启状态 效果如下: 每打开一
阅读全文
摘要:在写网站的时候遇到了一个问题: Django在后端向前端传数据时,多数会使用dict字典来传送多个数据,但前端只能遍历,没有一个用key取到value值的方法可以直接使用 如果作为一个list传递到前端,结构相同情况下,遍历确实够用。但是使用dict时多数会使用单个key取value放到不同的地方使
阅读全文
摘要:使用本地代码直接share到github上过程中出现了一个问题: 解决方案:在Settring -> VersionControl ->GitHub中去掉:“Clone git repositories using ssh”即可 原文地址https://www.cnblogs.com/xiaozhi
阅读全文
摘要:python3.6、selenium、chromedriver 先上代码 能简单的输出一下弹幕,没有入库只是放在了屏幕上,效果如下
阅读全文
摘要:原文地址:http://blog.csdn.net/caroline_wendy/article/details/23383995 还有一篇:http://blog.csdn.net/carolzhang8406/article/details/6856817 静态函数(staticmethod),
阅读全文
摘要:原文地址:http://www.cnblogs.com/zhaopengcheng/p/5492183.html python中一切皆对象,函数中参数传递的是对象的引用。 1在函数中改变变量指向的对象,即指向不同对象。 当在函数中修改传递进来的变量指向另一个对象时,实参的对象不会改变。 需要说明的是
阅读全文
摘要:原文地址:http://www.cnblogs.com/huamingao/p/5809936.html 可变类型 Vs 不可变类型 可变类型(mutable):列表,字典 不可变类型(unmutable):数字,字符串,元组 这里的可变不可变,是指内存中的那块内容(value)是否可以被改变 代码
阅读全文
摘要:原文地址:http://www.jianshu.com/p/870451cb4eb0 背景 作为移动平台的RD,项目开发过程中一项比较重要的甩锅技能——抓包应该大家都比较熟悉了,毕竟有些bug可能是由服务端下发的数据出错导致的。虽然抓包工具很好用,但是如果不做一些设置的话,对于HTTPS协议的请求就
阅读全文
摘要:原文地址:http://blog.csdn.net/idlear/article/details/50999490 学习一下! fiddler抓包HTTPS请求 跟着教程来,保证100%成功抓HTTPS包 教程开始 安装fiddler 首先准备一台可以上网的windos电脑,准备一部智能手机。 fi
阅读全文
摘要:原文地址:http://www.cnblogs.com/zhangfei/archive/2010/11/02/1866981.html 1. 正则表达式基础 1.1. 简单介绍 正 则表达式并不是Python的一部分。正则表达式是用于处理字符串的强大工具,拥有自己独特的语法以及一个独立的处理引擎,
阅读全文
摘要:爬虫的时候经常用到这个,找到了一个比较好用的方法 原文链接:http://blog.csdn.net/u012189659/article/details/36391837 背景:selenium+python处于学习阶段,功能实现之后开始整理之前写的代码,突然发现一个功能没有做判断,比如,点击“请
阅读全文
摘要:学习一下:原文链接:http://www.cnblogs.com/lhj588/archive/2012/01/06/2314181.html 一、安装xlrd模块 到python官网下载http://pypi.python.org/pypi/xlrd模块安装,前提是已经安装了python 环境。
阅读全文
摘要:遇到一个网站运行很慢,所以要等待某个元素显示出来之后再进行操作,自己手上的书上没有例子可以直接用 发现一篇文章:http://www.cnblogs.com/yoyoketang/p/6517477.html 原文如下 前言: 在脚本中加入太多的sleep后会影响脚本的执行速度,虽然implicit
阅读全文
摘要:自己在看python处理数据的方法,发现一篇介绍比较详细的文章 转自:http://blog.csdn.net/lingojames/article/details/72835972 20170531 这几天重新拾起了爬虫,算起来有将近5个月不碰python爬虫了。 对照着网上的程序和自己以前写的抓
阅读全文
摘要:BeautifulSoup的提供了两个超级好用的方法(可能是你用bs方法中最常用的)。借助这两个函数,你可以通过表现的不同属性轻松过滤HTML(XML)文件,查找需要的标签组或单个标签。 首先find(),findAll()是当有了bs对象之后,获取标签组或者单个标签的函数。find()找到第一个满
阅读全文
摘要:突然想到了这个题目,先开了题,看能不能一次搞定,#后记,花了两天时间搞定的,一直想用自己的方法爬,但是效果都不好 首先去分析一下bilibili的网站请求,但是弹幕的异步传输的包抓不到(或者隐藏的好,或者是我技术水平有限),然后网上比较一致的看法是在JS里暴露了一个弹幕xml文件的id,然后用一个新
阅读全文
摘要:工具Fiddler/python3 打开Fiddler,清空一下Fidder里面的请求记录 打开app,进行登录,注意Fiddler里的请求变化 在弹出app登录的时候Fiddler里已经有了四个请求,如下: 注意看一下第一个请求的URL中的信息 "login.do?",那需要分析的就是这个请求了
阅读全文

浙公网安备 33010602011771号