python demo库 - 随笔分类(第6页) - 安迪9468

摘要：pipelines.py settings.py 阅读全文

posted @ 2018-01-17 01:59 安迪9468 阅读(222) 评论(0) 推荐(0)

摘要：spider爬虫，适合meta传参的爬虫（列表页，详情页都有数据要爬取的时候） crawlspider爬虫，适合不用meta传参的爬虫 scrapy genspider -t crawl it it.com 链接提取器的使用 scrapy shell http://hr.tencent.com/po 阅读全文

posted @ 2018-01-17 01:49 安迪9468 阅读(308) 评论(0) 推荐(0)

scrapy的post登录：renren

摘要：scrapy 如何发送post请求。代码如上。方法二：针对从首页重定向到登录页面的post登录阅读全文

posted @ 2018-01-17 00:29 安迪9468 阅读(243) 评论(0) 推荐(0)

property：get、set

摘要：property属性：自动调用get、set方法每次调用隐藏的数据，都用get和set方法写的字符太长，就用property解决。方法一：使用property()函数升级get、set方法源代码： class Money(object): def __init__(self): self.__ 阅读全文

posted @ 2018-01-16 23:47 安迪9468 阅读(565) 评论(0) 推荐(0)

json数据爬虫。requests实现

摘要：get请求 post传参阅读全文

posted @ 2018-01-12 20:39 安迪9468 阅读(422) 评论(0) 推荐(0)

日志模块的简单使用

摘要：https://www.cnblogs.com/yyds/p/6901864.html 日志模块的简单使用 python 获取当前调用函数名等log信息阅读全文

posted @ 2018-01-12 14:43 安迪9468 阅读(157) 评论(0) 推荐(0)

编码问题：python写入文件

摘要：方法一：（推荐）方法二：codecs http://blog.csdn.net/mbugatti/article/details/53925236 阅读全文

posted @ 2018-01-10 14:07 安迪9468 阅读(141) 评论(0) 推荐(0)

返回随机数：整数、浮点数

摘要：返回随机数：整数、浮点数 # -*- coding: utf-8 -*- import random # 产生0-1之间的浮点数 random.random() # 产生0-12之间的浮点数 random.random() * 12 # 返回指定范围的随机整数：不包含60 random.randra 阅读全文

posted @ 2018-01-10 09:52 安迪9468 阅读(245) 评论(0) 推荐(0)

下载进度条

摘要：python实现下载进度条案例2 延伸：正在加载...... 阅读全文

posted @ 2018-01-10 09:43 安迪9468 阅读(186) 评论(0) 推荐(0)

json数据处理：读取文件中的json字符串，转为python字典

摘要：方法1: 读取文件中的json字符串，再用json.loads转为python字典方法2：直接用文件游标f，将json字符串连同读取和转成python字典一步完成。此时用的是josn.load(f) 结论： json模块中的loads和load的区别是： loads是将f游标中的字符串先读取出阅读全文

posted @ 2018-01-09 18:20 安迪9468 阅读(15996) 评论(0) 推荐(1)

python执行命令行：python中执行shell命令行read结果

摘要：+++++++++++++++++++++++++++++ python执行shell命令1 os.system （只有这个方法是边执行边输出，其他方法是最后一次性输出）可以返回运行shell命令状态，同时会在终端输出运行结果例如 ipython中运行如下命令，返回运行状态status os.s 阅读全文

posted @ 2018-01-09 17:20 安迪9468 阅读(8847) 评论(0) 推荐(0)

format格式化输出

摘要：python格式化输出，format 它通过{}和:来代替%。通过位置字符串的format函数可以接受不限个参数，位置可以不按顺序，可以不用或者用多次，不过2.6不能为空{}，2.7才可以。通过关键字参数通过下标通过对象属性格式限定符它有着丰富的的“格式限定符”（语法是{}中带:号），比如：阅读全文

posted @ 2018-01-09 17:09 安迪9468 阅读(195) 评论(0) 推荐(0)

python操作mongodb

摘要：下载mongodb 启动mongodb服务安装python包 python操作mongodb 阅读全文

posted @ 2018-01-09 16:17 安迪9468 阅读(118) 评论(0) 推荐(0)

python操作redis

摘要：直接上代码：（带认证密码的redis连接） # 1、带认证密码。普通方式连接 import redis HOST = '192.168.1.123' PORT = '6379' POOL_NAME = 'redis_pool' PASSWORD = "123456" r = redis.Strict 阅读全文

posted @ 2018-01-09 16:06 安迪9468 阅读(218) 评论(0) 推荐(0)

批量生成缩略图

摘要：Python Imaging Library（PIL） Home：http://www.pythonware.com/products/pil/ Links：Wikipedia 这是一个很有名气的 Python 图像处理库，支持常见图像文件格式（BMP、JPG、GIF、PNG ...）。它可以对图阅读全文

posted @ 2018-01-09 15:25 安迪9468 阅读(183) 评论(0) 推荐(0)

python中操作mysql

摘要：import pymysql # 连接数据库 connect = pymysql.Connect( host='localhost', port=3306, user='root', passwd='root', db='python3', charset='utf8' ) # 获取游标 cursor = connect.cursor() # ... 阅读全文

posted @ 2018-01-02 17:38 安迪9468 阅读(131) 评论(0) 推荐(0)

正则匹配汉字文字

摘要：输出结果：小结：匹配汉字文字：匹配非汉字字符：匹配双字节字符（汉字、中文标点符号等）：阅读全文

posted @ 2017-12-20 10:08 安迪9468 阅读(41979) 评论(0) 推荐(2)

python 使用set对列表去重，并保持列表原来顺序

摘要：运行结果：输出结果：阅读全文

posted @ 2017-12-19 18:17 安迪9468 阅读(814) 评论(0) 推荐(0)

字符串转成时间戳

摘要：强烈推荐： 1、日期字串转为时间戳int：https://www.cnblogs.com/andy9468/p/12627534.html 2、时间戳转为日期字串：https://www.cnblogs.com/andy9468/p/12627597.html 3、比较2个时刻日期字串的时间差：ht 阅读全文

posted @ 2017-12-06 13:38 安迪9468 阅读(2169) 评论(0) 推荐(0)

随笔分类 - python demo库

公告