淋哥 - 博客园

2017年6月30日

redis.windows.conf各项配置参数介绍（九）

摘要： # 默认情况下，redis不是在后台模式运行的，如果需要在后台进程运行，把该项的值更改为yes，默认为no daemonize：是否以后台daemon方式运行 # 如redis服务以后台进程运行的时候，Redis默认会把pid写入/run/redis.pid文件组，你可以配置到其他文件路径。 # 当阅读全文

posted @ 2017-06-30 10:37 淋哥阅读(2799) 评论(0) 推荐(0)

Python 爬虫js加密破解（一）爬取今日头条as cp 算法解密

摘要：今日头条 as cp算法解析，我们在提交的时候"as":"479BB4B7254C150", "cp":"7E0AC8874BB0985",就可以了，有兴趣的同学可以去看看他们的js代码，只是简单的对进行了加密 as cp 算法 Python 实现阅读全文

posted @ 2017-06-30 09:42 淋哥阅读(8185) 评论(0) 推荐(2)

Python 爬虫实例（2）—— 爬取今日头条

摘要：爬虫很简单，难的是自己去分析网页解析网页和爬虫的效率阅读全文

posted @ 2017-06-30 09:23 淋哥阅读(2077) 评论(0) 推荐(0)

Python 爬虫实例（1）—— 爬取百度图片

摘要：爬取百度图片在Python 2.7上运行阅读全文

posted @ 2017-06-30 09:19 淋哥阅读(1703) 评论(0) 推荐(0)

python 操作redis之——HyperLogLog （八）

摘要： #coding:utf8 import redis # python 操作redis之——HyperLogLog r =redis.Redis(host="33.23.724.12190",port=6222,password="666666") # 1.Pfadd 命令将所有元素参数添加到 Hyp 阅读全文

posted @ 2017-06-30 09:17 淋哥阅读(1541) 评论(0) 推荐(0)

python 操作redis之——有序集合(sorted set) （七）

摘要： #coding:utf8 import redis r =redis.Redis(host="23.226.74.190",port=63279,password="66666666666") 1.Zadd 命令用于将一个或多个成员元素及其分数值加入到有序集当中。如果某个成员已经是有序集的成员，那么阅读全文

posted @ 2017-06-30 09:14 淋哥阅读(21178) 评论(0) 推荐(3)

2017年6月23日

Python操作redis学习系列之（集合）set，redis set详解（六）

摘要： # -*- coding: utf-8 -*- import redis r = redis.Redis(host="126.56.74.190",port=639,password="66666666") 1. Sadd 命令将一个或多个成员元素加入到集合中，已经存在于集合的成员元素将被忽略。假如阅读全文

posted @ 2017-06-23 15:45 淋哥阅读(35218) 评论(0) 推荐(3)

2017年6月22日

Python操作redis系列之列表（list） (五)

摘要： # -*- coding: utf-8 -*- import redis r =redis.Redis(host="123.156.74.190",port=6379,password="66666666666") 1. Lpush 命令将一个或多个值插入到列表头部。如果 key 不存在，一个空列阅读全文

posted @ 2017-06-22 20:51 淋哥阅读(66755) 评论(0) 推荐(4)

Python操作redis系列以哈希(Hash)命令详解（四）

摘要： # -*- coding: utf-8 -*- import redis #这个redis不能用，请根据自己的需要修改 r =redis.Redis(host="123.56.74.190",port=6379,password="66666666666") 1. Hset 命令用于为哈希表中的字段阅读全文

posted @ 2017-06-22 14:37 淋哥阅读(41279) 评论(0) 推荐(2)

Python操作redis字符串(String)详解 (三)

摘要： # -*- coding: utf-8 -*- import redis #这个redis不能用，请根据自己的需要修改 r =redis.Redis(host="123.516.74.190",port=6379,password="6666666666") 1.SET 命令用于设置给定 key 的阅读全文

posted @ 2017-06-22 09:54 淋哥阅读(8535) 评论(0) 推荐(0)

2017年6月21日

redis学习（key）键，Python操作redis 键（二）

摘要： # -*- coding: utf-8 -*- import redis #这个redis 连接不能用，请根据自己的需要修改 r =redis.Redis(host="123.516.174.910",port=6379,password="11111608") 1. delete DEL 命令用于阅读全文

posted @ 2017-06-21 20:16 淋哥阅读(15065) 评论(0) 推荐(2)

2017年6月17日

数据库连接 UnicodeEncodeError: 'latin-1' codec can't encode character u'\u4eac' in position 0: ordinal not in range(256)，UnicodeEncodeError: 'latin-1' codec can't encode character

摘要：处理方法就是，设置连接和游标的charset为你所希望的编码，如utf8，连接数据库的时候加上 charset="utf8 阅读全文

posted @ 2017-06-17 21:16 淋哥阅读(1299) 评论(0) 推荐(0)

2017年6月15日

python 多线程示例

摘要：大家可以测试一下程序运行的时间阅读全文

posted @ 2017-06-15 21:11 淋哥阅读(268) 评论(0) 推荐(0)

2017年6月12日

python 日志的配置，python对日志封装成类，日志的调用

摘要：日志的输出结果：阅读全文

posted @ 2017-06-12 10:04 淋哥阅读(2812) 评论(1) 推荐(0)

2017年6月11日

Python根据系统环境配置日志，Python配置日志 Python logger

摘要：我们通常在写爬虫的时候，需要配置日志，但是有可能是在windows开发的，但是程序的运行环境可是是在Linux中，这时候我们就需要不停的更换日志的目录了但是我们可以实现通过判断不同的运行环境，来时间日志的配置例如：阅读全文

posted @ 2017-06-11 20:53 淋哥阅读(1157) 评论(0) 推荐(0)

Python的设计哲学

摘要： Beautiful is better than ugly. 优美胜于丑陋 Explicit is better than implicit. 明了胜于晦涩 Simple is better than complex. 简单胜过复杂 Complex is better than complicate 阅读全文

posted @ 2017-06-11 20:25 淋哥阅读(5795) 评论(0) 推荐(0)

2017年6月9日

Python2.X和Python3.X中的urllib区别

摘要：在Python2.X中使用import urllib2——对应的，在Python3.X中会使用import urllib.request，urllib.error。在Python2.X中使用import urllib——对应的，在Python3.X中会使用import urllib.request 阅读全文

posted @ 2017-06-09 13:57 淋哥阅读(1047) 评论(0) 推荐(0)

Python实现百度搜索并保存到本地示例，Python实现百度搜索

摘要：实现百度搜索并保存到本地User_Agent = 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.81 Safari/537.36' import urllib2 import urllib url = "https://www.baidu.com/s?wd=... 阅读全文

posted @ 2017-06-09 13:55 淋哥阅读(4213) 评论(0) 推荐(1)

2017年6月5日

Python时间，日期，时间戳之间转换，时间转换时间戳，Python时间戳转换时间，Python时间转换时间戳

摘要：注意事项： 1.Python的时间戳长度是10个数字，Java的长度是13个数字。我们在做时间戳转换的时候可以乘以一千或者除以一千 2. Python 中的 %Y-%m-%d %H:%M:%S 可以根据自己的需要进行修改本文链接：http://www.cnblogs.com/xuchunlin/ 阅读全文

posted @ 2017-06-05 19:24 淋哥阅读(6063) 评论(0) 推荐(2)

selenium 获得 cookie 信息

摘要： driver.get_cookies（）获得cookie信息 add_cookie(cookie_dict) 向cookie添加会话信息 delete_cookie(name) 删除特定(部分)的cookie delete_all_cookies() 删除所有cookie 阅读全文

posted @ 2017-06-05 19:17 淋哥阅读(551) 评论(0) 推荐(0)

django.db.utils.OperationalError: no such table: auth_user

摘要：关于使用django 首次创建超级管理员时，出现 django.db.utils.OperationalError: no such table: auth_user 错误阅读全文

posted @ 2017-06-05 19:15 淋哥阅读(8906) 评论(0) 推荐(8)

2017年4月27日

Python PhantomJS 爬虫示例

摘要： from selenium import webdriver# 请求url url = "https://auctions.freemansauction.com/auction-lot-detail/A%2Dplatinum%2Dand%2Ddiamond%2Dlorgnette%2C/1593+++++++2+/++989817" mydriver = webdriver.PhantomJ... 阅读全文

posted @ 2017-04-27 15:27 淋哥阅读(659) 评论(0) 推荐(0)

Python 爬虫去掉网页注释，去掉网页注释

摘要：我们可以去使用正则去过滤掉他们方法如下心得：用最简单的方法去解决复杂的问题阅读全文

posted @ 2017-04-27 15:27 淋哥阅读(2522) 评论(0) 推荐(0)

python3 django mysql 增删改查

摘要：使用Python的django框架连接数据库，操作数据库代码：在代码中看到 cursor执行完之后，执行close。想到diango的mysql连接是不是没有做连接池？带着这个疑问上网查看，发现果然有这方面的文档。后来看官网时发现： django最新版本已经包含了连接池，通过修改配置控制，官方文档阅读全文

posted @ 2017-04-27 15:19 淋哥阅读(2639) 评论(4) 推荐(0)

Python 爬虫实例（6）—— 爬取蚂蚁免费代理

摘要：数据库表sql语句：源代码：爬取效果：阅读全文

posted @ 2017-04-27 15:16 淋哥阅读(976) 评论(0) 推荐(0)

HTTPSConnectionPool(host='xxxxx', port=443): Max retries exceeded with url:xxxxxxxx (Caused by NewConnectionError('<urllib3.connect，Max retries exceeded with ，(Caused by NewConnectionError

摘要： http连接太多没有关闭导致的。 1、增加重试连接次数 requests.adapters.DEFAULT_RETRIES = 5 2、关闭多余的连接 s = requests.session() s.keep_alive = False 3、升级requests pip install --upg 阅读全文

posted @ 2017-04-27 15:12 淋哥阅读(31097) 评论(0) 推荐(1)

requests.exceptions.MissingSchema: Invalid URL 'xxxxxxxxxxxxx': No schema supplied. Perhaps you meant xxxxxxxxxxxxx

摘要： import requests session = requests.session() carProposalUrl = "www.caaaa.com.cn/aaaa/aaaaa/carProposalproposal.do" carProposalHeaders ={ "Accept":"tex 阅读全文

posted @ 2017-04-27 15:11 淋哥阅读(23784) 评论(1) 推荐(1)

2017年4月7日

redis安装和配置（一）

摘要： Redis 的官方下载站是http://redis.io/download 怎么安装 Redis 数据库呢？下面将介绍Linux 版本的安装方法步骤一: 下载Redis 下载安装包：wget http://redis.googlecode.com/files/redis-2.2.12.tar.gz 阅读全文

posted @ 2017-04-07 01:36 淋哥阅读(1107) 评论(0) 推荐(0)

Python zip Python zip函数

摘要：三：把字符串转换为元组的列表当两个字符串的长度不同时，zip会以最短序列的长度为准来截断所得到的元组列表输出结果是：[('a', '1'), ('b', '2'), ('c', '3'), ('d', '4')] 四：把元组转换为元组的列表输出结果是：[(1, 4, 7), (2, 5, 8 阅读全文

posted @ 2017-04-07 01:35 淋哥阅读(14888) 评论(0) 推荐(1)

Python 实现根据不同的程序运行环境存放日志目录，Python实现Linux和windows系统日志的存放

摘要：说明：在我们开发的时候，有时候是在windows系统下开发的代码，我们的生产环境是Linux系统，更新代码就需要修改日志的环境，本文实现了代码更新，不需要配置日志文件的目录，同样也可以延伸到ip地址阅读全文

posted @ 2017-04-07 01:35 淋哥阅读(720) 评论(0) 推荐(0)

英雄莫问出处,富贵当思缘由

公告