02 2016 档案

python 写文件刷新缓存
摘要:搞爬虫的时候,结果是通过file.write(strs)写入文件的。 带来的问题是,进程如果是被杀死的时候,最后一条结果总是缺损的,因为缓存的部分还未写入文件。 解决办法是每次写入文件时,都刷新缓存,直接将缓存数据全部写入文件: fi = open('file', 'wb') fi.write('s 阅读全文

posted @ 2016-02-01 19:31 chybot 阅读(10307) 评论(0) 推荐(0)

python Popen卡死问题
摘要:程序经常卡死,定位了半天才定位到原因,原来是Popen导致的卡死; 程序如下: s = subprocess.Popen([*,*,*], stdout=subprocess.PIPE) ret = s.stdout.read() return ret 官方文档的解释是: This will dea 阅读全文

posted @ 2016-02-01 19:26 chybot 阅读(7679) 评论(0) 推荐(1)

nohup 日志切割
摘要:最近遇到日志切割的问题,即程序是通过命令: nohup python *.py & 放到后台执行的,这样程序的日志输出到了nohup自动生成的nohup.out文件。 问题就来了,nohup.out文件越来越大,如何清理它呢? 解决方法很简单: cat /dev/null > nohup.out 即 阅读全文

posted @ 2016-02-01 13:07 chybot 阅读(2781) 评论(0) 推荐(0)