摘要: Python在用GPU跑模型的时候最好开多进程,因为很明显这种任务就是计算密集型的。 用进程池好管理,但是tensorflow默认情况会最大占用显存,尽管该任务并不需要这么多,因此我们可以设置显存的按需获取,这样程序就不会死掉了。 1. 按比例预留: tf_config = tensorflow.C 阅读全文
posted @ 2017-11-14 19:22 安阳小栈-客官歇会吧 阅读(4445) 评论(0) 推荐(0) 编辑
摘要: 1 set ts=4 2 set expandtab 3 set autoindent 1 set ts=4 2 set expandtab 3 set autoindent 1 set ts=4 2 set expandtab 3 set autoindent 阅读全文
posted @ 2017-10-14 17:11 安阳小栈-客官歇会吧 阅读(196) 评论(0) 推荐(0) 编辑
摘要: Answering this for late-comers because I don't think that the posted answers get to the root of the problem, which is the lack of locale environment v 阅读全文
posted @ 2017-10-12 11:29 安阳小栈-客官歇会吧 阅读(248) 评论(0) 推荐(0) 编辑
摘要: SET [GLOBAL | SESSION] TRANSACTION transaction_property [, transaction_property] ... transaction_property: ISOLATION LEVEL level | READ WRITE | READ ONLY level: REPEATABLE READ ... 阅读全文
posted @ 2017-10-12 10:40 安阳小栈-客官歇会吧 阅读(140) 评论(0) 推荐(0) 编辑
摘要: multiprocessing是python的多进程库,multiprocessing.dummy则是多线程的版本,使用都一样。 其中都有pool池的概念,进程池/线程池有共同的方法,其中方法对比如下 : There are four choices to mapping jobs to proce 阅读全文
posted @ 2017-10-10 14:13 安阳小栈-客官歇会吧 阅读(4153) 评论(0) 推荐(1) 编辑
摘要: 基本配置:阿里云服务器低配,单核2G内存 首先是看协程的效果: import requests import lxml.html as HTML import sys import time import gevent from gevent import monkey monkey.patch_a 阅读全文
posted @ 2017-10-09 16:34 安阳小栈-客官歇会吧 阅读(376) 评论(0) 推荐(0) 编辑
摘要: https://learngitbranching.js.org/ 阅读全文
posted @ 2017-10-06 15:35 安阳小栈-客官歇会吧 阅读(112) 评论(0) 推荐(0) 编辑
摘要: a = [] with open('douban.json','r') as f: for i in f.readlines(): a.append((i.encode('utf8').decode('unicode_escape'))) 阅读全文
posted @ 2017-10-06 11:26 安阳小栈-客官歇会吧 阅读(2047) 评论(0) 推荐(0) 编辑
摘要: # coding: utf-8 # ###jieba特性介绍 # 支持三种分词模式: # 精确模式,试图将句子最精确地切开,适合文本分析; # 全模式,把句子中所有的可以成词的词语都扫描出来, 速度非常快,但是不能解决歧义; # 搜索引擎模式,在精确模式的基础上,对长词再次切分,提高召回率,适合用于搜索引擎分词。 # 支持繁体分词。 # 支持自定义词典。 # MIT 授权协议。 # ###分... 阅读全文
posted @ 2017-09-19 13:54 安阳小栈-客官歇会吧 阅读(1933) 评论(1) 推荐(0) 编辑
摘要: 看图: 补充: 1. 最大保护模式在生产环境下一般不常用,于备库强耦合不仅拖累主库的性能,同时在强有力保护数据完整性和一致性的同时,也使得生产业务受到拖累,受环境影响比较大 2. 在要求性能高同时对数据安全要求没那么强就可以使用最大性能模式,实际上一般业务上都是使用这种模式的比较多 3. 如何在主库 阅读全文
posted @ 2017-09-14 11:07 安阳小栈-客官歇会吧 阅读(151) 评论(0) 推荐(0) 编辑