上一页 1 ··· 57 58 59 60 61 62 63 64 65 ··· 67 下一页
摘要: 接下来的图表展现了Scrapy的架构,包括组件及在系统中发生的数据流的概览(绿色箭头所示)。 下面对每个组件都做了简单介绍,并给出了详细内容的链接。数据流如下所描述。 来源于https://scrapy chs.readthedocs.io/zh_CN/0.24/topics/architectur 阅读全文
posted @ 2018-09-23 21:55 hank-li 阅读(275) 评论(0) 推荐(0)
摘要: PyCharm默认会使用虚拟的Python解释器,即使没有安装也能够运行Python代码,但有强迫症的程序员一定不能忍受Project中存在这么多的文件目录 设置Python版本 File Settings Project Project Interpreter,设置本地安装的Python解释器版本 阅读全文
posted @ 2018-09-23 16:45 hank-li 阅读(60746) 评论(0) 推荐(1)
摘要: xms xmx相关参数设置 打开pycharm的安装目录 D:\PyCharm\PyCharm 2018.2.3\bin下文件pycharm.exe.vmoptions 修改默认(版本2016.2)的 server Xms128m Xmx512m 为 server Xms256m Xmx1024m 阅读全文
posted @ 2018-09-23 15:28 hank-li 阅读(8064) 评论(0) 推荐(1)
摘要: 代理地址最后验证日期:2017 8 28 "纯真" "66免费代理网" 推荐 "西刺免费代理IP" "酷伯伯HTTP代理" "快代理" "proxy360.cn" "站大爷" "Free Proxy List" "年少" 不稳定 "全网代理IP" "IP海" "每日代理" 渣渣 "360代理IP" 阅读全文
posted @ 2018-09-20 22:13 hank-li 阅读(2585) 评论(0) 推荐(0)
摘要: 1.Git 还在担心自己辛辛苦苦写的代码被误删了吗?还在担心自己改错了代码不能挽回吗?还在苦恼于多人开发合作找不到一个好的工具吗?那么用Git就对了,Git是一个开源的分布式版本控制系统,用以有效、高速的处理从很小到非常大的项目版本管理。有了它,代码托管不是问题,版本控制不再苦恼,多人开发变得简单易 阅读全文
posted @ 2018-09-16 00:18 hank-li 阅读(314) 评论(0) 推荐(0)
摘要: MongoDB 是目前在 IT 行业非常流行的一种非关系型数据库 (NoSql),其灵活的数据存储方式备受当前 IT 从业人员的青睐。这里主要讲如何在 Windows 平台下安装 MongoDB 下载 "MongoDB 官网下载链接" 如果被墙的话,请点击 "mongodb win32 x86_64 阅读全文
posted @ 2018-09-14 20:37 hank-li 阅读(187) 评论(0) 推荐(0)
摘要: 1.下载pip 地址:https://pypi.python.org/pypi/pip downloads 注意选择tar.gz压缩包,目前最新版本为9.0.1,这里选择的版本是:pip 9.0.1.tar.gz (md5, pgp) 点击:下载 2.解压安装 解压下载的压缩包至工作目录下(如D:\ 阅读全文
posted @ 2018-09-07 09:24 hank-li 阅读(16013) 评论(0) 推荐(0)
摘要: 今天为大家整理了23个Python爬虫项目。整理的原因是,爬虫入门简单快速,也非常适合新入门的小伙伴培养信心。所有链接指向GitHub,祝大家玩的愉快 1、WechatSogou [1]– 微信公众号爬虫。 基于搜狗微信搜索的微信公众号爬虫接口,可以扩展成基于搜狗搜索的爬虫,返回结果是列表,每一项均 阅读全文
posted @ 2018-09-07 09:09 hank-li 阅读(97528) 评论(0) 推荐(1)
摘要: 来源链接 https://blog.csdn.net/testcs_dn/article/details/45719357 读文件 读写文件是最常见的IO操作。Python内置了读写文件的函数,用法和C是兼容的。 读写文件前,我们先必须了解一下,在磁盘上读写文件的功能都是由操作系统提供的,现代操作系 阅读全文
posted @ 2018-09-05 21:16 hank-li 阅读(340) 评论(0) 推荐(0)
摘要: 函数:open() 1:作用:打开一个文件 2:语法: 3:参数说明: file: 要打开的文件名,需加路径(除非是在当前目录)。唯一强制参数 mode: 文件打开的模式 buffering: 设置buffer(取值为0,1, 1) encoding: 返回数据的编码(一般为UTF8或GBK) er 阅读全文
posted @ 2018-09-04 23:24 hank-li 阅读(4656) 评论(0) 推荐(0)
上一页 1 ··· 57 58 59 60 61 62 63 64 65 ··· 67 下一页