摘要: 该不该主动去联系多年未联系的老同学?看完这篇文章你再回答。 博主最近遇到一件很怪的事情,心中甚是郁闷。现将整个事情的经过以图文的形式展现出来,一是缓解一下心中的郁闷,而是给大家一个参考。 事情的经过是这样子的: 我无意间看到我一个高中同学发了一个状态,如下图所示,这个同学叫他小z好了,看到 阅读全文
posted @ 2018-05-16 19:26 水瓶座 阅读(5722) 评论(0) 推荐(0) 编辑
摘要: os.getcwd()、sys.path[0]、sys.argv[0]和__file__的区别 要分清这几个的区别与使用条件,实际测试一下是最准确的。 设计测试方法: 一个主模块用来运行,一个子模块用来被主模块调用 主模块路径: 子模块路径: 运行模块的路径: ok 现在编写两模块代码 子模块 s 阅读全文
posted @ 2018-04-08 18:37 水瓶座 阅读(3466) 评论(0) 推荐(1) 编辑
摘要: 多台linux主机之间设置免密通信 例:A 向 B设置免密通信 第一步 A生成密钥对 t 指定秘钥的类型 rsa 秘钥类型 密钥目录: (如果是root账户,注意:不同用户之间不共享密钥对) 私钥 钥匙 公钥 锁 第二步 编辑B主机root账户下(其他账户同理)认证文件 将之前A主机生成的公钥 内容 阅读全文
posted @ 2018-01-28 20:52 水瓶座 阅读(293) 评论(0) 推荐(0) 编辑
摘要: 网络爬虫的类型       网络爬虫按照实现的技术和结构可以分为通用网络爬虫、聚焦网络爬虫、增量式网络爬虫、深层网络爬虫等类型。在实际的网络爬虫中,通常是这几类爬虫的组合体。 通用网络爬虫(General Purpose Web Crawl 阅读全文
posted @ 2018-01-23 11:29 水瓶座 阅读(1053) 评论(0) 推荐(0) 编辑
摘要: (1)lambda lambda是Python中一个很有用的语法,它允许你快速定义单行最小函数。类似于C语言中的宏,可以用在任何需要函数的地方。 基本语法如下: 例如: (2)filter 函数相当于一个过滤器,函数原型为: ,表示对sequence序列中的每一个元素依次执行function,这里f 阅读全文
posted @ 2018-01-16 16:17 水瓶座 阅读(287) 评论(0) 推荐(0) 编辑
摘要: "感谢参考文:Python——深入理解urllib、urllib2及requests(requests不建议使用?)" 阅读全文
posted @ 2018-01-14 15:50 水瓶座 阅读(424) 评论(0) 推荐(0) 编辑
摘要: "python的模块(module)、包(package)、库(lib)的安装" "python中module,packages,lib的概念总结" 阅读全文
posted @ 2018-01-12 14:49 水瓶座 阅读(549) 评论(0) 推荐(0) 编辑
摘要: 深度爬取之rules CrawlSpider使用rules来决定爬虫的爬取规则,并将匹配后的url请求提交给引擎。所以在正常情况下,CrawlSpider不需要单独手动返回请求了。 在rules中包含一个或多个Rule对象,每个Rule对爬取网站的动作定义了某种特定操作,比如提取当前相应内容里的特定 阅读全文
posted @ 2018-01-11 16:10 水瓶座 阅读(282) 评论(0) 推荐(0) 编辑
摘要: 相信很多人第一次见到这个__all__都很好奇,他有什么作用 那他到底有什么作用呢? 先上代码 上述代码来自 组件的 模块,代码中出现了三个类, ,模块结尾用了 __all__ = ['SpiderQueue','SpiderPriorityQueue', 'SpiderStack'] 这里的意思是 阅读全文
posted @ 2018-01-11 15:22 水瓶座 阅读(196) 评论(0) 推荐(0) 编辑
摘要: "python内置函数解读链接" 阅读全文
posted @ 2018-01-11 11:35 水瓶座 阅读(109) 评论(0) 推荐(0) 编辑