2020年10月14日

爬虫工程师也应该会的 NodeJS 知识(一)

摘要: 爬虫工程师也应该会的 NodeJS 知识(一) 转载自https://mp.weixin.qq.com/s/ZKxfTotx9HAGj-em47kMEw NodeJS 是什么? Node.js 是基于 “ Chrome V8 引擎 ” 的 JavaScript 运行环境 V8 引擎是一款专门解释和执 阅读全文

posted @ 2020-10-14 17:29 lbky 阅读(118) 评论(0) 推荐(0) 编辑

2020年5月26日

网站加密和混淆技术总结

摘要: 转载自https://mp.weixin.qq.com/s/NAZv4OjZjqgz8Lcef06syg 我们在爬取网站的时候,经常会遇到各种各样类似加密的情形,比如说: 某个网站的 URL 带有一些看不太懂的长串加密参数,要抓取就必须要懂得这些参数是怎么构造的,否则我们连完整的 URL 都构造不出 阅读全文

posted @ 2020-05-26 09:47 lbky 阅读(1710) 评论(0) 推荐(0) 编辑

2019年9月23日

ip地址

摘要: https://www.cnblogs.com/duzhaoqi/p/7471491.html 阅读全文

posted @ 2019-09-23 15:51 lbky 阅读(133) 评论(0) 推荐(0) 编辑

2019年8月23日

索引

摘要: 1、创建索引 CREATE INDEX lindex on table_name(`姓名`) 2、删除索引 DROP INDEX lindex on table_name 3、查看已创建的索引 show index from table_name 4、查看sql是否使用索引 EXPLAIN sql 阅读全文

posted @ 2019-08-23 11:07 lbky 阅读(107) 评论(0) 推荐(0) 编辑

go try。。。catch

摘要: package mainimport "fmt"func main() { item := []int{1, 2, 4, 0, 8} for _, val := range item { calcu(val) }}func calcu(val int) { defer func() { err := 阅读全文

posted @ 2019-08-23 10:33 lbky 阅读(246) 评论(0) 推荐(0) 编辑

2019年8月20日

python常见问题

摘要: 1、 __new__.__init__区别,如何实现单例模式,有什么优点 __new__是一个静态方法,__init__是一个实例方法__new__返回一个创建的实例,__init__什么都不返回__new__返回一个cls的实例时后面的__init__才能被调用当创建一个新实例时调用__new__ 阅读全文

posted @ 2019-08-20 13:16 lbky 阅读(304) 评论(0) 推荐(0) 编辑

2019年8月19日

python实现发布订阅

摘要: 订阅者: 阅读全文

posted @ 2019-08-19 17:18 lbky 阅读(1951) 评论(0) 推荐(0) 编辑

python实现观察者模式

摘要: class Receptionist(): def __init__(self): self.observes=[] self.status='' def attach(self,observe): self.observes.append(observe) def notify(self): fo 阅读全文

posted @ 2019-08-19 16:55 lbky 阅读(733) 评论(0) 推荐(0) 编辑

2019年8月8日

python实现工厂模式

摘要: 工厂模式是一个在软件开发中用来创建对象的设计模式。 工厂模式包涵一个超类。这个超类提供一个抽象化的接口来创建一个特定类型的对象,而不是决定哪个对象可以被创建。 为了实现此方法,需要创建一个工厂类创建并返回。 当程序运行输入一个“类型”的时候,需要创建于此相应的对象。这就用到了工厂模式。在如此情形中, 阅读全文

posted @ 2019-08-08 16:56 lbky 阅读(3590) 评论(0) 推荐(0) 编辑

文本相似度

摘要: 简单讲解 基于关键词的空间向量模型的算法,将用户的喜好以文档描述并转换成向量模型,对商品也是这么处理,然后再通过计算商品文档和用户偏好文档的余弦相似度。 文本相似度计算在信息检索、数据挖掘、机器翻译、文档复制检测等领域有着广泛的应用。 比如舆论控制,我们假设你开发了一个微博网站,并且已经把世界上骂人 阅读全文

posted @ 2019-08-08 16:15 lbky 阅读(1015) 评论(0) 推荐(0) 编辑

导航