摘要: 1. 动态网站的获取,通常以下两种办法: 通过分析网站,找到对应数据的接口,模拟接口去获取需要的数据(一般也推荐这种方式,毕竟这种方式的效率最高),但是很多网站的接口隐藏的很深,或者接口的加密非常复杂,导致无法获取到它们的数据接口,此种方法很可能就行不通。 借助JS内核,将获取到的含有JS脚本的页面 阅读全文
posted @ 2020-06-27 17:20 不雨 阅读(389) 评论(0) 推荐(0)
摘要: python3默认编码为unicode,由str类型进行表示。二进制数据使用byte类型表示。 字符串通过编码转换成字节码,字节码通过解码成为字符串 encode:str --> bytes decode:bytes --> str str = "我是Python3" str_utf8 = str. 阅读全文
posted @ 2020-06-26 14:36 不雨 阅读(213) 评论(0) 推荐(0)
摘要: 1. Scrapy使用了Twisted异步网络库来处理网络通讯,整体架构: Scrapy爬虫框架主要由5个部分组成,分别是:Scrapy Engine(Scrapy引擎),Scheduler(调度器),Downloader(下载器),Spiders(蜘蛛),Item Pipeline(项目管道)。爬 阅读全文
posted @ 2020-06-26 08:24 不雨 阅读(320) 评论(0) 推荐(0)
摘要: 1. Class 与 Style 绑定 :class :style</h2>绑定以后可以在method中动态调整style,例如首页背景的变化。2. css .slide 表示滑动.slide .opacity-full:after{ opacity: 1; /*滑动效果*/} 滑动过渡后,添加透明 阅读全文
posted @ 2020-06-22 11:17 不雨 阅读(165) 评论(0) 推荐(0)