摘要: import requests from lxml import etree def city_page(base_url): url = base_url+'post/' headers={ 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x 阅读全文
posted @ 2020-03-23 09:13 momingQI 阅读(404) 评论(0) 推荐(0)
摘要: 1 import requests 2 # 导入lxml使用xpath提取数据 3 from lxml import etree 4 def douban_movies(m_type,nums): 5 ''' 6 豆瓣电影排行榜爬取 7 ''' 8 9 url = "https://movie.do 阅读全文
posted @ 2020-03-23 09:10 momingQI 阅读(713) 评论(0) 推荐(0)
摘要: 1 # from urllib import request,parse 2 import requests 3 import time 4 import random 5 import hashlib 6 import json 7 class YouDao(): 8 ''' 9 salt: i 阅读全文
posted @ 2020-03-23 09:08 momingQI 阅读(473) 评论(0) 推荐(0)
摘要: ##爬虫 -通用网络爬虫 其的主要目的是将互联网上的资源下载到本地形成一个镜像备份。类似百度等搜索引擎 -聚焦爬虫 其面向特定需求的爬虫程序,与通用爬虫的区别在于对数据进行筛选尽量爬取相关数据 -爬虫优化 1.尽量减少请求次数 2.web页面不好爬取时爬app和h5页面(手机) ##HTTP和HTT 阅读全文
posted @ 2020-03-23 09:05 momingQI 阅读(552) 评论(0) 推荐(0)
摘要: 变量 在Java中所有变量必须先声明后使用。 变量是申请一块内存来存储值。当创建变量的时候,需要在内存中申请空间。内存管理系统根据变量的类型为变量分配存储空间,分配的空间只能用来储存该类型数据。 按数据类型划分: 8种基本数据类型,引用数据类型 按作用域来划分: 可分为类变量,成员变量,局部变量 8 阅读全文
posted @ 2019-07-03 16:08 momingQI 阅读(193) 评论(0) 推荐(0)
摘要: 二进制转换为十进制: 按权相加 1 例如:二进制数1101.01转化成十进制 1101.01(2)= 2 1*2^0+0*2^1+1*2^2+1*2^3 +0*2^-1+1*2^-2=1+0+4+8+0+0.25=13.25(10) 3 再比如:二进制数100011转成十进制数可以看作这样: 4 数 阅读全文
posted @ 2019-07-02 23:02 momingQI 阅读(619) 评论(0) 推荐(0)
摘要: 1- 什么是栈? 一个栈是一个项的有序集合。添加项和移除项都在同一端,这一端被称为‘栈顶’。另一端被称为‘栈底’。 栈使用的是后进先出原则即‘LIFO’原则,也就是说最新添加的项在移除时是第一个被移除的。在日常生活中有很多例子比如说在餐厅中有一堆餐盘,我们拿走的是最顶上的一个,排在我们后面的人将拿走 阅读全文
posted @ 2018-12-20 22:12 momingQI 阅读(401) 评论(0) 推荐(0)
摘要: 在了解装饰器之前,我们必须了解闭包是什么? 如果在一个函数中又定义一个函数,那么又定义的这个函数被称为内部函数,而原本的函数被称为外部函数。 而闭包的概念就是在外部函数中定义了一个内部函数,并且在内部函数中调用了外部函数的变量,最后外部函数的返回值是内部函数的引用。 闭包例子: 1 #闭包的实例 2 阅读全文
posted @ 2018-12-20 14:07 momingQI 阅读(164) 评论(0) 推荐(0)
摘要: 在函数内部,可以调用其他函数。如果一个函数在内部调用本身,这个函数就是递归函数。比如计算阶乘n! = 1 x 2 x 3 x ... x n,用函数func(n)表示,于是,func(n)用递归的方式写出来就是: def func(n): if n == 1: return 1 return fun 阅读全文
posted @ 2018-12-19 20:58 momingQI 阅读(178) 评论(0) 推荐(0)
摘要: 格式化输出有两种%和format函数 format的功能要比百分号方式强大。%用法的格式 1 s1 = "i am %s,%d years old" % ('jeck',26) #按位置顺序依次输出 2 s2 = "i am %(name)s, i am %(age)d years old" % { 阅读全文
posted @ 2018-12-19 14:17 momingQI 阅读(154) 评论(0) 推荐(0)