摘要：
软件运行环境是什么？ python 3.50 -- 解释器 scrapy库 -- 爬虫框架 pymsql库 -- 连接mysql数据库 pillow库 -- 下载图片 目标网站是什么？ 伯乐在线：http://blog.jobbole.com/ 所有的技术文章 需要爬取哪些数据？ 文章对应的url 阅读全文
posted @ 2017-07-21 21:50
梦_鱼
阅读(218)
评论(0)
推荐(0)
摘要：
如何爬取？ 明确目标：爬取百度百科，定初始百度词条：python，初始URL：http://baike.baidu.com/item/Python，爬取数据量为1000条，值爬取简介，标题，和简介中url 怎么爬： 利用谷歌开发工具，分析html结构，分析查询层次与方法 怎么写： 面向过程和面向对象两个方向环境声明： python 3.50 requests 库 beautifuls... 阅读全文
posted @ 2017-07-17 13:14
梦_鱼
阅读(684)
评论(0)
推荐(0)
摘要：
如何用python爬取校花图片并保存到本地来？ 1. 获取什么数据? 校花名字 name 校花所在学校 school 校花图片的url img_ulr 2.如何获取？ 打开网页http://www.xiaohuar.com/hua/ ，打开开发工具，研究每一张图片对应的html，找规律 通过pyth 阅读全文
posted @ 2017-07-16 22:26
梦_鱼
阅读(493)
评论(0)
推荐(0)
摘要：
猜年龄，有三次机会，如何做？ 1. 检查 输入的数据是否合法，通过异常try来处理，并记录 输入错误次数 2. 通过累加器，判断是否猜了3次，并提示还剩余多少的机会 3. 当3次错误，跳出 猜年龄进阶 猜年龄，并且记录最近5次猜的数据，并保存下来，下次打开程序，历史记录依旧保存 阅读全文
posted @ 2017-07-16 13:09
梦_鱼
阅读(361)
评论(0)
推荐(0)
摘要：
如何计算1+……+100中偶数和？ 1. 把奇数去掉，通过if，判断累加数除以2的余数，是否为1，判断是否是奇数 2. 通过continue 跳过对奇数的累加 #!/usr/bin/python3 def sum_go(sum_to): '''计算1+……+100中偶数和''' count = 0 sum_all = 0 while count <= su... 阅读全文
posted @ 2017-07-16 12:46
梦_鱼
阅读(2594)
评论(0)
推荐(0)
摘要：
逻辑思路是什么？ 1. 获取页面 2. 处理页面，提取信息 3. 格式输出 先走面向过程编程： 1. 要定义3个函数，对应以上三个过程 2. 在__main__函数中传入参数，并执行以上三个过程 如何走向面向对象？ 1. 输入： url ？+ 想要获得几条信息？ 2. 输出： 格式化信息 3. 对于 阅读全文
posted @ 2017-07-16 10:25
梦_鱼
阅读(268)
评论(0)
推荐(0)
摘要：
什么是爬虫？ 从互联网的一些相关网站获得一些相关公布在网页上展现的数据，一种免费获取数据的方式,，但商家并不希望有人获取该数据，会反爬虫 获得哪些数据？ 图片，视频，文字信息 购物网站：商品图片 商品名字 商品价格 商品描叙 商品评价数 商店名字 爬虫运行的逻辑？ 1. 获取html页面 2. 解析 阅读全文
posted @ 2017-07-07 15:42
梦_鱼
阅读(150)
评论(0)
推荐(0)
摘要：
什么是慢日志查询？ -- 配置自动记录慢日志 -- 查看慢日志 如何配置慢日志？ 默认关闭 set_query_log = ON ON 表示开启，OFF关闭 long_query_tome = 2 slow_query_log_file = 目录 log_queries_not_using_inse 阅读全文
posted @ 2017-06-13 22:15
梦_鱼
阅读(135)
评论(0)
推荐(0)
摘要：
找数据有哪些方式？ -- 全表扫描，但是当数据量达到几万以上，查询速度就慢了 什么是索引？ -- 相当于书的目录，便于查找，索引指向字段， -- mysql使用 B+tree 索引，本质上是二叉树 索引有哪些分类？ -- 普通：单列做索引，只能帮助查找 -- 唯一：单列增加唯一约束，只能设一个Nul 阅读全文
posted @ 2017-06-13 22:12
梦_鱼
阅读(289)
评论(0)
推荐(0)
摘要：
什么是函数？ -- 内置函数和python内置函数类似，又被称为字符函数 -- 自定义函数 如何执行？ select char_length(str),length(str) -- 字符长度，字节长度 -- concat(str_1,str_2) -- 拼接 “str_1str_2” -- inse 阅读全文
posted @ 2017-06-13 22:07
梦_鱼
阅读(143)
评论(0)
推荐(0)
浙公网安备 33010602011771号