09 2017 档案

通过转转项目的模仿学到的新东西
摘要：1使用代理ip 使用代理ip是非常有必要的，我就成功的被反爬虫了。方法如下 1建一个代理ip列表 daili_ip = [ 'ip:端口' 'ip:端口' 'ip:端口' ] 2通过radom方法在上面列表中随机获取ip every_ip = radom.chice(daili_ip) 最后将任意i 阅读全文
posted @ 2017-09-13 21:15 独善其身412 阅读(354) 评论(0) 推荐(0)
转转北京二手物品抓取
摘要：说实话在0基础的情况下自己学习python确实有点吃力，可能是我笨了吧，废话不说上代码 1抓取各栏目的链接 阅读全文
posted @ 2017-09-13 20:40 独善其身412 阅读(417) 评论(0) 推荐(0)
抓取小猪短租列表内容并保存在mongodb里
摘要：import pymongoimport requestsfrom bs4 import BeautifulSoupclient = pymongo.MongoClient('localhost',27017)xiaozhu = client['xiazhu']sheet_line = xiaozh 阅读全文
posted @ 2017-09-05 21:00 独善其身412 阅读(213) 评论(0) 推荐(0)
mongodb的一些简单操作
摘要：# import pymongo #导入pymongo库# client = pymongo.MongoClient('localhost',27017) 连接python与mongo数据库（localhost是本地）# walden = client['walden']给数据库起一个名字左边是在p 阅读全文
posted @ 2017-09-04 22:19 独善其身412 阅读(133) 评论(0) 推荐(0)