微博爬虫实践---搜索关键词
摘要:需求:指定搜索关键词,限定时间段、原创,抓取后存入EXcel或者Mysql 原理:模拟浏览器打开网址,输入关键词,python解析dom获取需要信息,存入excel或者mysql 技术点: 1.爬虫框架选取 BS4解析 2.模拟浏览器行为 python+selenium+Firefox 3.存档 e
阅读全文
posted @
2018-06-29 14:59
OnTest
阅读(1313)
推荐(0)
Sublime3使用问题汇总
摘要:【Sublime3】问题:Sublime Text3使用Package Control 报错There Are No Packages Available For Installation-->官方自带的包有问题,手动安装新包解决问题解决方案参考 >http://blog.csdn.net/feil
阅读全文
posted @
2018-05-16 10:46
OnTest
阅读(69)
推荐(0)
Python技术、爬虫、数据分析问题汇总【自用】
摘要:记录学习过程中遇到的一些问题,纯粹为了方便自己 @解决excel中sheet为中文提示acii乱码问题workbook = xlwt.Workbook(encoding = 'utf-8') #encoding 引入编码sheet = workbook.add_sheet(key,cell_over
阅读全文
posted @
2018-05-15 18:32
OnTest
阅读(483)
推荐(0)