随笔分类 -  爬虫

摘要:卷积神经网络&&爬虫实现网易新闻自动爬取并分类项目地址采用THUCnews全部数据集进行训练,效果如下。 详细实现见./text_classification部署步骤如下:运行环境服务器:Ubuntu 16.04 数据库:Mysql 5.6 python:A... 阅读全文
posted @ 2018-05-13 23:22 mlzc 阅读(403) 评论(0) 推荐(0)
摘要:爬虫基本介绍1. 什么是爬虫?爬虫是请求⽹网站并提取数据的⾃自动化程序2. 爬虫的基本流程发起请求 通过HTTP库向目标站点发起请求,即发送一个Request,请求可以包含额外的headers等信息,等待服务器器响应。解析内容 如果服务器能正常响应,会得到一... 阅读全文
posted @ 2018-04-16 00:49 mlzc 阅读(572) 评论(0) 推荐(0)