2017年11月29日
Java爬虫框架WebMagic入门——爬取列表类网站文章
摘要： 初学爬虫，WebMagic作为一个Java开发的爬虫框架很容易上手，下面就通过一个简单的小例子来看一下。 WebMagic框架简介 WebMagic框架包含四个组件，PageProcessor、Scheduler、Downloader和Pipeline。 这四大组件对应爬虫生命周期中的处理、管理、下 阅读全文
posted @ 2017-11-29 10:29 没课割绿地 阅读(31111) 评论(27) 推荐(10) 编辑