240

公众号@卤蛋实验室,有关 Web Scraper 和爬虫的问题可关注提问

摘要:这是简易数据分析系列的第 9 篇文章。今天我们说说 Web Scraper 的一些小功能:自动控制 Web Scraper 抓取数量和 Web Scraper 的父子选择器。 阅读全文
posted @ 2019-08-07 08:40 卤代烃实验室 阅读(3188) 评论(0) 推荐(0) 编辑
摘要:这是简易数据分析系列的第 8 篇文章。今天我们讲的,就是利用 web scraper 里的 Element click 模拟点击「加载更多」按钮,去加载更多的数据。 阅读全文
posted @ 2019-08-01 08:21 卤代烃实验室 阅读(5524) 评论(0) 推荐(0) 编辑
摘要:这是简易数据分析系列的第 7 篇文章。今天我们要讲的是,如何利用 element selector,抓取多个网页里的多类信息。 阅读全文
posted @ 2019-07-24 11:13 卤代烃实验室 阅读(3976) 评论(0) 推荐(1) 编辑
摘要:今天我们说些轻松的,讲讲 Web Scraper 如何导出导入 Sitemap 文件。 阅读全文
posted @ 2019-07-18 08:00 卤代烃实验室 阅读(2127) 评论(0) 推荐(0) 编辑
摘要:这是简易数据分析系列的第 5 篇文章,今天会讲一些 web scraper 分页的内容,属于 web scraper 的高级技巧。我们要在原来的豆瓣电影 TOP250 Web Scraper 配置上做一些小改动,让爬虫把 250 条电影数据全部爬取下来。 阅读全文
posted @ 2019-07-09 08:14 卤代烃实验室 阅读(4712) 评论(0) 推荐(0) 编辑
摘要:这是简易数据分析系列的第 4 篇文章。今天我们开始数据抓取的第一课,完成我们的第一个爬虫。 阅读全文
posted @ 2019-07-03 21:17 卤代烃实验室 阅读(3830) 评论(0) 推荐(0) 编辑
摘要:作为普通的使用者,大家用浏览器就是查阅信息,浏览网页。但在开发者的眼里,Chrome 浏览器提供了非常强大的开发能力。通过这篇文章的学习,大家可以掌握一些浏览器开发的小知识(相信我,一点儿都不难),方便我们 Web Scraper 插件的后续学习。 阅读全文
posted @ 2019-06-27 08:21 卤代烃实验室 阅读(1898) 评论(0) 推荐(0) 编辑
摘要:web scraper 的好处有这几个:1. 门槛足够低,只要你电脑上安装了 Chrome 浏览器就可以用 2. 永久免费,无付费功能,无需注册 3. 操作简单,点几次鼠标就能爬取网页,真正意义上的 0 行代码写爬虫 阅读全文
posted @ 2019-06-25 10:03 卤代烃实验室 阅读(3615) 评论(0) 推荐(0) 编辑
摘要:数据量不大的分析需求,非互联网技术人士去学习一些编程知识其实性价比并不高。我们不如利用手头最常见的工具——Excel 和 浏览器,去分析去梳理数据,辅助进行思考和更好的决策。 阅读全文
posted @ 2019-06-23 11:56 卤代烃实验室 阅读(1263) 评论(1) 推荐(0) 编辑