随笔分类 -  网络爬虫

网络爬虫：1、什么是网络爬虫，requests模块介绍及常用方法，response响应对象常用方法及编码问题，爬取视频和图片
摘要：网络爬虫 一、网络爬虫 什么是网络爬虫： 指程序在或联网上（各个网站），爬取数据（必须要在能够浏览的页面上才能爬取），然后通过清洗数据将需要的数据存入库中 爬虫的本质： 1、模拟http请求，向客户端发送请求，获取数据 2、网站内抓包 # 补充：百度其实就是一个大爬虫 -百度爬虫一刻不停的在互联网中 阅读全文
posted @ 2023-03-15 17:24 kangshong 阅读(294) 评论(0) 推荐(0)