随笔分类 -  python爬虫

• python爬虫与Django框架vue交互的前后端代码详情（励志人生网实例）
  摘要：Django(建表，配置一些的就不说了): class Jiayou(models.Model): # 建表以及字段名 zxn_title = models.CharField(max_length=500) zxn_brief = models.CharField(max_length=500) 阅读全文
  posted @ 2020-10-05 19:20 周晓楠 阅读(800) 评论(0) 推荐(1)
• 爬虫找工作之面试题（2）
  摘要：1.你写爬虫的时候都遇到过什么反爬虫措施，你是怎么解决的? 通过headers反爬虫：解决策略，伪造headers 基于用户行为反爬虫：动态变化去爬取数据，模拟普通用户的行为 通过动态更改代理ip来反爬虫 基于动态页面的反爬虫：跟踪服务器发送的ajax请求，模拟ajax请求,selnium 和pht 阅读全文
  posted @ 2020-10-05 19:13 周晓楠 阅读(299) 评论(0) 推荐(0)
• 爬虫找工作之面试题（1）
  摘要：#### 1.什么是爬虫并解释其概念？ ```python(1)爬虫又叫网页蜘蛛，是模拟人操作客户端向服务器发起请求，抓取数据的自动化程序或脚本(2)说明： ①模拟：用爬虫程序伪装出人的行为，避免被服务器识别为爬虫程序 ②客户端：浏览器、app都可以实现人与服务器之间的交互行为，应用客户端从服务器获 阅读全文
  posted @ 2020-10-05 19:11 周晓楠 阅读(244) 评论(0) 推荐(0)