随笔分类 -  python爬虫

scrapy setting配置
摘要：AUTOTHROTTLE_START_DELAY = 3开始下载时限速并延迟时间 AUTOTHROTTLE_MAX_DELAY = 60高并发请求时最大延迟时间 AWS_ACCESS_KEY_ID它是用于访问亚马逊网络服务。默认值：无 AWS_SECRET_ACCESS_KEY它是用于访问亚马逊网络 阅读全文

posted @ 2020-06-18 16:41 灬菜鸟灬 阅读(619) 评论(0) 推荐(0)

xpath语法
摘要：一、xpath介绍 XPath 是一门在 XML 文档中查找信息的语言。XPath 用于在 XML 文档中通过元素和属性进行导航。 XPath 使用路径表达式在 XML 文档中进行导航 XPath 包含一个标准函数库 XPath 是 XSLT 中的主要元素 XPath 是一个 W3C 标准节点在 X 阅读全文

posted @ 2019-10-09 17:10 灬菜鸟灬 阅读(5733) 评论(0) 推荐(1)

导航