花阴偷移

摘要： python的列表就相当于C#的Array数组 1.访问列表元素 bycycles=['trek','cannondale','redline','specialized'] print(bycycles) print(bycycles[0]) print(bycycles[-1]) 1)声明一个列 阅读全文

摘要： 一. 概述 Prometheus 是一个开源的服务监控系统和时间序列数据库。包括监控和告警，实现流式监控数据的收集、存储、查询、告警 ，它将指标收集并存储为时间序列数据库(time series data)。大多数 Prometheus 组件都是用Go编写的，这使得它们易于构建和部署为静态二进制文件 阅读全文

摘要： 1. print 打印 print("Hello Python world!") 2.变量 message = "Hello Python world!" print(message) 3.字符串 可以是单引号也可以是双引号 "This is a string." 'This is also a s 阅读全文

摘要： 1.安装elasticsearch-dsl 包 pip3 install elasticsearch-dsl 2.创建scrapy 项目 在项目结构中创建一个models文件夹, 有二个py文件，一个是__init__.py空文件,一个es操作的es_cnblogs.py文件 3. es_cnblo 阅读全文

摘要： 在vs 2019中做单元测试时，打了断点，启动调试无法进入，也没发现错误信息。解决方法如下： 在vs 2019 工具-->调试-->去掉 启用“仅我的代码” 再启动调试，就能看到内部错误，如下所示： 阅读全文

摘要： 1.设置代理可参考文章 https://blog.csdn.net/qq_42712552/article/details/88906955 2.在middlewares.py文件中设置 找到xxx_DownloaderMiddleware下载器中间件类,我创建的项目为scrapy_sample，所 阅读全文

摘要： 1. 首先设置scrapy断点，参考https://www.cnblogs.com/changbaishan/p/15880018.html, 下面是我的代码： mian.py 与scrapy.cfg在同一层级 from scrapy.cmdline import execute import os 阅读全文

摘要： 并发数可以在scrapy项目的settings.py文件中设置。 1.CONCURRENT_ITEMS 是指：最大并发项目数，默认100个。 2.CONCURRENT_REQUESTS 是指：下载器将执行的并发（即同时）请求的最大数量，默认16个。 3.CONCURRENT_REQUESTS_PER 阅读全文

摘要： 一. splash介绍 1.Splash 是一个带有 HTTP API 的 javascript 渲染服务。它是一个带有 HTTP API 的轻量级浏览器，使用 Twisted 和 QT5 在 Python 3 中实现。 2.Splash特点： 1)它快速、轻量且无状态，使其易于分发。 2)并行处理 阅读全文

摘要： scrapyd API接口，这里使用postman工具调用，每个接口都添加了scrapyd服务需要的Basic Auth类型用户名和密码。 1.daemonstatus.json接口 检查服务的负载状态 get请求，传参无 #get请求 http://120.xx.xxx.xxx:6800/daem 阅读全文