上一页 1 2 3 4 5 6 7 8 ··· 50 下一页

2023年7月11日

elasticsearch 索引重建实战

摘要: 一.介绍 索引结构一但创建好后,是无法直接修改索引字段类型的,也无法直接删除索引中某一个字段,也无法增加分片,要解决这些问题,只能索引重建。 新增字段是不需要索引重建的。 下面是索引重建的一个案例: 当时创建一个索引后,在运行一段时间,发现索引字段应该为keyword类型,而不应该是keyword和 阅读全文

posted @ 2023-07-11 15:27 花阴偷移 阅读(26) 评论(0) 推荐(0) 编辑

2023年7月10日

url参数值编码

摘要: 16. url参数路径编码 示例: AM95C60-20GC/30 为路径中一段,完整url:https://blog.csdn.net/AM95C60-20GC/30 ,如果这样访问将报404错误,转换代码后为AM95C60-20GC%2F30: import urllib urllib.pars 阅读全文

posted @ 2023-07-10 10:18 花阴偷移 阅读(5) 评论(0) 推荐(0) 编辑

2023年6月21日

docker 清空容器日志

摘要: 说明:docker默认情况下都是开启日志的, 容器运行一段时间后, 容器日志量也很大,当查看容器日志时(docker logs 1c1d1d7e9b26),大量日志也不好分析,又占存储量,需要清空,步骤如下: 1.查看所有容器 docker ps -a 2.找到容器目录位置 第二个cd是指容器id, 阅读全文

posted @ 2023-06-21 11:03 花阴偷移 阅读(9) 评论(0) 推荐(0) 编辑

elasticsearch bulk批量操作

摘要: 说明: 在做业务增删改时,有时批量执行比循环中单个执行性能要好很多,在es中有批量执行方法(除了script),如下(.net)代码: public BulkResponse BulkUpdate(List<IBulkOperation> bulkOperationList) { BulkReque 阅读全文

posted @ 2023-06-21 10:13 花阴偷移 阅读(98) 评论(0) 推荐(0) 编辑

2023年6月20日

curl 用法以及验证代理ip

摘要: 说明: 1)在程序中,使用代理ip请求目标网站时,有的网站会返回403或其它错误,这时可以通过命令方式来验证代理ip是否可用。 在linux中,使用curl ,下面使用阿布云代理ip请求目标网站,来确认是否能正确响应数据 curl -x "http://http-dyn.abuyun.com:902 阅读全文

posted @ 2023-06-20 11:08 花阴偷移 阅读(117) 评论(0) 推荐(0) 编辑

2023年6月8日

elasticsearch 子文档nested类型查询

摘要: 1.json 数据结构如下 { "took" : 3, "timed_out" : false, "_shards" : { "total" : 6, "successful" : 6, "skipped" : 0, "failed" : 0 }, "hits" : { "total" : { "v 阅读全文

posted @ 2023-06-08 18:05 花阴偷移 阅读(55) 评论(0) 推荐(0) 编辑

2023年6月5日

Elasticsearch 大量频繁使用UpdateByQuery 脚本更新字段值 报错

摘要: 下面是出错内容: WARNING:elasticsearch:POST http://es-cn-09k1o69vj0006jcz9.public.elasticsearch.aliyuncs.com:9200/crawl_basis_pn/_update_by_query [status:500 阅读全文

posted @ 2023-06-05 16:41 花阴偷移 阅读(154) 评论(0) 推荐(1) 编辑

2023年5月30日

python xml操作

摘要: 1) 导入import xml.etree.ElementTree as ET 2)需要一个xml文件(sensorexpert_brand.xml),结构如下所示: <?xml version="1.0" encoding="UTF-8"?> <response> <error>0</error> 阅读全文

posted @ 2023-05-30 10:16 花阴偷移 阅读(4) 评论(0) 推荐(0) 编辑

2023年5月26日

阿里云centos 磁盘扩容

摘要: 步骤1 进入阿里云 控制台 云服务器ecs,选择对应的实例,进入存储与快照 云盘, 扩容,按需求购买。 步骤2 远程连接实例,使用fdisk -l 查看是否存在,如下图所示: 购买的100G,已显示,需要挂载到某个Device中。 vda:代表系统盘,vda1 代表系统盘第1个分区,这里有三个分区, 阅读全文

posted @ 2023-05-26 16:25 花阴偷移 阅读(15) 评论(0) 推荐(0) 编辑

2023年5月18日

Elasticsearch 大量滚动查询 断路器报错

摘要: 在调用es api查询时,当使用游标滚动查询大批数据时, 或者深度分页总数超过10000条时, 或者其它查询时,可能报429错误(以 .net 的es客户端为例,见下面代码) var res = _esGoodsClient.Search(query, sort, pageindex, pagesi 阅读全文

posted @ 2023-05-18 10:59 花阴偷移 阅读(2) 评论(0) 推荐(0) 编辑

上一页 1 2 3 4 5 6 7 8 ··· 50 下一页

导航