风-fmgao

导航

上一页 1 ··· 6 7 8 9 10 11 12 13 14 ··· 45 下一页

2019年2月21日

Elasticsearch增删改查

摘要: 面向文档 document数据格式 Java数据 数据库数据 Json数据 集群管理 green:每个索引的primary shard和replica shard都是active状态的yellow:每个索引的primary shard都是active状态的,但是部分replica shard不是ac 阅读全文

posted @ 2019-02-21 09:06 风-fmgao 阅读(1541) 评论(0) 推荐(1) 编辑

Elasticsearch聚合分析

摘要: 预先设置 在进行聚合分析的是皇后首先把文本的field的fielddata属性设置为true 计算每个tag下的商品数量 结果 包含yagao的商品,计算每个tag下的商品数量 先分组,再算每组的平均值,计算每个tag下的商品的平均价格 结果 计算每个tag下的商品的平均价格,并且按照平均价格降序排 阅读全文

posted @ 2019-02-21 08:54 风-fmgao 阅读(397) 评论(0) 推荐(0) 编辑

Elasticsearch分布式机制探究

摘要: Elasticsearch是一套分布式的系统,分布式是为了应对大数据量隐藏了复杂的分布式机制 分片机制 shard = hash(routing) % number_of_primary_shards Routing值可以是一个任意的字符串,默认情况下,它的值为存数数据对应文档 _id 值,也可以是 阅读全文

posted @ 2019-02-21 08:49 风-fmgao 阅读(188) 评论(0) 推荐(0) 编辑

Elasticsearch的JavaAPI

摘要: 获取客户端对象 ## 创建索引 新建文档 查询索引 更新文档 删除文档 查询所有 通配符查询 模糊查询 添加mapping 原文:http://hphblog.cn/2018/12/16/Elasticsearch%E7%9A%84JavaAPI/ 阅读全文

posted @ 2019-02-21 08:43 风-fmgao 阅读(401) 评论(0) 推荐(0) 编辑

2019年2月20日

Java虚拟机------JVM分析工具

摘要: 主要介绍JVM的分析工具: jps JVM分析工具-jmap1 jinfo jstack1 jstat jstat -gccapacity pid jvm分析工具-jconsole jvm分析工具-jmx jconsole和jvisualvm远程 阅读全文

posted @ 2019-02-20 16:25 风-fmgao 阅读(958) 评论(0) 推荐(0) 编辑

2019年2月15日

python-docx编辑word表格

摘要: 一、修改数据类型(中英) 需求: 代码: 二、数据类型为日期时,清空位数内容 需求: 代码: 三、表格中添加单元格 需求: 参考:https://www.jianshu.com/p/9da61bf35cb7 代码: 阅读全文

posted @ 2019-02-15 17:00 风-fmgao 阅读(18267) 评论(0) 推荐(0) 编辑

2019年1月22日

word_宏示例

摘要: 参考:https://jingyan.baidu.com/article/870c6fc3326588b03fe4beeb.html 内容自适应 表格修改(清除表格内容) 表格修改(修改表格内容) 比较表格中某列的值 阅读全文

posted @ 2019-01-22 16:31 风-fmgao 阅读(470) 评论(0) 推荐(0) 编辑

2018年12月26日

图像_pytesseract

摘要: 所需模块 ①安装PIL:pip install Pillow(之前的博客中有写过)②安装pytesser3:pip install pytesser3③安装pytesseract:pip install pytesseract④安装autopy3:先安装wheel:pip install wheel 阅读全文

posted @ 2018-12-26 09:13 风-fmgao 阅读(226) 评论(0) 推荐(0) 编辑

2018年12月19日

scrapy框架之分布式操作

摘要: 分布式概念 一.redis简单回顾 1.启动redis: mac/linux: redis-server redis.conf windows: redis-server.exe redis-windows.conf 2.对redis配置文件进行配置: - 注释该行:bind 127.0.0.1,表 阅读全文

posted @ 2018-12-19 11:19 风-fmgao 阅读(199) 评论(0) 推荐(0) 编辑

UA池和代理池在scrapy中的应用

摘要: 一.下载中间件 下载中间件(Downloader Middlewares) 位于scrapy引擎和下载器之间的一层组件。 - 作用: (1)引擎将请求传递给下载器过程中, 下载中间件可以对请求进行一系列处理。比如设置请求的 User-Agent,设置代理等 (2)在下载器完成将Response传递给 阅读全文

posted @ 2018-12-19 11:16 风-fmgao 阅读(475) 评论(0) 推荐(0) 编辑

上一页 1 ··· 6 7 8 9 10 11 12 13 14 ··· 45 下一页