09 2019 档案

python采集websocket实时数据
摘要：之前大部分的数据采集基本都是http的，也一直对如何采集websocket的实时数据有疑问，不知道入从哪里入手，一筹莫展，今天在知乎上看到了一篇采集websocket的文章，讲的很透彻 终于把这个疑问解决了,详细可以看原文，图文分析的很明了。 Python如何爬取实时变化的WebSocket数据 阅读全文
posted @ 2019-09-30 14:55 kakaok 阅读(3108) 评论(0) 推荐(0)
ES date_histogram 聚合
摘要：如下 结果如下，拿到数据后方便进行图表分析，这样区间内连续的数据都可以看得很清晰 阅读全文
posted @ 2019-09-27 10:27 kakaok 阅读(1530) 评论(0) 推荐(0)
ES extended_stats 函数
摘要：在进行ES聚合分析的时候，发现了一个非常有用的函数,extended_stats，可以对聚合的结果进行更近一步的分析 ，常见的 count sum avg min max 等都可以一目了然 结果如下 阅读全文
posted @ 2019-09-27 10:07 kakaok 阅读(1937) 评论(0) 推荐(0)
python 制作影视动画、电影特效工具
摘要：一直觉得电影特效，动画制作这些都很什么，在google上搜索了下python开发电影特效的内容，发现了几个不错的软件，都支持python脚本开发. Houdini NUKE 学习python还可以玩转电影特效，影视合成，python的价值还需要更多人去开发发掘。 阅读全文
posted @ 2019-09-24 18:17 kakaok 阅读(4699) 评论(0) 推荐(1)
openpyxl 设置单元格颜色
摘要：在处理excel数据格式的时候，需要对特定单元格进行颜色标注，方便相关人员查看 醒目 # -*- coding: utf-8 -*- from openpyxl import load_workbook, Workbook# 导入字体、边框、颜色以及对齐方式相关库from openpyxl.styl 阅读全文
posted @ 2019-09-24 10:55 kakaok 阅读(11103) 评论(0) 推荐(0)
ES bulk 批量操作
摘要：bulk允许在一个请求中进行多个操作(create、index、update、delete)，也就是可以在一次请求裡做很多事情 也由于这个关系，因此bulk的请求体和其他请求的格式会有点不同 bulk的请求模板 分成action、metadata和doc三部份 action : 必须是以下4种选项之 阅读全文
posted @ 2019-09-17 16:29 kakaok 阅读(7199) 评论(0) 推荐(0)
docker-compose 编排文件小疑点
摘要：在学习docker-compose的时候，查看了下st2中的docker-compose.yml文件，有个地方没搞明白 env_file 制定的文件路径，一开始以为是在对应的容器中的conf目录中，但是进入容器后发现没有对应的目录 其实是跟docker-compose.yml 文件所在路径的conf 阅读全文
posted @ 2019-09-17 15:19 kakaok 阅读(199) 评论(0) 推荐(0)
ES7.x mapping 类型
摘要：在将ES从2.3 升级到7.3版本的过程中，mapping是一个过不去的坎，很多类型都发生了变化 7.x常用数据类型：text、keyword、number、array、range、boolean、date、geo_point、ip、nested、object 更多信息查看 https://blog 阅读全文
posted @ 2019-09-17 09:35 kakaok 阅读(3624) 评论(0) 推荐(0)