随笔分类 -  ELK

sparksql 练习题两道
摘要：第一题：select '{"id":1,"name":{"url":"http://xxx/yyy/zz/test.js"}}'##1 获取 //xxx/yyy/zz/test.js中的 xxx和 js ##2 获取 ip地址中的第一组数字 #### method 1 select split(ge 阅读全文

posted @ 2019-12-26 21:59 tneduts 阅读(952) 评论(0) 推荐(0)

记录一次代码错误，elastic search的INDEX需要使用小写字母
摘要：Caused by: org.elasticsearch.hadoop.EsHadoopIllegalArgumentException: Cannot determine write shards for [CC-2017.01.24/compliance]; likely its format 阅读全文

posted @ 2017-01-24 19:34 tneduts 阅读(2297) 评论(1) 推荐(0)

elasticsearch 集群搭建
摘要：需要编辑的文件是config/elasticsearch.yml文件 需要配置的项目有： # Use a descriptive name for your cluster: # cluster.name: Hadoop # # ------------------------------------ Node ------------------------------------ ... 阅读全文

posted @ 2016-02-29 22:57 tneduts 阅读(602) 评论(1) 推荐(0)

ELK日志解决方案安装配置与使用
摘要：官方网站：https://www.elastic.co/products/elasticsearch logstash,elasticsearch,kibana作用如下： logstash:分布在每一台需要采集数据的节点上，需要一个配置文件来获取数据，输入主要支持file,输出支持gangalia，nagios,kafka,elasticsearch. 而且可以简单地配置，就可以把数据结构化... 阅读全文

posted @ 2015-12-25 16:55 tneduts 阅读(825) 评论(0) 推荐(0)

导航