随笔分类 -  Elasticsearch

• Elasticsearch、MongoDB和Hadoop比较
  摘要：IT界在过去几年中出现了一个有趣的现象。很多新的技术出现并立即拥抱了“大数据”。稍微老一点的技术也会将大数据添进自己的特性，避免落大部队太远，我们看到了不同技术之间的边际的模糊化。假如你有诸如Elasticsearch或者Solr这样的搜索引擎，它们存储着JSON文档，MongoDB存着JSON文档 阅读全文
  posted @ 2017-01-24 22:45 二郎神 阅读(1151) 评论(0) 推荐(1)
• linux 启动ES
  摘要：1.启动ES：sh elasticsearch 阅读全文
  posted @ 2017-01-23 17:59 二郎神 阅读(7121) 评论(2) 推荐(0)
• 如何把数据快速批量添加到Elasticsearch中
  摘要：问题来源 最近新做一个项目，有部分搜索比较频繁的数据，而且量级比较大，预计一两年时间很可能达到100G，项目要求不要存在数据库中，最终出来有两个方案，一个是使用Protocol Buffers存储在文件上，另外就是存在Elasticsearch中，也方便搜索，但这两个方案需要验证，到底哪个方案好，从 阅读全文
  posted @ 2017-01-18 18:27 二郎神 阅读(851) 评论(0) 推荐(0)
• Kibana基本使用
  摘要：现在你已经安装了Kibana，现在你一步步通过本教程快速获取Kibana核心功能的实践经验。学习完本教程，你将： 1.加载案例数据到你安装的Elasticsearch中 2. 定义至少一个索引匹配模式 3.使用Discover功能探索你的数据 4.建立一个visualization图形化地展示你的数 阅读全文
  posted @ 2017-01-18 18:25 二郎神 阅读(1888) 评论(0) 推荐(0)
• TF-IDF及其算法
  摘要：概念 TF-IDF（term frequency–inverse document frequency）是一种用于资讯检索与资讯探勘的常用加权技术。TF-IDF是一种统计方法，用以评估一字词对于一个文件集或一个语料库中的其中一份文件的重要程度。字词的重要性随着它在文件中出现的次数成正比增加，但同时会 阅读全文
  posted @ 2017-01-18 13:31 二郎神 阅读(395) 评论(0) 推荐(0)
• Elasticsearch 2.x.x版本如何安装bigdesk
  摘要：ES插件BigDesk安装 bigdesk支持的最新版本的ES是1.3.0 ... 1.3.x 然而想要在新版本ES上安装（2.x.x），项目中遇到过一些BUG，在ES在最新版本中有修复，所以采用了2.3.0的版本 head插件查看数据和集群其他一些挺方便，但是对集群状况监控不够细致，而且使用中有一 阅读全文
  posted @ 2017-01-17 22:31 二郎神 阅读(590) 评论(0) 推荐(0)
• ElasticSearch之常用插件安装命令
  摘要：#head监控安装，推荐 bin/plugin -install mobz/elasticsearch-head #bigdesk集群状态，推荐 bin/plugin -install lukas-vlcek/bigdesk #kopf插件 bin/plugin -install lmenezes/ 阅读全文
  posted @ 2017-01-17 22:11 二郎神 阅读(1355) 评论(0) 推荐(1)
• ELK_Elastic Search和kibana版本对应关系
  摘要：https://www.elastic.co/downloads/past-releases/kibana-5-0-0 https://www.elastic.co/downloads/past-releases/kibana-4-6-2 https://www.elastic.co/downloa 阅读全文
  posted @ 2017-01-17 21:35 二郎神 阅读(7117) 评论(0) 推荐(0)
• ElasticSearch 5.0及head插件安装
  摘要：ElasticSearch 5.0及head插件安装 plugin install mobz/elasticsearch-head ElasticSearch 5.0及head插件安装 本文主要介绍elasticsearch5.0安装及head插件安装。确保系统已经安装好jdk1.8.0_73以上， 阅读全文
  posted @ 2017-01-17 16:40 二郎神 阅读(9756) 评论(0) 推荐(2)
• 安装Elasticsearch5.0 部署Head插件
  摘要：5.0版本的ES跟之前的版本最大的不同之处就是多了很多环境的校验，比如jdk,max-files等等。 设置内核参数 设置资源参数 修改elasticsearch的参数 修改一下es使用的参数： 注意，设置参数的时候:后面要有空格！ 安装部署head 第一步，安装git 需要从github上面下载代 阅读全文
  posted @ 2017-01-17 16:06 二郎神 阅读(4811) 评论(3) 推荐(1)
• Elasticsearch 5.1.1 head插件安装指南
  摘要：一、下载安装包 下载Elasticsearch 5.1.1 下载地址:https://www.elastic.co/downloads/elasticsearch zip和tar格式是各种系统都通用的，解压之后启动Elasticsearch即可。 下载elasticsearch-head 下载地址: 阅读全文
  posted @ 2017-01-17 16:05 二郎神 阅读(5328) 评论(0) 推荐(0)
• 使用logstash+elasticsearch+kibana快速搭建日志平台
  摘要：https://www.loggly.com/ 日志的分析和监控在系统开发中占非常重要的地位，系统越复杂，日志的分析和监控就越重要，常见的需求有: 根据关键字查询日志详情 监控系统的运行状况 统计分析，比如接口的调用次数、执行时间、成功率等 异常数据自动触发消息通知 基于日志的数据挖掘 很多团队在日 阅读全文
  posted @ 2017-01-17 14:26 二郎神 阅读(2082) 评论(1) 推荐(0)
• [翻译]Elasticsearch重要文章之二：堆内存的大小和swapping
  摘要：Elasticsearch默认安装后设置的内存是1GB，对于任何一个业务部署来说，这个都太小了。如果你正在使用这些默认堆内存配置，你的集群配置可能有点问题。 这里有两种方式修改Elasticsearch的堆内存（下面就说内存好了），最简单的一个方法就是指定ES_HEAP_SIZE环境变量。服务进程在 阅读全文
  posted @ 2017-01-11 08:51 二郎神 阅读(1746) 评论(0) 推荐(1)
• ElasticSearch大数据分布式弹性搜索引擎使用
  摘要：阅读目录： 1.背景 两年前有机会接触过elasticsearch，但是未做深入学习，只是工作中用到了。越来越发现es是个不错的好东西，所以花了点时间好好学习了下。在学习过程中也发现了一些问题，网上大多资料都很零散，大部分都是实验性的demo，很多问题并没有讲清楚也并没有系统的讲完整一整套方案，所以 阅读全文
  posted @ 2017-01-09 16:32 二郎神 阅读(1349) 评论(1) 推荐(1)
• Elasticsearch 字段数据类型
  摘要：Elasticsearch 可以支持单个document中含有多个不同的数据类型。 字符型（String datatype）：string 数字型（Numeric datatypes）：long：64位存储 , integer：32位存储 , short：16位存储 , byte：8位存储 , do 阅读全文
  posted @ 2017-01-04 21:28 二郎神 阅读(12690) 评论(0) 推荐(0)
• Elasticsearch mapping
  摘要：//设置mapping Put: http://192.168.1.102:9200/indexName //修改mapping Put: http://192.168.1.102:9200/indexName/typeName/_mapping/ 阅读全文
  posted @ 2017-01-04 21:09 二郎神 阅读(294) 评论(0) 推荐(0)
• ES 集群
  摘要：http://www.cnblogs.com/o-andy-o/p/5067184.html http://www.cnblogs.com/o-andy-o/p/5067184.html 阅读全文
  posted @ 2016-12-22 11:29 二郎神 阅读(218) 评论(0) 推荐(0)
• lucene和ElasticSearch基本概念
  摘要：lucene基本概念 索引(Index) 对应一个倒排表，一个检索的基本单位。在lucene中就对应一个目录。 lucene基本概念 段(Segment) 一个索引可以包含多个段，段与段之间是独立的，添加新文档可以生成新的段，不同的段可以合并。段是索引数据存储的单元。 文档(Document) •文 阅读全文
  posted @ 2016-12-20 23:49 二郎神 阅读(8504) 评论(0) 推荐(0)
• ElasticSearch 2 (10) - 在ElasticSearch之下（深入理解Shard和Lucene Index）
  摘要：摘要 从底层介绍ElasticSearch Shard的内部原理，以及回答为什么使用ElasticSearch有必要了解Lucene的内部工作方式？ 了解ElasticSearch API的代价 构建快速的搜索应用 不要任何时候都commit 何时使用Stored Fields和Document V 阅读全文
  posted @ 2016-12-20 23:48 二郎神 阅读(817) 评论(0) 推荐(0)
• ES 聚合函数
  摘要：https://segmentfault.com/a/1190000004466154#articleHeader0 http://www.cnblogs.com/didda/p/5485681.html http://blog.csdn.net/dm_vincent/article/details 阅读全文
  posted @ 2016-12-15 11:19 二郎神 阅读(283) 评论(0) 推荐(0)