上一页 1 ··· 117 118 119 120 121 122 123 124 125 ··· 234 下一页

2019年8月3日

合理设置redis主从buffer 不错

摘要: 背景 某次抢购时,一个redis集群的某个分片,从实例响应时间陡增到几十秒,报警后运维将其中一个本应该下线的slave下掉,问题减轻但没有解决,又把另一个正常的slave下线掉,问题消失。 master日志 09:59:11.842 # Client id=19768058 addr=xx.xxx. 阅读全文

posted @ 2019-08-03 16:05 ExplorerMan 阅读(797) 评论(0) 推荐(0)

2019年8月2日

Elasticsearch入门(一)

摘要: 简介 ElasticSearch是一个开源的分布式搜索引擎,具备高可靠性,支持非常多的企业级搜索用例。像Solr4一样,是基于Lucene构建的。支持时间时间索引和全文检索。官网:http://www.elasticsearch.org 它对外提供一系列基于java和http的api,用于索引、检索 阅读全文

posted @ 2019-08-02 18:08 ExplorerMan 阅读(223) 评论(0) 推荐(0)

Elasticsearch入门(二)

摘要: 基础概念 Elasticsearch有几个核心概念,从一开始理解这些概念会对整个学习过程有莫大的帮助。 接近实时(NRT) Elasticsearch是一个接近实时的搜索平台。这意味着,从索引一个文档直到这个文档能够被搜索到有一个轻微的延迟(通常是1秒)。 集群(cluster) 一个集群就是由一个 阅读全文

posted @ 2019-08-02 18:06 ExplorerMan 阅读(207) 评论(0) 推荐(0)

ES快速入门

摘要: 一、概念 1.ES基础概念 ES是ElasticSearch的缩写。ES是基于Apache Lucene的开源搜索引擎,是一款实时分布式搜索和分析引擎,提供RestfulAPI可以进行可视化的交互。具有如下特点: 1) 提供分布式的实时文件存储,每个字段都被索引并可被搜索; 2)实时分析的分布式搜索 阅读全文

posted @ 2019-08-02 18:05 ExplorerMan 阅读(1708) 评论(0) 推荐(0)

2019年8月1日

Flink消费Kafka数据并把实时计算的结果导入到Redis

摘要: 1. 完成的场景 在很多大数据场景下,要求数据形成数据流的形式进行计算和存储。上篇博客介绍了Flink消费Kafka数据实现Wordcount计算,这篇博客需要完成的是将实时计算的结果写到redis。当kafka从其他端获取数据立刻到Flink计算,Flink计算完后结果写到Redis,整个过程就像 阅读全文

posted @ 2019-08-01 20:34 ExplorerMan 阅读(929) 评论(0) 推荐(0)

Filebeat+Kafka+Logstash+ElasticSearch+Kibana搭建完整版

摘要: 1. 了解各个组件的作用 Filebeat是一个日志文件托运工具,在你的服务器上安装客户端后,filebeat会监控日志目录或者指定的日志文件,追踪读取这些文件(追踪文件的变化,不停的读)Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据Logstash是 阅读全文

posted @ 2019-08-01 20:33 ExplorerMan 阅读(367) 评论(0) 推荐(0)

Flink+kafka实现Wordcount实时计算

摘要: 1. Flink Flink介绍: Flink 是一个针对流数据和批数据的分布式处理引擎。它主要是由 Java 代码实现。目前主要还是依靠开源社区的贡献而发展。对 Flink 而言,其所要处理的主要场景就是流数据,批数据只是流数据的一个极限特例而已。再换句话说,Flink 会把所有任务当成流来处理, 阅读全文

posted @ 2019-08-01 20:33 ExplorerMan 阅读(372) 评论(0) 推荐(0)

API设计风格(RRC、REST、GraphQL、服务端驱动)

摘要: 阅读目录 一、创建资源使用PUT还是POST 二、异常处理的HTTP响应状态码 三、返回数据是否需要包装 四、URI的设计层级是否超过两层 五、参考资料 阅读目录 一、创建资源使用PUT还是POST 二、异常处理的HTTP响应状态码 三、返回数据是否需要包装 四、URI的设计层级是否超过两层 五、参 阅读全文

posted @ 2019-08-01 19:44 ExplorerMan 阅读(287) 评论(0) 推荐(0)

微服务架构

摘要: 阅读目录 一、Dubbo 二、Tars 三、gRPC 四、Motan 五、Spring Cloud 阅读目录 一、Dubbo 二、Tars 三、gRPC 四、Motan 五、Spring Cloud 阅读目录 微服务架构到底应该如何选择? 阅读目录 微服务架构到底应该如何选择? 回到目录 微服务架构 阅读全文

posted @ 2019-08-01 19:42 ExplorerMan 阅读(236) 评论(0) 推荐(0)

python自定义logger handler

摘要: _filefmt=os.path.join("logs","%Y-%m-%d.log") class MyLoggerHandler(logging.Handler): def __init__(self,filefmt=None): self.filefmt=filefmt if filefmt 阅读全文

posted @ 2019-08-01 17:54 ExplorerMan 阅读(494) 评论(0) 推荐(0)

上一页 1 ··· 117 118 119 120 121 122 123 124 125 ··· 234 下一页

导航