04 2020 档案

Spark 任务调度机制(转)
摘要：转自：https://www.cnblogs.com/LXL616/p/11165826.html 非常好的文章，感谢作者的分享，向大神学习下。 在工厂环境下，Spark 集群的部署方式一般为 YARN-Cluster 模式，之后的内核 分析内容中我们默认集群的部署方式为 YARN-Cluster 阅读全文
posted @ 2020-04-28 16:35 粒子先生 阅读(1455) 评论(0) 推荐(0)
elasticsearch 性能监控基础(转)
摘要：原文转自：https://www.cnblogs.com/smail-bao/p/7448392.html 非常好的文章，感谢作者的总结分享。 一、Elasticsearch 是什么 Elasticsearch是一款用Java编写的开源分布式文档存储和搜索引擎，可以用于near real-time存 阅读全文
posted @ 2020-04-23 23:44 粒子先生 阅读(880) 评论(0) 推荐(0)
hadoop的yarn资源队列（转载）
摘要：0. 起因在这里插入图片描述试想一下，你现在所在的公司有一个hadoop的集群。但是A项目组经常做一些定时的BI报表，B项目组则经常使用一些软件做一些临时需求。那么他们肯定会遇到同时提交任务的场景，这个时候到底如何分配资源满足这两个任务呢？是先执行A的任务，再执行B的任务，还是同时跑两个？如果你存在 阅读全文
posted @ 2020-04-21 22:17 粒子先生 阅读(3989) 评论(0) 推荐(0)
Ambari2.7.3和HDP3.1.4在线安装
摘要：查看各组件版本信息 https://supportmatrix.hortonworks.com/ 安装jdk http://www.cnblogs.com/libin2015/p/8086047.html linux设置 配置hosts vim /etc/hosts 192.168.1.9 Hado 阅读全文
posted @ 2020-04-12 15:29 粒子先生 阅读(1507) 评论(0) 推荐(0)
mysql5.7安装(yum在线方式)
摘要：安装 wget https://dev.mysql.com/get/mysql57-community-release-el7-9.noarch.rpm rpm -ivh mysql57-community-release-el7-9.noarch.rpm yum install mysql-ser 阅读全文
posted @ 2020-04-12 14:35 粒子先生 阅读(2031) 评论(0) 推荐(0)
Day 7 - Elasticsearch中数据是如何存储的（转）
摘要：转自：https://elasticsearch.cn/article/6178 前言 很多使用Elasticsearch的同学会关心数据存储在ES中的存储容量，会有这样的疑问：xxTB的数据入到ES会使用多少存储空间。这个问题其实很难直接回答的，只有数据写入ES后，才能观察到实际的存储空间。比如同 阅读全文
posted @ 2020-04-10 14:01 粒子先生 阅读(623) 评论(0) 推荐(0)
IndicesOptions(索引操作选项)
摘要：IndicesOptions$WildcardStates枚举类型主要定义通配符的作用范围，例如OPEN，表示处于打开状态的索引，而CLOSE表示处于关闭状态的索引。 IndicesOptions$Option定义操作选项： IGNORE_UNAVAILABLE可忽略不可用的索引。IGNORE_AL 阅读全文
posted @ 2020-04-01 17:30 粒子先生 阅读(3400) 评论(0) 推荐(1)