摘要: ###########2021-03-22:gp参数调整记录########### gpconfig -c max_connections -v 1250 -m 250 #segment为master的5-10倍 gpconfig -c max_prepared_transactions -v 25 阅读全文
posted @ 2021-03-31 17:26 一寸HUI 阅读(2030) 评论(0) 推荐(0) 编辑
摘要: 最近在做gp的升级和整改,所以把做的内容整理下,这篇文章主要是基于gp6.14的安装,主要分为gp,gpcc,pxf的一些安装和初始化。本文为博客园作者所写: 一寸HUI,个人博客地址:https://www.cnblogs.com/zsql/ 一、安装前准备 1.1、机器选型 参考:https:/ 阅读全文
posted @ 2021-03-31 10:40 一寸HUI 阅读(2179) 评论(2) 推荐(0) 编辑
摘要: 本文为博客园作者所写: 一寸HUI,个人博客地址:https://www.cnblogs.com/zsql/ 在写本文时就在想,如果让你负责一个elasticsearch集群,从零开始,你会从哪些方面考虑?我们也知道es基本都是开箱即用,而且也很好用,配置参数也用默认的就好,只是这么简单的用不难,但 阅读全文
posted @ 2021-02-27 18:37 一寸HUI 阅读(958) 评论(0) 推荐(0) 编辑
摘要: 本文为博客园作者所写: 一寸HUI,个人博客地址:https://www.cnblogs.com/zsql/ 最近在做es相关的工作,所以记录下自己的一些想法,可能很多方面不会很全面,但是基本都是经过验证的。本文主要是围绕着思考,从多个方面进行考虑,怎么设计索引比较好,直接进入主题吧,本文的es版本 阅读全文
posted @ 2021-02-19 22:42 一寸HUI 阅读(7398) 评论(0) 推荐(1) 编辑
摘要: 本文为博客园作者所写: 一寸HUI,个人博客地址:https://www.cnblogs.com/zsql/ 简单的一个类就直接说了。LinkedList 的底层结构是一个带头/尾指针的双向链表,可以快速的对头/尾节点 进行操作,它允许插 入所有元素,包括 null。 相比数组(这里可以对比Arra 阅读全文
posted @ 2021-02-18 16:37 一寸HUI 阅读(603) 评论(0) 推荐(1) 编辑
摘要: 最近想写一篇es的索引的一个设计,由于设计的东西特别多,当然,elasticsearch的模板和动态映射也是其中的一个设计点,所以干脆先来聊聊索引的模板和动态映射,模板,听这个名字就相当于一些公共可用的东西可以作为所有索引的一个设置, 本文为博客园作者所写: 一寸HUI,个人博客地址:https:/ 阅读全文
posted @ 2021-02-06 17:04 一寸HUI 阅读(4070) 评论(0) 推荐(2) 编辑
摘要: 由于在版本7开始,x-pack可以免费使用了,但是权限控制免费的不够细,但是控制到索引级别都基本够用了。付费的可以体验更细致的权限控制。本文的基础是已经有了es集群的基础上进行的。 官网:https://www.elastic.co/guide/en/elasticsearch/reference/ 阅读全文
posted @ 2021-02-04 17:27 一寸HUI 阅读(10548) 评论(0) 推荐(5) 编辑
摘要: 一、迁移背景 服务器出了问题,导致整个cm server界面呈现出不可用的状态,也就是获取不到各个大数据组件以及主机相关的状态的信息,整个cm server的前端界面处于瘫痪的状态,不可用,刚开始怀疑是存放元数据的mysql有问题,但是经过验证,一点问题也没有,后面发现登陆服务器很卡顿,但是发现cp 阅读全文
posted @ 2021-02-03 20:19 一寸HUI 阅读(586) 评论(0) 推荐(1) 编辑
摘要: 一、复盘的目的 今天是2021年1月30号了,时间过得真的是挺快的,转眼间就参加工作两年半有余了,回想起来其实感觉就是时间过去了,也不知道自己做了什么,没有记录,没有思考,这样就很难得到个人的成长和提升。前几天在网上看到复盘,可能一次复盘不明显,但是多次复盘,或者一直坚持下去的话,我也会相信会形成一 阅读全文
posted @ 2021-01-30 21:02 一寸HUI 阅读(389) 评论(1) 推荐(0) 编辑
摘要: #####废话的开始#####,从今天开始,可能就会多一个话题了,虽然以前在学校也学过数据结构这门课程,但是作为新世纪的90后,还是把学到的东西原原本本还给了老师,有借有还再借不难。其实后续也陆陆续续学习过,但是没有去做很好总结,容易忘记,毕竟作为一个半路出家的码农来说,这个需要好好学习,主要是没怎 阅读全文
posted @ 2021-01-21 20:55 一寸HUI 阅读(789) 评论(0) 推荐(1) 编辑
摘要: 本文为博客园作者所写: 一寸HUI,个人博客地址:https://www.cnblogs.com/zsql/ 很多人如果先接触mysql的执行顺序(from ->on ->join ->where ->group by ->having ->select ->distinct ->order by 阅读全文
posted @ 2020-12-24 20:13 一寸HUI 阅读(8431) 评论(2) 推荐(1) 编辑
摘要: 本文为博客园作者所写: 一寸HUI,个人博客地址:https://www.cnblogs.com/zsql/ 最近天冷了,socket也出问题了,一直没有做监控,现在就把监控加起来,目前我们使用的有zabbix和prometheus两种监控,这里我们使用zabbix对其进行监控,这里使用的是ss命令 阅读全文
posted @ 2020-12-16 16:06 一寸HUI 阅读(595) 评论(0) 推荐(0) 编辑
摘要: 本文为博客园作者所写: 一寸HUI,个人博客地址:https://www.cnblogs.com/zsql/ 你有批量kill作业吗?有因为删除文件夹的内容太多而报错吗?-bash: /bin/rm: Argument list too long,查找出来的文件怎么直接删除呢?批量执行?并发执行?如 阅读全文
posted @ 2020-12-04 16:36 一寸HUI 阅读(581) 评论(1) 推荐(2) 编辑
摘要: 一、awk介绍 awk 是一种程序语言. 它具有一般程序语言常见的功能. 因awk语言具有某些特点, 如 : 使用直译器(Interpreter)不需先行编译; 变量无类型之分(Typeless), 可使用文字当数组的下标(Associative Array)...等特色. 因此, 使用awk撰写程 阅读全文
posted @ 2020-11-24 20:24 一寸HUI 阅读(619) 评论(0) 推荐(0) 编辑
摘要: 一、sed介绍 sed是Stream Editor(字符流编辑器)的缩写,简称流编辑器。sed是操作、过滤和转换文本内容的强大工具。常用功能包括对文件实现快速增删改查(增加、删除、修改、查询),其中查询的功能中最常用的两大功能是过滤(过滤指定字符串)、取行(取出指定行) sed通过执行下面的循环来操 阅读全文
posted @ 2020-11-20 20:42 一寸HUI 阅读(457) 评论(0) 推荐(2) 编辑