上一页 1 2 3 4 5 6 ··· 20 下一页
摘要: 转载:https://blog.csdn.net/iamlake/article/details/104982518 引子 1. 蓝鲸的背景:运维转型 原因1:业务红海化 原因2:“传统运维”生存空间塌缩 原因3:我们太累了 2. 蓝鲸的设计思想 3. 蓝鲸服务 4. 收尾 阅读全文
posted @ 2021-01-05 11:51 Tim&Blog 阅读(826) 评论(0) 推荐(0) 编辑
摘要: 某君请领导吃饭,领导婉拒。他本想回“好的”。却回成了“妈的”。结果,他失业时才五十多岁! 某女给男同事发微信:“你是同事中最出色的,跟你在一起,真的很开心!”因为不细心,少打了个“出”字。很长时间后,还一直在纳闷,为啥被拉黑?以上是两则笑话,这种笑话很“低级”,但在我们生活中,因“一字之差”而引起的 阅读全文
posted @ 2020-12-25 13:18 Tim&Blog 阅读(272) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2020-12-14 08:35 Tim&Blog 阅读(406) 评论(0) 推荐(0) 编辑
摘要: 根目录结构 一、3party-licenses 二、addons 1、falcon-bridge 2、falcon-bridge-shim 3、hbase-bridge 4、hive-bridge 5、kafka-bridge 6、models 7、sqoop-bridge 8、storm-brid 阅读全文
posted @ 2020-11-13 11:01 Tim&Blog 阅读(7279) 评论(0) 推荐(0) 编辑
摘要: 问题: 使用sql语句,insert into xxx select * from xxx group by;等复杂的逻辑语句 出现reducer数量超过1000000 原因分析: Hadoop MapReduce程序中,reducer个数的设定极大影响执行效率 ,这使得Hive怎样决定reduce 阅读全文
posted @ 2020-10-29 08:36 Tim&Blog 阅读(260) 评论(0) 推荐(0) 编辑
摘要: 问题想象: bat执行exe过程中出现exe一闪而过,发现是目录位置不对,解决办法 问题分析:你可以通过cmd执行exe查看具体报错内容,可以发现exe执行时候需要根据exe的当前路径加载相关dll后者配置文件,所以执行报错 解决: 办法1:通过跳转目录解决 bat定义: 添加目录跳转CHDIR 你 阅读全文
posted @ 2020-10-28 14:16 Tim&Blog 阅读(477) 评论(0) 推荐(0) 编辑
摘要: Hadoop支持的一系列通配符与Unix bash相同: 通配符 名称 匹配 * 星号 匹配0或多个字符 ? 问号 匹配单一字符 [ab] 字符类别 匹配{a,b}中的一个字符 [^ab] 非字符类别 匹配不是{a,b}中的一个字符 [a-b] 字符范围 匹配一个在{a,b}范围内的 字符(包括ab 阅读全文
posted @ 2020-09-09 14:08 Tim&Blog 阅读(689) 评论(0) 推荐(0) 编辑
摘要: 在线文档:https://ke.smartloli.org/ 作者博客:https://www.cnblogs.com/wang3680 源码地址:https://github.com/smartloli/kafka-eagle 环境要求: 需要的java版本 java1.8以上版本 下载包Kafk 阅读全文
posted @ 2020-06-18 11:27 Tim&Blog 阅读(878) 评论(0) 推荐(0) 编辑
摘要: 一、安装 参考:https://www.cnblogs.com/cpy-devops/p/9287531.html 首先保证系统安装了java 1.8以上版本 tar –zxvf /home/logstash-7.7.0.tar.gz -C /usr/local 进入/usr/local/logst 阅读全文
posted @ 2020-06-15 13:50 Tim&Blog 阅读(2806) 评论(0) 推荐(0) 编辑
摘要: select * from user where name regexp 'mac1|mac2|mac3'通过regexp 方式查询多个值,使用|实现or效果 阅读全文
posted @ 2020-05-15 13:35 Tim&Blog 阅读(7345) 评论(0) 推荐(0) 编辑
摘要: 问题:hadoop出现报警,有些节点数据磁盘已经占用了90%,有些节点磁盘用了50% 解决:HDFS自带的balancer工具来解决,保证每个节点的数据分布均衡 方法-全节点&个别节点平衡: 1.设置带宽 hdfs dfsadmin -setBalancerBandwidth 104857600 \ 阅读全文
posted @ 2020-05-12 13:50 Tim&Blog 阅读(2085) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2020-04-30 16:24 Tim&Blog 阅读(257) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2020-04-30 15:57 Tim&Blog 阅读(301) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2020-04-30 15:56 Tim&Blog 阅读(172) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2020-04-30 15:55 Tim&Blog 阅读(314) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2020-04-30 15:54 Tim&Blog 阅读(219) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2020-04-30 15:53 Tim&Blog 阅读(434) 评论(0) 推荐(0) 编辑
摘要: ORC表与其他表的区别1. 只有TEXT、CSV、基于定宽文本文件外表这三种表支持对 字段类型 的修改以及增、删字段。2. 禁止修改ORC表的字段类型3. 禁止对ORC表增、删字段 ORC表建立的原则ORC非事务表的建表只需在建表语句中用 STORED AS ORC 指定存储格式为ORC即可。ORC 阅读全文
posted @ 2020-04-30 15:52 Tim&Blog 阅读(571) 评论(0) 推荐(0) 编辑
摘要: beeline使用方式1. 无认证./beeline -u jdbc:hive2://{inceptor_server}:100002. 使用Kerberos认证kinit -kt /etc/sql2/hive.keytab hive/baogang2@TDHklistTicket cache: F 阅读全文
posted @ 2020-04-30 15:50 Tim&Blog 阅读(580) 评论(0) 推荐(0) 编辑
摘要: Inceptor命令01-表介绍 • 表的划分-不同维度 1. 按 Inceptor的所有权 分类可分为:外部表(或简称为外表)和托管表(内表)。 2. 按 表的存储格式 分类可分为:TEXT表、ORC表、CSV表和Holodesk表。 3. 按表 是否分区 可分为:分区表和非分区表。 4. 按表 阅读全文
posted @ 2020-04-30 15:48 Tim&Blog 阅读(951) 评论(0) 推荐(0) 编辑
上一页 1 2 3 4 5 6 ··· 20 下一页