随笔分类 -  随笔

kafka在创建topic出现zookeeper is not a recognized option
摘要：自己搭建个zookeeper和kafka记录一下错误. 新版本的kafka，已经不需要依赖zookeeper来创建topic，新版的kafka创建topic指令为下： ./kafka-topics.sh --create --bootstrap-server localhost:9097 --rep 阅读全文
posted @ 2022-12-20 10:12 dch_21 阅读(426) 评论(0) 推荐(0)
hive修改字段类型
摘要：maxcompute开启全表扫描 set odps.sql.allow.fullscan=false/true 阅读全文
posted @ 2022-02-10 13:39 dch_21 阅读(761) 评论(0) 推荐(0)
常用sql
摘要：正则 数组转字符串 concat_ws 替换html元素 REGEXP_REPLACE(ticket_content,'<([^>]*)>|(&nbsp;)|(&nbsp)','') 字符串去重 concat_ws(',',array_distinct(split(replace(replace(s 阅读全文
posted @ 2022-02-10 13:38 dch_21 阅读(133) 评论(0) 推荐(0)
crontab
摘要：今天写了个crontab定时任务，遇到了小问题，顺便记录下 crontab日志文件 查错： tail -f /var/log/cron发现如下错误: crontab无法执行且(root) MAIL (mailed 54 bytes of output but got status 0x004b#01 阅读全文
posted @ 2022-01-26 13:51 dch_21 阅读(87) 评论(0) 推荐(0)
将脚本日志写入指定文件并后台运行
摘要：sh sc2odps_online.sh 20220113 >> 20220113.log 2>&1 & 阅读全文
posted @ 2022-01-17 10:32 dch_21 阅读(39) 评论(0) 推荐(0)
sercureCRT上传和下载文件
摘要：![](https://img2020.cnblogs.com/blog/2009668/202201/2009668-20220111174256280-1989444481.png) ![](https://img2020.cnblogs.com/blog/2009668/202201/2009668-20220111174235418-552966550.png) 阅读全文
posted @ 2022-01-11 17:43 dch_21 阅读(47) 评论(0) 推荐(0)
Mac配置jdk和maven环境
摘要：今天入职新公司，领了本MacBook pro，第一次使用mac，有点不习惯，但是真的很丝滑。记录下自己装jdk和maven时的过程 jdk官网 到官网下载jdk（我是找朋友要的） 安装 默认jdk的安装路径（我把Home目录拷贝到了桌面，因为配置maven的时候老是说JAVA_HOME没有生效） 配 阅读全文
posted @ 2022-01-10 23:22 dch_21 阅读(247) 评论(0) 推荐(0)
show二级分区
摘要：当show二级分区的时候会展示全路径 show partitions dmr_dev.dmr_dip_channel_quantity partition(ds = '20220105'); 阅读全文
posted @ 2022-01-06 10:09 dch_21 阅读(67) 评论(0) 推荐(0)
标识用户
摘要：知乎——埋点系列-如何准确标识用户 神策——如何准确的标识用户概述 神策——如何正确标识用户概述 神策——标识用户 数数科技——用户识别 阅读全文
posted @ 2022-01-04 10:50 dch_21 阅读(20) 评论(0) 推荐(0)
Hive元数据信息对应MySQL数据库表
摘要：https://blog.csdn.net/u011250186/article/details/107691066?spm=1001.2101.3001.6650.2&utm_medium=distribute.pc_relevant.none-task-blog-2%7Edefault%7ECT 阅读全文
posted @ 2021-12-07 20:02 dch_21 阅读(54) 评论(0) 推荐(0)
自动监控MySQL表结构变更脚本
摘要：https://developer.aliyun.com/article/241553 阅读全文
posted @ 2021-12-07 20:00 dch_21 阅读(147) 评论(0) 推荐(0)
VMware共享文件夹
摘要：今天来个了骚操作，为了白嫖Tableu DeskTop虚拟机上装了个windows。简直骚的不要不要的。 添加共享文件夹 识别共享文件夹 打开控制面板 网络和Internet 更改高级共享设置 启用 共享文件夹路径 阅读全文
posted @ 2021-10-11 22:07 dch_21 阅读(63) 评论(0) 推荐(0)
idea创建文件注释模板
摘要：创建sql文件时，自动添加文件头注释 file >settings >editor >file and code templates > includes > 创建新文件 命名为Sql File，后缀是sql 切换到files，找到Sql File，命名依然是SQL File，后缀是sql（小写，这 阅读全文
posted @ 2021-09-16 23:40 dch_21 阅读(742) 评论(0) 推荐(0)