chenzechao

摘要： 对于基于Receiver 形式，我们可以通过配置 spark.streaming.receiver.maxRate 参数来限制每个 receiver 每秒最大可以接收的记录的数据；对于 Direct Approach 的数据接收，我们可以通过配置 spark.streaming.kafka.maxR 阅读全文

摘要： 1. Ctrl+N 按名字搜索类 相当于eclipse的ctrl+shift+R，输入类名可以定位到这个类文件 就像idea在其它的搜索部分的表现一样，搜索类名也能对你所要搜索的内容多个部分进行匹配 甚至不是自己写的类也能搜索 而且如果能匹配的自己写的类，优先匹配自己写的类 2. Ctrl+Shift+N 按文件名搜索文件 同搜索类类似，只不过可以匹配... 阅读全文

摘要： ref: https://blog.csdn.net/qq_41455420/article/details/79399096 阅读全文

摘要： ### 端口转发iptables -t nat -A PREROUTING -p tcp --dport 新端口 -j REDIRECT --to-ports 旧端口### 服务器中转firewall-cmd --add-forward-port=port=1433:proto=tcp:toaddr 阅读全文

摘要： select name ,REGEXP_REPLACE(str,"[\\[\"\\]]",'') from ( select trans_array(1, ",", name,list) as (name,str) from ( select '经办人' as name,'["1001","1002"]' as list ) ... 阅读全文

该文被密码保护。 阅读全文

摘要： dev development 开发环境stg stage 测试环境prd product 线上环境 阅读全文

摘要： 1.什么是数据模型？ 数据模型就是数据的组织和存储方法。主要关注的是从业务、数据存取和使用角度合理存储数据。 2.典型数据仓库建模方法论 ER模型 维度模型（建模四步曲：确定业务流程->确定粒度->确定维度->确定事实表） 1.体系架构 2.模型分层 主要分为三大层（4小层）： 操作数据层（ODS） 公共维度模型层（CDM） ... 阅读全文

摘要： 查看执行计划 ref: https://www.cnblogs.com/xinysu/p/7860609.html 阅读全文

摘要： # 定义初始化map declare -A map=(["100"]="1" ["200"]="2") # 输出所有key echo ${map[@]} # 输出key对应的值 echo ${map["100"]} # 遍历map for key in ${!map[@]} do echo ${map[${key}]} done #!/bin/bash #*****... 阅读全文