摘要: ​du -h --max-depth=1 work/testing ​ ​ 阅读全文
posted @ 2021-07-07 19:32 疯码牛Pro 阅读(40) 评论(0) 推荐(0) 编辑
摘要: ​ Data truncation: Incorrect string value: '\xE5\xB7\xB2\xE6\x9B\xB4...' for column 'MESSAGE' at row 1 ​ cloudera server 端日志: Caused by: java.sql.Batc 阅读全文
posted @ 2021-07-07 19:31 疯码牛Pro 阅读(548) 评论(0) 推荐(0) 编辑
摘要: 由于项目需要,需要用到flink cdc进行Flink SQL 开发,一起增加开发效率,减少很多java代码开发. 在版本方面,Flink CDC 在flink1.11 以上的版本才有支持,在这里选择Flink1.12.0。 CDH版本:CDH6.3.2 Cloudera Manager 集成Fli 阅读全文
posted @ 2021-06-21 09:25 疯码牛Pro 阅读(2136) 评论(0) 推荐(0) 编辑
摘要: 一、大数据框架三种语义‍‍‍‍ 在分布式系统中,如kafka、spark、flink等构成系统的任何节点都是被定义为可以彼此独立失败的。比如在 Kafka 中,broker 可能会 crash,在 producer 推送数据至 topic 的过程中也可能会遇到网络问题。根据 producer 处理此 阅读全文
posted @ 2021-04-09 00:17 疯码牛Pro 阅读(192) 评论(0) 推荐(0) 编辑
摘要: 大数据治理工具atlas,在元数据管理,血缘关系方面独树一帜,不容错过 阅读全文
posted @ 2021-03-30 23:34 疯码牛Pro 阅读(674) 评论(0) 推荐(0) 编辑
摘要: 推荐系统技术文档,详细的新闻客户端推荐系统技术文档 阅读全文
posted @ 2021-03-24 00:59 疯码牛Pro 阅读(980) 评论(0) 推荐(0) 编辑
摘要: 一、服务器环境配置 1 系统要求 名称 地址 操作系统 root密码 Master1 10.1.0.30 Centos 7.7 Master2 10.1.0.105 Centos 7.7 Worker1 10.1.0.127 Centos 7.7 Worker2 10.1.0.106 Centos 阅读全文
posted @ 2021-03-02 23:30 疯码牛Pro 阅读(1399) 评论(0) 推荐(0) 编辑
摘要: 年愈古稀,逐渐明白一些道理,稍加归纳,辑录于后。 年愈古稀才明白,人生是有命的。命者,环境制约也。任何人,都生活在一定环境中,有些环境,会影响甚至决定人的一生。此时此刻,你在这里,为什么不前不后,不迟不早,正好在这里?这就是命。生于什么年代,遭逢何种变故,遗传哪些疾病,这也是命。“大命由天,小势可为 阅读全文
posted @ 2019-11-12 09:50 疯码牛Pro 阅读(729) 评论(0) 推荐(0) 编辑
摘要: 拉取最新的neo4j镜像 docker pull neo4j 运行Neo4j 容器 docker run -it -d -p 7474:7474 -p 7687:7687 neo4j:latest 打开Neo4j 浏览器管理界面 http://localhost:7474 docker启动mysql 阅读全文
posted @ 2019-03-07 10:01 疯码牛Pro 阅读(4091) 评论(0) 推荐(0) 编辑
摘要: 卷积:加权求和 卷积层:特征提取 池化层:明显特征提取 激活函数:线性函数非线性化,用于分类 损失函数:择优选取误差更小的函数 阅读全文
posted @ 2018-11-12 15:39 疯码牛Pro 阅读(219) 评论(0) 推荐(0) 编辑