dairui130

导航

02 2019 档案

记一次老板培训心得
摘要:因为这是我第一次在老总的公司培训上,听到这么多次,孝顺。 人心中最柔软的地方,往往却是最坚强的。孝顺,直击我心中最柔软的地方。 今天起,也成为了我最坚强的地方。 老板是搞技术的,这家公司的第一波机器,系统,h5,css全是他完成的。 他这个人简单,执行力强,对技术很有好奇心。现在他做产品,做ceo也 阅读全文

posted @ 2019-02-28 19:21 dairui130 阅读(315) 评论(0) 推荐(1)

Kafka auto.offset.reset
摘要:要从头消费kafka的数据,可以通过以下参数: Kafka auto.offset.reset = earliest 阅读全文

posted @ 2019-02-28 19:08 dairui130 阅读(345) 评论(0) 推荐(0)

Flume source 支持的type类型
摘要:Flume是一个分布式的高可用的消费组件。通过修改配置文件,可以启动不同的agent处理不同来源的数据。 agent包含source,channel,sink三个组件。今天我们学习下source的type。 1. spooldir 向指定目录中传输文件,发现flume收集到了该文件,将文件中的每一行 阅读全文

posted @ 2019-02-28 11:42 dairui130 阅读(1799) 评论(0) 推荐(0)

mysql变更数据的捕获和入库
摘要:问题:涉及状态的信息,mysql中是update的,缺少中间状态的记录。数据分析中需要这部分数据。 思路:后端服务通过监控某张表的某个字段,根据mysql的binlog文件,还原数据,发送到kafka。我们消费kafka中的数据,最终在hive的ods层形成表更数据表。 方案设计: 方案4中需要注意 阅读全文

posted @ 2019-02-27 21:15 dairui130 阅读(345) 评论(0) 推荐(0)

excel冻结窗格
摘要:编辑excel时冻结窗格可以大大增加可读性。每个sheet都应该加上。 第一份工作的时候,上司比较严格,还因为这个挨过几次骂。所以这个技巧大家一定要掌握 方法很简单: 选中首行:视图 -- 冻结窗格 冻结窗格:选中某个单元格 -- 视图 -- 冻结窗格 阅读全文

posted @ 2019-02-27 19:56 dairui130 阅读(157) 评论(0) 推荐(0)

kafka eagel的使用
摘要:sql语句eq: 官网地址为: https://ke.smartloli.org/3.Manuals/9.KafkaSQL.html 阅读全文

posted @ 2019-02-27 11:28 dairui130 阅读(150) 评论(0) 推荐(0)

Excel函数vlookup
摘要:最近整理业务文档,需要用到excel,按照教程,操作了20来分钟,却得不到结果。 看了视频,才知道,vlookup仅限关联选中区域的第一列关联,把要关联的行拷贝到第一列,解决。 https://www.bilibili.com/video/av11711846?from=search&seid=27 阅读全文

posted @ 2019-02-22 20:18 dairui130 阅读(849) 评论(0) 推荐(0)

Mysql中key 、primary key 、unique key 与index区别
摘要:转自https://www.cnblogs.com/zjfjava/p/6922494.html Mysql中key 、primary key 、unique key 与index区别 索引被用来快速找出在一个列上用一特定值的行。没有索引,MySQL不得不首先以第一条记录开始并然后读完整个表直到它找 阅读全文

posted @ 2019-02-18 15:02 dairui130 阅读(419) 评论(0) 推荐(0)