dlimeng

摘要： 简介 这个的介绍在我的另一篇博文中（Beam-介绍），在此不在再赘述，最近碰到个有意思的事，聊聊beam的链路，简单来说自己操作的一些函数中间有些转换组件，注册在链路中，在此截了一张官网的图片。 这是简单链路大概样子，各个函数串联在一起，当然了实际中不可能这样一帆风顺，肯定遇到很多种情况，我列下几种 阅读全文

摘要： 简介 Beam提供了一套统一的API来处理两种数据处理模式（批和流），让我们只需要将注意力专注于在数据处理的算法上，而不用再花时间去对两种数据处理模式上的差异进行维护。 Beam每6周更新一个小版本。 编程模型 第一层是现有各大数据处理平台（spark或者flink）,在Beam中它们也被称为Run 阅读全文

摘要： 房屋普查，预测房价，最后预测结果不太准确，后续会调整，可能的原因：最直接原因指标项没有强线性关系，使用的参数不准确。只是为了熟悉下流程。 import org.apache.spark.ml.feature.StandardScaler import org.apache.spark.sql.typ 阅读全文

摘要： 最近心有所感，写下近年的书和事的追求。 书的追求: 每个读者都有份宽容的心，选择了写的再烂，都坚持把它读完。遇见本好书不容易，尤其当今人很是浮躁，过于夸大，最近碰到本不错，读了三遍左右，对书所追求的，不是解决方案如何，而是感悟思想和塑造意识。 事的追求: 每天能做完一件完美的事已然是最大的荣幸了，其 阅读全文

摘要： 最近研究了一些scala并发的知识，总结一下。 一.简介 即时响应性是一项决定任何应用程序成败的关键因素。有两种方式来提高即时响应性：1.多线程，并行运行多个任务。2.有策略的计算，惰性运行任务。 二.惰性求值 1.短路控制，scala不会向前看，所以用到lazy。注意：多个变量绑定，后续调用，顺序 阅读全文

摘要： 最近养病中，文章发布的少些，整理一套经典算法项目，学习一下。 项目地址：https://github.com/77954309/classical_algorithm 阅读全文

摘要： 近期，花费了一些时间，注解了一些Netty的源码，从总体到一些细节了解一下Netty，学到很多，注解其中一些有代表性的类和方法，后续会持续更新的。 地址：https://github.com/77954309/netty-all-4.1.29-sources 一.Netty 服务端创建时序图 二.N 阅读全文

摘要： 上一篇（tcp/ip系列--数据链路）：https://blog.csdn.net/qq_19968255/article/details/83832035 一.IP即网际协议 TCP/IP的心脏是互联网层（网络层），这一层主要由IP和ICMP两个协议组成。主要作用：实现终端节点之间的通信。 数据链 阅读全文

摘要： 有一些算法文档，有兴趣的可以收藏看看，如果链接失效了，私聊吧！ 后续还有一些，就不一一显示了。 下载地址：https://pan.baidu.com/s/1Wn8SJGxj_-T59ByT0U7KQw 提取码：1j74 阅读全文

摘要： tcp/ip系列上一篇(tcp/ip基础知识)：https://blog.csdn.net/qq_19968255/article/details/83547041 一.简介 数据链路，指OSI参考模型中的数据链路层，有时也指以太网、无线局域网等通信手段。 二.数据链路的段 数据链路的段是指一个被分 阅读全文