摘要： 除了Linux子系统WSL，微软还提供了安卓子系统WSA。不过对国内好像不太友好，安装也不方便。 这里说一下我的安装方法，但是可能时效性很强，现在是2022-01-20，如果日期离得太远可能不好使。 安装WSA wsa的官方介绍在 微软文档上。但是根据里面的说法我在MS Store找不到亚马逊商店， 阅读全文

摘要： 在前面的文章《尝试官方的第一个SpringNative 0.11程序》中提到过Quarkus这门技术。这里就简单演示一下它的两个主要功能：Live Coding和Native Build。所谓Live Coding就是热部署，改了代码插件会自动编译打包，省的我们点来点去了；第二个Native Bui 阅读全文

摘要： 这里跑一下Vert.x中文站的入门程序（以后就不写那个点了，或者干脆写vx）简易教程。这个程序非常简单，为啥还写一下呢？因为里面的依赖有点老，已经不能直接成功启动了。 搭建项目 通过IDEA创建Gradle项目，现在IDEA指定的应该是7.1的Gradle。而中文站的应该不是了 创建好以后，idea 阅读全文

摘要： Spring Native是Spring推出微服务体系Spring Cloud之后的又一大举动，从名字可以猜出，Spring Native是一门面向云原生的技术。如果你还对这个概念不太理解，可以多看一点东西，比如Oracle的GraalVM、红帽的quarkus等。 现在 我们跟着官方示例 Spri 阅读全文

摘要： 如果要在docker中安装软件，除了直接找对应的软件镜像，一般我们会先安装Linux系统，然后再在里面安装各种需要的软件。 比如我想安装乌班图，直接下载官方的版本： 这个目前是Ubuntu20.04，只有72M，因为它只有操作系统的基本功能，大部分软件都没有。接下来我们对它进行调教。 更换apt源 阅读全文

摘要： 最近在docker中搭建一个服务，需要有多个容器通信。这里简单记录一下如何在容器间进行通信，同时说一下已经存在的容器如何追加端口映射。 增加网桥 容器间通信的目的是不适用IP而是使用容器名称进行网络通信，因为容器重启IP可能会变。 首先在wsl中增加自己的网桥： docker network cre 阅读全文

摘要： 大数据场景下，联表远比微小型关系型数据库中使用的频繁。网上有句话： 传统数据库单机模式做Join的场景毕竟有限，也建议尽量减少使用Join。 然而大数据领域就完全不同，Join是标配，OLAP业务根本无法离开表与表之间的关联，对Join的支持成熟度一定程度上决定了系统的性能，夸张点说，'得Join者 阅读全文

摘要： 通过DF，Spark可以跟大量各型的数据源（文件/数据库/大数据）进行交互。前面我们已经看到DF可以生成视图，这就是一个非常使用的功能。 简单的读写流程如下： 通过read方法拿到DataFrameReader对象，与之类似的就有DataFrameWriter对象，通过DF的write方法拿到，通过 阅读全文

摘要： 学习一门开源技术一般有两种入门方法，一种是去看官网文档，比如Getting Started - Spark 3.2.0 Documentation (apache.org)，另一种是去看官网的例子，也就是%SPARK_HOME%\examples下面的代码。打开IDEA，选择File-Open... 阅读全文

摘要： SparkSession 从Spark2开始，Spark-SQL引入了SparkSession这个核心类，它是处理DataSet等结构数据的入口。在2.0之前，使用的是spark-core里的SparkContext。从前面的例子里也可以看到，程序一上来就要先创建SparkSession对象： Sp 阅读全文