moon__light

摘要： Spring Boot 是一个快速开发框架，整合协调了包括 HTTP 服务器在内的许多三方框架，采用注解化的方式简化配置，其目的就是简化单个 Java 程序的开发和配置，使 Java 程序的开发更快速简便 Spring Cloud 更像是一个工具箱，提供了很多工具，帮助构建分布式系统，实现微服务，这 阅读全文

摘要： 目录 文件结构 pom.xml 主程序 Controller Service 异常处理 配置 自定义注解以及 AOP 拦截器 ApplicationRunner 定时调度 logback-spring.xml 配置日志 Actuator Prometheus 文件结构 pom.xml <?xml v 阅读全文

摘要： ###通过 spring initializr 创建 Spring Boot 项目 打开网站 https://start.spring.io/ 填写项目名称，spring boot 版本，编程语言，Dependency 等信息 然后可以生成包含代码和配置的 zip 包，可以导入 IDE ###通过 阅读全文

摘要： 配置本地的用户和邮箱 git config --local user.name "username" git config --local user.email username@mail.com 切换分支 git checkout dev 创建并切换分支 git checkout -b priva 阅读全文

摘要： ###基本原理 (YARN 模式) 每个 stage 会有多个 partition，每个 partition 由 Executor 的一个 Task 执行 stage 的默认 partition 数量由 spark.default.parallelism 参数决定，默认由 parent stage 阅读全文

摘要： ###准备 HDP-2 的安装文档 https://docs.cloudera.com/HDPDocuments/Ambari-2.6.2.2/bk_ambari-installation/content/ch_Getting_Ready.html HDP-3 的安装文档 https://docs. 阅读全文

摘要： ###安装 sudo apt-get install postgresql 安装完成后，默认会： 创建名为 postgres 的 Linux 用户 创建名为 postgres、不带密码的默认数据库账号作为数据库管理员 创建名为 postgres 的数据库 安装完成后的一些默认信息如下： config 阅读全文

摘要： 可以申请的最大内存 启动 Spark Job 之前要先检查需要的内存是否太大，这部分代码在 // resource-managers\yarn\src\main\scala\org\apache\spark\deploy\yarn\Client.scala private def verifyClu 阅读全文

摘要： 假设要在当前目录包括所有子目录下，搜索所有包含 "Hello" 的文件 find . -exec grep "Hello" {} \; -print 阅读全文

摘要： ###查看 Linux 版本 uname -a lsb_release -a cat /etc/lsb_release cat /etc/issue cat /proc/version 不同版本的命令可能不一样 ###查看 CPU 信息 lscpu cat /proc/cpuinfo 会显示出物理核 阅读全文