清明雨下

摘要： 转自 https://www.jb51.net/article/165666.htmpublic static void getSplitFile(String file,int count){ //预分配文件所占用的磁盘空间，在磁盘创建一个指定大小的文件，“r”表示只读，“rw”支持随机读写 tr 阅读全文

摘要： spark sql 加载hudi文件是 注意 加 /* spark.read.laod(path:String) 不要用 spark.read.laod(path:_*) sparksql源码 /** * Loads input in as a `DataFrame`, for data sourc 阅读全文

摘要： http://cache.baiducontent.com/c?m=O4w0LUg7mvVm8JHp5IC3WX8tPTLD7U50KKuSxVEp71ihm8DZks4Hoyp59-ozMH-qlP6205WzNPieyn69IdEB8MFar95k4lLn8iywLw9F4kgKfsxufh6U 阅读全文

摘要： mvn -v 查看maven版本 mvn -f pom文件路径 -P test|pre|prd -Dmaven.test.failure.ignore=true -Dfile.encoding=UTF-8 package|clean|install|compile 阅读全文

摘要： 普通的包版本冲突使用dependencyAnalysis 插件，在相应的依赖中exclude掉即可如果本地打包成功，和环境提供的包冲突使用 shade<build> <plugins> <plugin> <groupId>org.codehaus.mojo</groupId> <artifactId 阅读全文

摘要： ScriptEvaluator 代码片段编译执行 ExpressionEvaluator 表达式编译执行 阅读全文

摘要： $简单的字符串替换，应用场景： 传数据库对象：如表名 select * from ${tableA} where....... tableA传入 user_info_tab > select * from user_info_tab #预编译 对替换的字段总是加上 ‘’ select * from 阅读全文

摘要： 生产sparksql。对于时序性数据，执行速度很慢，定位思路： sparksql配置 》各个执行时间段消耗明细 》差异 spark.read.parquet(hdfsPath: _*).createOrReplaceTempView(modelCode)下楼.filter(_.length > 0) 阅读全文

摘要： 情况1：没设置contentLenth InputStream resourceAsStream = ExcelUtils.class.getResourceAsStream("/template/" + fileName);response.setHeader("Content-Length", 阅读全文

摘要： object listTest { def main(args: Array[String]): Unit = { val list = List(1,2,3) // :: 用于的是向队列的头部追加数据,产生新的列表, x::list,x就会添加到list的头部 println(4 :: list) 阅读全文