会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
盛夏群岛
博客园
首页
新随笔
联系
订阅
管理
上一页
1
2
3
4
5
6
7
8
下一页
2020年3月5日
scala正则表达式
摘要: 常用语法规则 ^ 匹配输入字符串开始的位置。 $ 结尾 . 匹配除"\r\n"之外的任何单个字符。 [] 字符记 [^] 反向字符集 re* 前面的字符出现零次或多次,类似Java中的*; re+ 一次或多次,类似Java中的+; re? 零次或一次; re[n] n次 re[n,] 至少n次 re
阅读全文
posted @ 2020-03-05 12:33 盛夏群岛
阅读(503)
评论(0)
推荐(0)
2020年3月4日
SparkSQL(六)——案例实战
摘要: 首先我们的数据源如下: tbDate这张表记录的是时间信息; tbStockDetail这张表记录的订单的详细信息; tbStock这张表将订单与实践和地点两个维度的信息连接在一起。 数据属性如下: 每个订单可能包含多个货品,每个订单可以产生多次交易,不同的货品有不同的单价。也就是说: tbStoc
阅读全文
posted @ 2020-03-04 20:14 盛夏群岛
阅读(1861)
评论(0)
推荐(1)
group by
摘要: group by语句的作用在于限制聚集函数的作用范围,比如max(字段),如果不加group by语句,求出的是所有记录的最大值,而加上group by语句,max的作用范围就局限于相同字段的所有记录,求出的是这“一簇”记录的最大值。 但是group by 语句在使用的时候,要注意一些问题: 首先创
阅读全文
posted @ 2020-03-04 20:02 盛夏群岛
阅读(1533)
评论(0)
推荐(0)
2020年3月3日
SparkStreaming(一)——概述
摘要: SparkStreaming是什么? Spark Streaming用于流式数据的处理。Spark Streaming支持的数据输入源很多,例如:Kafka、Flume、Twitter、ZeroMQ和简单的TCP套接字等等。数据输入后可以用Spark的高度抽象原语如:map、reduce、join、
阅读全文
posted @ 2020-03-03 17:57 盛夏群岛
阅读(140)
评论(0)
推荐(0)
常用命令之——tar
摘要: tar命令 利用tar命令,可以把一大堆的文件和目录全部打包成一个文件,这对于备份文件或将几个文件组合成为一个文件以便于网络传输是非常有用的。 首先要弄清两个概念:打包和压缩。打包是指将一大堆文件或目录变成一个总的文件;压缩则是将一个大的文件通过一些压缩算法变成一个小文件。 为什么要区分这两个概念呢
阅读全文
posted @ 2020-03-03 16:50 盛夏群岛
阅读(600)
评论(0)
推荐(0)
常用命令之——cp
摘要: 适用于centos7.0操作系统 cp命令 cp命令用来将一个或多个源文件或者目录复制到指定的目的文件或目录。cp命令还支持同时复制多个文件,当一次复制多个文件时,目标文件参数必须是一个已经存在的目录,否则将出现错误。 语法:cp 选项 参数 常用选项组合有: -a,它等同于 -dpR d:当复制符
阅读全文
posted @ 2020-03-03 16:10 盛夏群岛
阅读(339)
评论(0)
推荐(0)
SparkSQL(五)——数据源
摘要: 通用加载保存方法 Spark SQL的默认数据源为Parquet格式。数据源为Parquet文件时,Spark SQL可以方便的执行所有的操作。修改配置项spark.sql.sources.default,可修改默认数据源格式。 此时,可以使用spark.read.load和spar.write.s
阅读全文
posted @ 2020-03-03 15:28 盛夏群岛
阅读(1331)
评论(0)
推荐(1)
利用maven将项目打成jar包
摘要: Scala文件在一般情况下,是不会被maven编译并打包;需要引入一个特殊的插件来解决该问题;maven在默认的情况下,只会编译Java文件夹的.java文件。如果想在其他文件夹下,编译其他类型的文件,可以参考这篇博文: https://blog.csdn.net/u010316188/articl
阅读全文
posted @ 2020-03-03 15:08 盛夏群岛
阅读(1550)
评论(0)
推荐(0)
2020年3月2日
作业(一)——码农的自我修养之必备技能
摘要: 必备技能之——正确的处事态度 这是一个非常抽象和宽泛的话题,不关乎具体的编码和开发。但是我认为,做任何事,先摆正态度,再去开始做事,就好比先选选定方向再去上路,只有这样才能到达预定的终点。 以下是我非常看重并努力践行的原则: 1.对事不对人,以事情为中心。尽自己所能,把事情办成,把事情办好。以纯粹地
阅读全文
posted @ 2020-03-02 15:23 盛夏群岛
阅读(421)
评论(0)
推荐(1)
idea出现误操作怎么恢复之前的代码
摘要: 在idea中写代码,有时候手速太快,比如错误地删除了一大片代码。那么,这个时候是否可以像word中那样撤销之前的编辑? 选中该文件,右键,在弹出的下拉框中,选择Local History->Show History,出现如下文件在不同时段的版本: 在左侧选中某个版本,右键,点击revert. 即可将
阅读全文
posted @ 2020-03-02 14:44 盛夏群岛
阅读(5777)
评论(0)
推荐(2)
上一页
1
2
3
4
5
6
7
8
下一页
公告