scala - 随笔分类 - 架构艺术

摘要：查看当前类所有方法：alt+7，如下图阅读全文

posted @ 2021-12-03 01:01 架构艺术阅读(38) 评论(0) 推荐(0)

摘要：1.点击"setings" 2.选择"plugins",然后选择Browse repositories 3.在搜索框中输入"lombok",点击"lombok Plugin" , 然后点击"inatall"进行插件下载. 4.下载成功后,在pom.xml文件中编写lombok的版本控制 <depen 阅读全文

posted @ 2021-11-21 23:42 架构艺术阅读(1002) 评论(0) 推荐(0)

Spark 读取csv文件操作，option参数解释

摘要：import com.bean.Yyds1 import org.apache.spark.sql.SparkSession object TestReadCSV { def main(args: Array[String]): Unit = { val spark = SparkSession.b 阅读全文

posted @ 2021-11-21 23:39 架构艺术阅读(3913) 评论(0) 推荐(0)

特征feature及结果label的提取--sparkRDD转为LabelPoint

摘要：题目: 将数据的某个特征作为label, 其他特征(或其他某几个特征)作为Feature, 转为LabelPoint 引用： https://www.cnblogs.com/honey01/p/8044215.html 首先构造数据 import scala.util.Random.{setSeed 阅读全文

posted @ 2021-11-21 11:01 架构艺术阅读(211) 评论(0) 推荐(0)

IDEA2020.3.4激活

摘要：1、首先下载破解补丁，是zip文件。注意：激活后一定不要删除该文件，找个位置放着就行，不然会影响激活状态 https://www.openwebsite.cn/fujian/BetterIntelliJ.zip 2.先随意建个(空)项目并打开,解压文件后里面有个BetterIntelliJ.zip压阅读全文

posted @ 2021-11-15 16:06 架构艺术阅读(8934) 评论(0) 推荐(1)

spark-submit提交streaming任务

摘要：#!/bin/bash master="yarn-cluster" current=`cd $(dirname $0)/../;pwd` yarn application -kill `yarn application -list | grep HwSwOneMinJob | awk '{print 阅读全文

posted @ 2021-10-27 16:38 架构艺术阅读(305) 评论(0) 推荐(0)

maven打包zip包含bin下启动脚本

摘要：在idea上测试有效： pom.xml打包 <build> <sourceDirectory>src/main/scala</sourceDirectory> <testSourceDirectory>src/test/scala</testSourceDirectory> <resources> 阅读全文

posted @ 2021-10-27 16:33 架构艺术阅读(285) 评论(0) 推荐(0)

IDEA快捷键

摘要：Ctrl 快捷键介绍 Ctrl + F 在当前文件进行文本查找（必备） Ctrl + R 在当前文件进行文本替换（必备） Ctrl + Z 撤销（必备） Ctrl + Y 删除光标所在行或删除选中的行（必备） Ctrl + X 剪切光标所在行或剪切选择内容 Ctrl + C 复制光阅读全文

posted @ 2021-10-26 18:34 架构艺术阅读(32) 评论(0) 推荐(0)

随笔分类 - scala