摘要：
【02】Kafka主题的增、删、查 增： bin/kafka-topics.sh --create --topic flink_kafka --partitions 3 --replication-factor 2 --bootstrap-server node1:9092,node2:9092,n 阅读全文
posted @ 2021-11-19 03:13
空归
阅读(60)
评论(0)
推荐(0)
摘要：
02. 字符串转Interger Integer.valueOf( "123") 将字符串转成Integer类型 Integer.parseInt("123") 将字符串转成有符号的int类型 03. 富函数（Rich Functions） “富函数”是DataStream API提供的一个函数类的 阅读全文
posted @ 2021-11-19 03:05
空归
阅读(49)
评论(0)
推荐(0)
摘要：
RDD, DataFrame, DataSet相互装换 假设有个样例类：case class Emp(name: String),它们相互转换如下： 1. RDD →DataFrame 和 RDD →DataSet RDD →DataFrame：rdd.toDF("name") RDD →DataS 阅读全文
posted @ 2021-11-19 02:58
空归
阅读(283)
评论(0)
推荐(0)
摘要：
 阅读全文
posted @ 2021-11-19 01:20
空归
阅读(29)
评论(0)
推荐(0)
摘要：
数据源-source 1. 加载本地集合，转换为RDD import org.apache.spark.rdd.RDD import org.apache.spark.{SparkConf, SparkContext} //parallelize :并行化，平行化 object Paralleliz 阅读全文
posted @ 2021-11-19 01:16
空归
阅读(111)
评论(0)
推荐(0)
摘要：
Hadoop HDFS的操作命令类似Linux的shell对文件的操作，如ls、mkdir、rm等 Hadoop提供了文件系统的shell命令使用格式如下： hadoop fs #既可以操作HDFS,也可以操作本地系统 hdfs dfs #只能操作HDFS系统 1.ls命令 格式：hadoop fs 阅读全文
posted @ 2021-11-19 00:46
空归
阅读(440)
评论(0)
推荐(0)
浙公网安备 33010602011771号