• 博客园logo
  • 会员
  • 众包
  • 新闻
  • 博问
  • 闪存
  • 赞助商
  • HarmonyOS
  • Chat2DB
    • 搜索
      所有博客
    • 搜索
      当前博客
  • 写随笔 我的博客 短消息 简洁模式
    用户头像
    我的博客 我的园子 账号设置 会员中心 简洁模式 ... 退出登录
    注册 登录
 






八旗格格的家

 
 

Powered by 博客园
博客园 | 首页 | 新随笔 | 联系 | 订阅 订阅 | 管理
上一页 1 2 3 4 5 6 下一页

2020年5月5日

Streaming的单词统计
摘要: 1 package com.bawei.stream 2 3 import org.apache.spark.streaming.dstream.{DStream, ReceiverInputDStream} 4 import org.apache.spark.streaming.{Seconds, 阅读全文
posted @ 2020-05-05 17:27 八旗格格的家 阅读(184) 评论(0) 推荐(0)
 
Stream整合Flume
摘要: 1 package com.bawei.stream 2 3 import java.net.InetSocketAddress 4 5 import org.apache.spark.storage.StorageLevel 6 import org.apache.spark.streaming. 阅读全文
posted @ 2020-05-05 17:25 八旗格格的家 阅读(194) 评论(0) 推荐(0)
 
SparkStreaming进行 生产消费的单词统计
摘要: 1 package com.bawei.review01 2 3 import java.net.InetSocketAddress 4 5 import org.apache.kafka.clients.consumer.ConsumerRecord 6 import org.apache.kaf 阅读全文
posted @ 2020-05-05 17:23 八旗格格的家 阅读(206) 评论(0) 推荐(0)
 
sparkcore sparksql单词统计—切分-聚合
摘要: 1 package com.bawei.core 2 3 import org.apache.spark.rdd.RDD 4 import org.apache.spark.{SparkConf, SparkContext} 5 6 /** 7 * 单词统计 8 9 */ 10 object Spa 阅读全文
posted @ 2020-05-05 17:20 八旗格格的家 阅读(336) 评论(0) 推荐(0)
 
模拟实时获取监控得到的车牌数据,并对车牌信息进行处理
摘要: 1 题目二:模拟实时获取监控得到的车牌数据,并对车牌信息进行处理(共计100分) 2 车牌信息(可自行构造): 3 京R916HA 沪A88888 京CDQ823 苏E799QV 4 贵A7W79N 冀J7CL78 京CFC828 京AL250E 5 浙A972C5 京S3K30E 京CR8106 阅读全文
posted @ 2020-05-05 17:17 八旗格格的家 阅读(600) 评论(0) 推荐(0)
 
四率一直_sparkcore
摘要: 1 package com.bawei.review01 2 3 import org.apache.spark.rdd.RDD 4 import org.apache.spark.sql.{DataFrame, SparkSession} 5 6 case class StuScore(id:In 阅读全文
posted @ 2020-05-05 17:15 八旗格格的家 阅读(132) 评论(0) 推荐(0)
 

2020年5月3日

zk使用笔记(zookeeper)
摘要: 1 # zk 2 3 【【zookeeper】】 4 /opt/zookeeper-3.4.10/conf/zoo_sample.cfg 5 mv zoo_sample.cfg zoo.cfg 6 dataDir=/opt/zookeeper-3.4.10/data 7 server.1=node1 阅读全文
posted @ 2020-05-03 21:14 八旗格格的家 阅读(242) 评论(0) 推荐(0)
 
KafKa使用笔记
摘要: 1 ## KafKa使用笔记 2 3 #### 快速开始 4 5 关闭防火墙 6 7 版本:kafka_2.12-1.0.0.tgz 8 9 zookeeper集群:hdp1,hdp2,hdp3 10 11 Kafka集群搭建:hdp1,hdp2,hdp3 12 13 ##### 一、配置文件 14 阅读全文
posted @ 2020-05-03 21:11 八旗格格的家 阅读(130) 评论(0) 推荐(0)
 
使用Spark SQL完成某省成人身高采集到的部分数据
摘要: 1 package com.holiday01 2 3 import org.apache.spark.sql.SparkSession 4 5 object Stature_sparksql { 6 7 def main(args: Array[String]): Unit = { 8 //资源的 阅读全文
posted @ 2020-05-03 12:25 八旗格格的家 阅读(421) 评论(0) 推荐(0)
 

2020年5月2日

隐式装换
摘要: 1 package com.ds 2 3 import org.apache.spark.sql.{Dataset, SparkSession} 4 5 object DataSet { 6 7 def main(args: Array[String]): Unit = { 8 val spark: 阅读全文
posted @ 2020-05-02 10:15 八旗格格的家 阅读(143) 评论(0) 推荐(0)
 
上一页 1 2 3 4 5 6 下一页