S++

千线一眼

导航

2022年9月18日 #

Flink的时间和窗口

摘要: Flink中的时间 及时流处理 是有状态流处理的扩展,实现及时流处理的 时间 起到了很大的作用。 在Flink的时间概念中主要分为下面两种: 事件时间: 事件时间是每个单独事件在其生产设备上发生的时间。 处理时间: 处理时间是指执行相应操作的机器的系统时间。 在Flink中为了衡量事件时间的进度,引 阅读全文

posted @ 2022-09-18 10:20 S++ 阅读(327) 评论(0) 推荐(0) 编辑

2022年9月16日 #

Flink的DataStream API

摘要: 对于Flink的 DataStream API 的使用无非是下面的流程: graph LR a[执行环境] b[数据源] c[转换] d[输出] a-->b b-->c c-->d 执行环境 Execution Environment 获取执行环境最简单最常见的方法就是: import org.ap 阅读全文

posted @ 2022-09-16 14:36 S++ 阅读(137) 评论(0) 推荐(0) 编辑

2022年9月7日 #

Flink入门

摘要: Flink快速上手 1-创建一个Maven项目 2-引入依赖 版本根据自己的情况和需求进行更改 <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="h 阅读全文

posted @ 2022-09-07 11:18 S++ 阅读(22) 评论(0) 推荐(0) 编辑

2022年7月21日 #

HBase —— Shell操作

摘要: HBase —— Shell操作 表的基本操作 创建表 create '表名', '列簇名', ... 查看表 list 删除表 ## 禁用表 disable "表名" ## 删除表 drop "表名" 添加数据 put '表名','ROWKEY','列簇名:列','值' 查看数据 get '表名' 阅读全文

posted @ 2022-07-21 08:18 S++ 阅读(73) 评论(0) 推荐(0) 编辑

2022年7月15日 #

HBase —— 入门

摘要: HBase —— 入门 HBase介绍 HBase是一个**分布式的、面向列的**开源数据库,该技术来源于 Fay Chang 所撰写的Google论文“Bigtable:一个结构化数据的分布式存储系统”。就像Bigtable利用了Google文件系统(File System)所提供的分布式数据存储 阅读全文

posted @ 2022-07-15 10:23 S++ 阅读(43) 评论(0) 推荐(0) 编辑

2022年7月12日 #

Hive —— HQL

摘要: Hive —— HQL Hive的操作语言HQL和SQL大同小异 数据库操作 -- 创建 CREATE DATABASE mydb; -- 使用 USE mydb; -- 删除 DROP DATABASE mydb; -- 强制删除 DROP DATABASE mydb CASCADE; 创建表 - 阅读全文

posted @ 2022-07-12 17:26 S++ 阅读(29) 评论(0) 推荐(0) 编辑

2022年7月11日 #

Hive —— 入门

摘要: Hive —— 入门 Hive介绍 Apache Hive是一款建立在Hadoop之上的开源**数据仓库系统,可以将存储在Hadoop文件中的结构化、半结构化数据文件映射为一张数据库表**,基于表提供了一种类似SQL的查询模型,称为**Hive查询语言( HQL),用于访问和分析存储在Hadoop文 阅读全文

posted @ 2022-07-11 16:27 S++ 阅读(48) 评论(0) 推荐(0) 编辑

2022年7月9日 #

hadoop入门(15):YARN

摘要: YARN YARN官方文档 YARN的介绍 YARN是一个==通用==的**资源管理系统和调度平台** 资源管理系统:集群的硬件资源,和程序运行相关,比如内存、CPU等 调度平台:多个程序同时申请计算,资源如何分配,调度的规则/算法。 YARN的架构 上图中我们可以清晰的看到YRAN的三大组件: 集 阅读全文

posted @ 2022-07-09 15:54 S++ 阅读(37) 评论(0) 推荐(0) 编辑

Redis总结

摘要: Redis总结 Key | 命令 | 描述 | | : | : | | DEL key | 删除键值 | | DUMP key | 序列化键值 | | EXISTS key | 检查key是否存在 | | EXPIRE key 秒 | 设置key的过期时间,秒格式 | | PEXPIRE key 毫 阅读全文

posted @ 2022-07-09 08:32 S++ 阅读(25) 评论(0) 推荐(0) 编辑

2022年7月7日 #

Git总结

摘要: Git总结 git命令参考 安装Git # Centos yum install curl-devel expat-devel gettext-devel openssl-devel zlib-devel perl-devel yum install git 获取本地仓库 # 1. 进入一个空目录, 阅读全文

posted @ 2022-07-07 20:07 S++ 阅读(17) 评论(0) 推荐(0) 编辑