随笔分类 -  大数据技术

厦门大学 林子雨老师
摘要:package org.example; import org.apache.hadoop.hbase.NamespaceDescriptor; import org.apache.hadoop.hbase.TableName; import org.apache.hadoop.hbase.clie 阅读全文
posted @ 2023-08-26 00:14 会秃头的小白 阅读(70) 评论(0) 推荐(0)
摘要:hbase报错:hbase shell能打开 网页也能打开 但是一执行命令就开始报错。 原因:hadoop的安全模式打开。 解决方法:关闭安全模式 ,再重新启动HBase就可以了。 具体的命令: 1、查看namenode是否是安全状态 hadoop dfsadmin -safemode get Sa 阅读全文
posted @ 2023-08-20 22:55 会秃头的小白 阅读(947) 评论(0) 推荐(0)
摘要:1.NodeCache监听代码: @Test public void testNodeCache() throws Exception { //1.创建NodeCache对象 NodeCache nodeCache = new NodeCache(client,"/app1"); //2.注册监听 阅读全文
posted @ 2023-08-04 17:43 会秃头的小白 阅读(66) 评论(0) 推荐(0)
摘要:/* * 删除节点 * 1.删除单个节点 * 2.删除带有子节点的节点 * 3.必须成功的删除 * 4.回调 * * */ @Test public void delete1() throws Exception{ // 1.删除单个节点 client.delete().forPath("/app1 阅读全文
posted @ 2023-08-04 17:04 会秃头的小白 阅读(317) 评论(0) 推荐(0)
摘要:*修改数据 * 1.修改数据 * 2.根据版本修改 * * * */ @Test public void testSet() throws Exception{ Stat stat = new Stat(); client.getData().storingStatIn(stat).forPath( 阅读全文
posted @ 2023-08-04 16:57 会秃头的小白 阅读(25) 评论(0) 推荐(0)
摘要:/** * 1.查询数据 :get * 2.查询子节点 : ls * 3.查询节点的状态信息 :ls -s * * */ @Test public void testGet1() throws Exception{ //1.查询数据 :get byte[] data = client.getData 阅读全文
posted @ 2023-08-04 16:52 会秃头的小白 阅读(52) 评论(0) 推荐(0)
摘要:import org.apache.curator.RetryPolicy; import org.apache.curator.framework.CuratorFramework; import org.apache.curator.framework.CuratorFrameworkFacto 阅读全文
posted @ 2023-08-04 16:44 会秃头的小白 阅读(62) 评论(0) 推荐(0)
摘要: 阅读全文
posted @ 2023-08-04 16:44 会秃头的小白 阅读(23) 评论(0) 推荐(0)
摘要:概述 zookeeper的安装: 百度网盘资料链接: https://pan.baidu.com/s/136WmZXSNacZMcKIgf-3sHA&pwd=1234 把这个文件传入虚拟机中 我用的是finashell 直接进行上传压缩包 然后解压 tar -zxvf apache-zookeepe 阅读全文
posted @ 2023-08-03 17:10 会秃头的小白 阅读(26) 评论(0) 推荐(0)
摘要:集群:多个人干同样一件事情 分布式:多个人干不同的事情,合起来时一件事情 两个人都是做饭,洗菜,切菜 所以他两个是一个集群 雇人洗菜,切菜,自己做饭,三个人共同干做饭一件事,这就是分布式 集群分布式系统的有点: 阅读全文
posted @ 2023-08-03 15:51 会秃头的小白 阅读(16) 评论(0) 推荐(0)
摘要:概念: 客户端命令: 连接zookeeper的服务端: ./zkCli.sh -server localhost:2181 退出: quit 查看当前节点下的子节点:ls / 创建节点: creat 得到子节点中的数据:get 设置子节点中的数据:set 删除没有数据的子节点 : delete 删除 阅读全文
posted @ 2023-08-03 15:43 会秃头的小白 阅读(17) 评论(0) 推荐(0)
摘要:RDBMS: HBASE: HDFS与HBase对比: Hive与HBase对比: Hive与HBase总结 阅读全文
posted @ 2023-08-02 09:09 会秃头的小白 阅读(11) 评论(0) 推荐(0)
摘要:应用场景:只要有海量数据存储,而且需要快速写入以及快速读取 发展历程: 特点: 阅读全文
posted @ 2023-08-02 08:51 会秃头的小白 阅读(7) 评论(0) 推荐(0)
摘要:Hive 常用的内置函数 --查看内置函数 show functions; --查看函数的用法 describe function extended count; String Functions 字符串函数 select length("itcast");--长度 select reverse(" 阅读全文
posted @ 2023-07-31 10:48 会秃头的小白 阅读(37) 评论(0) 推荐(0)
摘要:创建表 CREATE TABLE t_usa_covid19( count_date string, county string, state string, fips int, cases int, deaths int) row format delimited fields terminate 阅读全文
posted @ 2023-07-31 10:23 会秃头的小白 阅读(174) 评论(0) 推荐(0)
摘要:数据类型: 建表 create database itheima; --1.创建一张表 -- 表名 --字段 名称 类型 顺序 --字段之间的分隔符 create table itheima.t_archer( id int, name string , hp_max int, mp_max int 阅读全文
posted @ 2023-07-27 17:16 会秃头的小白 阅读(85) 评论(0) 推荐(0)
摘要:架构图 Hive组件 阅读全文
posted @ 2023-07-26 12:08 会秃头的小白 阅读(13) 评论(0) 推荐(0)
摘要:什么是Hive 为什么使用Hive Hive和Hadoop的关系 阅读全文
posted @ 2023-07-26 11:52 会秃头的小白 阅读(7) 评论(0) 推荐(0)
摘要:数仓开发语言概述 SQL语言介绍 数仓与SQL 结构化数据 二维表结构 SQL语法分类 阅读全文
posted @ 2023-07-26 11:29 会秃头的小白 阅读(34) 评论(0) 推荐(0)
摘要:面向主题性 集成性 非易失性,非异变性 时变性 阅读全文
posted @ 2023-07-26 11:10 会秃头的小白 阅读(10) 评论(0) 推荐(0)