上一页 1 ··· 13 14 15 16 17 18 19 20 21 ··· 30 下一页
摘要: 素材:https://www.cnblogs.com/duanxz/p/5229352.html 一、CAP 一致性(C):在分布式系统中的所有数据备份,在同一时刻是否同样的值。 可用性(A):在集群中一部分节点故障后,集群整体是否还能响应客户端的读写请求。 分区容忍性(P):以实际效果而言,分区相 阅读全文
posted @ 2020-11-18 21:17 PEAR2020 阅读(520) 评论(0) 推荐(0)
摘要: 一、使用hbase shell 导入数据 1. hive-hbase 通过hive导入(处理的)数据 hdfs存放数据,hive建立外部表tab1,建立外部表tab_hbase映射hbase中的某个表,最后insert into tab_hbase select XXX from tab1 例1: 阅读全文
posted @ 2020-11-18 18:03 PEAR2020 阅读(556) 评论(0) 推荐(0)
摘要: 一、认识B、B+树 B树: 叶节点不构成有序链表 树的高度很高时,磁盘访问的次数增加,访问磁盘的速度慢 B+树: 非叶结点仅具有索引作用,跟记录有关的信息均存放在叶结点中; 树的所有叶结点构成一个有序链表,可以按照关键码排序的次序遍历全部记录; 遍历整棵树可以一次性遍历所有叶子节点(B树只能进行中序 阅读全文
posted @ 2020-11-18 17:55 PEAR2020 阅读(864) 评论(0) 推荐(0)
摘要: 一、第一版本 二、第二版本 (一)优化架构 (二)优化运行时间 1. 测算运行时间,推算什么流程耗时间,有问题。 时间戳相减,测算运行时间 创建对象慢,考虑连接池 2. 优化流程 1)只有一个连接:把Connection对象放在static代码块中创建(静态变量和静态代码块按照写的顺序执行) 想在静 阅读全文
posted @ 2020-11-18 17:52 PEAR2020 阅读(381) 评论(0) 推荐(0)
摘要: 一、导入数据 create_namespace 'exam' create 'exam:mytest','info' hdfs dfs -put /opt/data/quizz/UserBehaviorTestHbase.csv /quizz/data hbase org.apache.hadoop 阅读全文
posted @ 2020-11-18 15:21 PEAR2020 阅读(355) 评论(0) 推荐(0)
摘要: 1.开启使用内联公式 2.使用方法 $\textcolor{red}{这里输入你要改变颜色的文字} $ 3.颜色大全 $\textcolor{GreenYellow}{GreenYellow} $ $\textcolor{Yellow}{Yellow}$ $\textcolor{Goldenrod} 阅读全文
posted @ 2020-11-18 11:01 PEAR2020 阅读(10682) 评论(0) 推荐(3)
摘要: 原来: CREATE EXTERNAL TABLE csvtable2( symbol string, tickSequence string, timeStamp string, tickdata STRUCT< BID3_SIZE: string, ASK10_SIZE: string> ) R 阅读全文
posted @ 2020-11-17 11:09 PEAR2020 阅读(946) 评论(0) 推荐(0)
摘要: csv 文件拖进 notepad++ 然后 全选剪切 => “编码” => UTF8编码 => 粘贴 => 保存 hdfs dfs -rm /app/data/exam/meituan_waimai_meishi.csv hdfs dfs -put /opt/data/quizz/meituan_w 阅读全文
posted @ 2020-11-17 10:27 PEAR2020 阅读(1114) 评论(0) 推荐(0)
摘要: 见:https://blog.csdn.net/weixin_42446602/article/details/99226752 阅读全文
posted @ 2020-11-15 13:58 PEAR2020 阅读(116) 评论(0) 推荐(0)
摘要: 一、静态分区和动态分区的区别 二、动态分区的设置 必须开启: set hive.exec.dynamic.partition=true; ## 是开启动态分区 set hive.exec.dynamic.partition.mode=nonstrict; ## 这个属性默认值是strict,就是要求 阅读全文
posted @ 2020-11-13 16:13 PEAR2020 阅读(320) 评论(0) 推荐(0)
上一页 1 ··· 13 14 15 16 17 18 19 20 21 ··· 30 下一页