会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
凯尔哥
执着的蜗牛
博客园
首页
新随笔
联系
管理
订阅
上一页
1
2
3
4
5
下一页
2021年8月23日
spark中stage划分的关键源码图解
摘要: 
阅读全文
posted @ 2021-08-23 07:17 凯尔哥
阅读(37)
评论(0)
推荐(0)
2021年2月19日
大数据集群中各个服务的启动与关闭
摘要: tomcat 三个节点都安装了tomcat 启动tomcat cd /usr/tomcat/apache-tomcat-7.0.57/bin/ ./startup.sh 停止tomcat ./shutdown.sh 查看tomcat日志信息 tail -200f /usr/tomcat/apache
阅读全文
posted @ 2021-02-19 08:49 凯尔哥
阅读(573)
评论(0)
推荐(0)
2021年2月12日
通俗地解释kafka中的零拷贝(转载)
摘要: https://blog.csdn.net/qq_33342248/article/details/108281826
阅读全文
posted @ 2021-02-12 08:55 凯尔哥
阅读(100)
评论(0)
推荐(0)
2021年1月23日
阶段一模块四(zookeeper)
摘要: zookeeper作业 基于Zookeeper实现简易版配置中心要求实现以下功能 创建一个Web项目,将数据库连接信息交给Zookeeper配置中心管理,即:当项目Web项目启动时,从Zookeeper进行MySQL配置参数的拉取 要求项目通过数据库连接池访问MySQL(连接池可以自由选择熟悉的)
阅读全文
posted @ 2021-01-23 10:53 凯尔哥
阅读(406)
评论(0)
推荐(0)
阶段一模块四(hbase)
摘要: Hbase作业 在社交网站,社交APP上会存储有大量的用户数据以及用户之间的关系数据,比如A用户的好友列表会展示出他所有的好友,现有一张Hbase表,存储就是当前注册用户的好友关系数据,如下 需求 使用Hbase相关API创建一张结构如上的表 删除好友操作实现(好友关系双向,一方删除好友,另一方也会
阅读全文
posted @ 2021-01-23 10:38 凯尔哥
阅读(259)
评论(0)
推荐(0)
2021年1月17日
hbase数据读写流程
摘要: hbase写数据流程 ⾸先从 zk找到meta表的region位置,然后读取meta表中的数据,meta表中存储了用户表的region信息 根据namespace、表名和rowkey信息。找到写入数据对应的 region信息 找到这个region对应的regionServer,然后发送请求 把数据分
阅读全文
posted @ 2021-01-17 09:01 凯尔哥
阅读(483)
评论(0)
推荐(0)
详解hbase的寻址过程(0.96版本以后,2.0版本以前)
摘要: 客户端发送查询命令 scan 'user', {COLUMNS => 'base_info', STARTROW => 'rk1', ENDROW => 'rk3'} 寻址过程 1. 客户端请求zk,获取meta表所在位置 2. zk返回节点位置(假设在hadoop01节点) 3. 客户端访问had
阅读全文
posted @ 2021-01-17 08:15 凯尔哥
阅读(483)
评论(0)
推荐(0)
2021年1月16日
有关hbase的面试题
摘要: 背景 有一个超级大的文件,里面存放的全都是url,样本数据(url.txt)如下: www.baidu.com www.jd.com www.taobao.com ...... 需求 现在需要实时地判断出某个url是否包含在这个文件中,如何实现? 思路分析 1. 要实现查询速度快,肯定是要将所有的u
阅读全文
posted @ 2021-01-16 15:44 凯尔哥
阅读(171)
评论(0)
推荐(0)
sqoop知识总结
摘要: sqoop核心知识点
阅读全文
posted @ 2021-01-16 14:18 凯尔哥
阅读(574)
评论(0)
推荐(0)
flume知识总结
摘要: flume核心知识点
阅读全文
posted @ 2021-01-16 14:14 凯尔哥
阅读(370)
评论(0)
推荐(0)
上一页
1
2
3
4
5
下一页
公告