zourui4271

hadoop namenode的工作机制

摘要： hadoop 集群中有两种节点，一种是namenode，还有一种是datanode。其中datanode主要负责数据的存储，namenode主要负责三个功能，分别是(1)管理元数据 (2)维护目录树 (3)响应客户请求首先介绍下，元数据格式 hdfs在外界看来就是普通的文件系统，可以通过路径进行阅读全文

posted @ 2020-01-22 11:09 zourui4271 阅读(348) 评论(0) 推荐(0)

flink web ui 介绍

摘要： https://blog.csdn.net/magic_kid_2010/article/details/97135426 阅读全文

posted @ 2020-01-22 10:16 zourui4271 阅读(1078) 评论(0) 推荐(0)

HDFS的操作

摘要： https://www.cnblogs.com/zhangfuxiao/p/11374454.html 阅读全文

posted @ 2020-01-20 17:23 zourui4271 阅读(93) 评论(0) 推荐(0)

邵奈一的博客

摘要： https://blog.csdn.net/shaock2018/article/list/4 阅读全文

posted @ 2020-01-20 16:56 zourui4271 阅读(125) 评论(0) 推荐(0)

HIVE 这些基础知识

摘要：大数据江湖公众号-大数据江湖，现码农，热爱技术，但并不局限于技术大数据江湖公众号-大数据江湖，现码农，热爱技术，但并不局限于技术大数据江湖公众号-大数据江湖，现码农，热爱技术，但并不局限于技术大数据江湖大数据江湖大数据江湖公众号-大数据江湖，现码农，热爱技术，但并不局限于技术公众阅读全文

posted @ 2020-01-19 12:10 zourui4271 阅读(242) 评论(0) 推荐(0)

为什么Cloudera要创建Hadoop安全组件Sentry

摘要： https://blog.csdn.net/qq_21383435/article/details/83388426 阅读全文

posted @ 2020-01-17 17:03 zourui4271 阅读(149) 评论(0) 推荐(0)

如何在Hue中使用Sentry

摘要： https://blog.51cto.com/14049791/2320839 阅读全文

posted @ 2020-01-17 17:00 zourui4271 阅读(329) 评论(0) 推荐(0)

hive的分区

摘要： https://www.cnblogs.com/yongjian/p/6640951.html Hive分区的概念与传统关系型数据库分区不同。传统数据库的分区方式：就oracle而言，分区独立存在于段里，里面存储真实的数据，在数据进行插入的时候自动分配分区。 Hive的分区方式：由于Hive实际是阅读全文

posted @ 2020-01-15 19:46 zourui4271 阅读(440) 评论(0) 推荐(0)

yarn工作流程

摘要： 1. client端向ResourceManager提交应用程序, 也就是client端会将 jar包,参数等数据上传到hdfs上的某路径下; 2. resourceManager将此应用程序添加到任务队列中; 3. 等待资源充沛时, resourceManager为该应用程序分配第一个contai 阅读全文

posted @ 2019-12-14 21:50 zourui4271 阅读(306) 评论(0) 推荐(0)

技术的突破

摘要：在知乎看到一个问题，相当有代表意义，即技术人员本身的技术发展瓶颈的突破问题。具体问题如下，通常情况下，技术人员在某一领域工作3-5年后，会成为团队内或者公司里的核心技术骨干，这个时候他们也会面临几个问题：技术学习的困惑：当达到一个瓶颈时，可以学习的参考系越来越少，首先是因为高端技术人才呈现倒金字塔形阅读全文

posted @ 2019-12-10 09:39 zourui4271 阅读(143) 评论(0) 推荐(0)

公告