随笔分类 - 大数据
Big data, small guy.
摘要:2019-06-11 关键字:Hadoop 内存存储、HDFS 存储结构、LAZY PERSIST 我们的 HDFS 啊,它的定位就是一个文件系统,是用业存储文件的。那 HDFS 对于文件的存储方式有两种 1、内存存储 2、异构存储 这篇文章,我们就来简单聊聊 HDFS 的 “内存存储”。 首先,我
阅读全文
摘要:Hadoop 上的 RPC 通信小实例,简单易懂。
阅读全文
摘要:2019-05-22 关键字:无 花了一周多的时间学习了李智慧老师在极客时间上开设的《从零开始学习大数据》课程后感触良多,特意花了一天的时间写了一份总结,算是为我的这份课程的学习告个别。 文章有点长,近 9000 字,被发表在简书上,就在这里贴出相关链接了。 https://www.jianshu.
阅读全文
摘要:2019-07-16 关键字:数据库设计、表设计、主键、联合主键、候选键、自然键 在数据库中“键”是一个很重要的概念。基本上只要我们谈论某张表,就一定离不开讨论它的各种键。而键的种类也不少,如果对各种键的概念分不清,在和他人讨论时可能就会不太和谐。因此,这篇文章主要记载一下各种键的名称及概念。 常见
阅读全文
摘要:指导初次接触者快速了解并应用 Sqoop 到学习或生产系统中去。
阅读全文
摘要:满满的 apache 风格。
阅读全文
摘要:啊哈,原来 aggregate 函数是这个意思! 拒绝枯燥的教科书式讲解。
阅读全文
摘要:站在初学者的角度简单探究一下 Scala 中的主构造器与辅助构造器。
阅读全文
摘要:大白话 Scala 控制抽象。Scala 的控制抽象原来很简单!
阅读全文
摘要:本篇文章简要介绍了消息队列于消息系统中的意义,并对大数据开发行业中人气较高的消息队列 Kafka 作了简要的介绍。
阅读全文
摘要:2018-12-14 关键词: Zookeeper入门介绍 、 Zookeeper是什么、Zookeeper架构解析、Zookeeper应用场景、Zookeeper有什么用 本篇文章系笔者依据当前所掌握的知识对 Zookeeper 作出的一个启蒙式介绍,不对文章的绝对、完全正确性负责。 Zookee
阅读全文
摘要:《Hive口袋手册》是本人根据当前所学知识以及在学习过程中的笔记整理出来的一本 “基础知识参考手册”。适用于对 Hive 已有一定了解的同学,也可作为在面试前的知识点回顾手册。
阅读全文
摘要:2018-12-20 关键词: HBase是什么 、 什么是HBase 、 HBase基本概念 本篇文章系本人根据目前所掌握的知识对 HBase 的基本概念作出的一篇轻简式科普文章。关于文章所述的知识点本人不保证其绝对、完全正确性。 1、从一幅画说起 绘画界有一支流派被称为 “印象派” ,印象派画系
阅读全文

浙公网安备 33010602011771号