随笔分类 -  hadoop

数仓 & 数据湖小结
摘要:看了几篇文章,觉得写的都不错,此处先不缀笔: 先贴几篇比较好的文章, 后续谈下自己的看法 说说数仓: https://www.jianshu.com/p/0a11c7f3cec2 数仓、数据湖、数据中台: https://segmentfault.com/a/1190000039970684 《大数 阅读全文
posted @ 2021-09-28 16:08 lshan 阅读(71) 评论(0) 推荐(0)
AmazonS3 替换HDFS 方案
摘要:S3 VS HDFS (个人看中S3的价格) 参考:1 https://blog.csdn.net/u014120684/article/details/41958377?utm_medium=distribute.pc_relevant.none-task-blog-OPENSEARCH-5.co 阅读全文
posted @ 2021-01-27 12:21 lshan 阅读(1185) 评论(0) 推荐(0)
hadoop dev docker 
摘要:https://hub.docker.com/r/sequenceiq/hadoop-docker/tags overview #Apache Hadoop 2.7.0 Docker image Note: this is the master branch - for a particular H 阅读全文
posted @ 2020-10-28 10:36 lshan 阅读(149) 评论(0) 推荐(0)
Ubuntu16.04上搭建CDH5.14集群
摘要:原文:https://blog.csdn.net/q1370992706/article/details/79578444 阅读全文
posted @ 2020-06-24 18:40 lshan 阅读(160) 评论(0) 推荐(0)
hdfs 配置多个namenode
摘要:参考:https://blog.csdn.net/wild46cat/article/details/53423472 hadoop2.7.3在集群中配置多个namenode(federation cluster)首先需要说明的是,在集群中配置多个namenode和在集群中使用secondaryNa 阅读全文
posted @ 2019-12-18 17:46 lshan 阅读(4503) 评论(0) 推荐(0)
hdoop 的版本问题
摘要:参考:https://www.cnblogs.com/yinzhengjie/articles/11019444.html 阅读全文
posted @ 2019-11-28 22:47 lshan 阅读(132) 评论(0) 推荐(0)