摘要: 参考:https://www.leiue.com/what-is-micro-services 微服务架构的系统是一个分布式的系统,按业务进行划分为独立的服务单元,解决单体系统的不足,同时也满足越来越复杂的业务需求。每个微服务仅关注于完成一件任务并很好地完成该任务。在所有情况下,每个任务代表着一个小 阅读全文
posted @ 2019-11-26 17:40 JasonPeng1 阅读(507) 评论(0) 推荐(0)
摘要: 2019-11-26 17:30:00 一、HDFS的体系结构和运行原理 1、主节点:NameNode --管理维护HDFS2、从节点:DataNode --保存数据块3、第二名称节点:SecondaryNameNode --定期日志合并 二、Yarn的体系结构和运行原理:运行MapReduce的容 阅读全文
posted @ 2019-11-26 17:30 JasonPeng1 阅读(621) 评论(0) 推荐(0)
摘要: 2019-11-25 23:31:59 5.1. MapReduce or Hadoop? MapReduce是一个编程框架。其描述由Google于2004年发布[http:// research.google.com/archive/mapreduce.html]。与其他框架(例如Spring,S 阅读全文
posted @ 2019-11-25 23:52 JasonPeng1 阅读(165) 评论(0) 推荐(0)
摘要: 2019-11-25 22:44:42 BigData 4.1.What is Big Data? 大数据非常庞大,结构松散,无法应对传统存储 4.2. Human Generated Data and Machine Generated Data 人工生成的数据是电子邮件,文档,照片和推文。我们生 阅读全文
posted @ 2019-11-25 23:30 JasonPeng1 阅读(159) 评论(0) 推荐(0)
摘要: 2019-11-25 22:13:53 GitHub:https://github.com/elephantscale/HI-labs/tree/master/hadoop-admin 作者Github:https://github.com/markkerzner 作者Github:https:// 阅读全文
posted @ 2019-11-25 22:44 JasonPeng1 阅读(164) 评论(0) 推荐(0)
摘要: 2019-11-25 21:18:20 转载自:https://www.zhihu.com/tardis/sogou/art/61929523 一 MySQL 基础架构分析 1.1 MySQL 基本架构概览 下图是 MySQL 的一个简要架构图,从下图你可以很清晰的看到用户的 SQL 语句在 MyS 阅读全文
posted @ 2019-11-25 21:20 JasonPeng1 阅读(417) 评论(0) 推荐(0)
摘要: https://github.com/lydrainbowcat/tedukuri 阅读全文
posted @ 2019-11-24 23:20 JasonPeng1 阅读(4610) 评论(0) 推荐(1)
摘要: 2019-11-24 23:11:50 课程资料: 全分布模式 特点:真正的分布式环境,用于生产 1、三台机器:bigdata12 bigdata13 bigdata14 2、每台机器准备工作:安装JDK、关闭防火墙、设置主机名 systemctl stop firewalld.service sy 阅读全文
posted @ 2019-11-24 23:19 JasonPeng1 阅读(437) 评论(0) 推荐(1)
摘要: 2019-11-24 20:24:56 1.产生密钥对: 可以看到.ssh目录下多了两个文件 2.将每台机器的公钥复制给其他机器。 3.此时再次开启Hadoop就不需要输入4次密码了 将文件放到HDFS分布式文件系统中 阅读全文
posted @ 2019-11-24 23:11 JasonPeng1 阅读(375) 评论(0) 推荐(0)
摘要: 2019-11-24 14:57:51 比较100位的数字,属于高精度。直接上字符串 #include<bits/stdc++.h> #define f(a,b,c) for(int a=b;a<=c;a++) #define f1(a,b,c) for(int a=b;a>=c;i--) usin 阅读全文
posted @ 2019-11-24 14:59 JasonPeng1 阅读(208) 评论(0) 推荐(0)