米兰的小铁將

2019年4月18日

摘要：一、基于HDFS云盘存储系统如：某度网盘优点：*普通的商用机器内存磁盘*数据的安全性操作：*put get*rm mv*java api*filesystem核心：*HDFS集群二、极速秒传用户所上传文件的时候，将文件解析成hash码，去文件库中对比，如果有就不用传了(表面上会传)，直接就是极速秒传，然后给用户显示一个指向那个文件的引用；三、hadoop三大发行版本1、Ap... 阅读全文

posted @ 2019-04-18 14:07 米兰的小铁將阅读(672) 评论(0) 推荐(0)

3.19 YARN HA架构及(RM/NM) Restart讲解

摘要：一、ResourceManager HAResourceManager（RM）负责跟踪集群中的资源，以及调度应用程序（例如，MapReduce作业）。在Hadoop 2.4之前，ResourceManager是YARN集群中的单点故障。高可用性功能以Active / Standby ResourceManager对的形式添加冗余，以消除此单点故障。RM故障转移：ResourceManager HA... 阅读全文

posted @ 2019-04-18 13:30 米兰的小铁將阅读(1064) 评论(0) 推荐(0)

3.17-3.18 HDFS2.x中高级特性讲解

摘要：一、hdfs federation hdfs federation即hdfs的联邦；可以理解为有多个namenode节点的hdfs集群； HA方案解决的是单点故障问题，而Fdederation解决的是单命名空间问题。集群的全部元数据都存放在一个名称节点上，当集群足够大的时候，这个名称节点就成了性能阅读全文

posted @ 2019-04-18 13:00 米兰的小铁將阅读(202) 评论(0) 推荐(0)

3.16 使用Zookeeper对HDFS HA配置自动故障转移及测试

摘要：一、说明从上一节可看出，虽然搭建好了HA架构，但是只能手动进行active与standby的切换；接下来看一下用zookeeper进行自动故障转移：#在启动HA之后，两个NameNode都是standby状态，可以利用zookeeper的选举功能，选出一个当Active#监控 ZKFC FailoverController二、配置1、hdfs-site.xml#”开启自动转移功能“，加... 阅读全文

posted @ 2019-04-18 10:46 米兰的小铁將阅读(904) 评论(0) 推荐(0)

4、html的body内标签之input系列

摘要：一、input标签与form表单 Title 说明：#是一个输入标签；表单使用表单标签来设置，要提交内容必须有标签；# action="http://ip:port/index" ：表示当前表单中的内容提交给哪个页面进行处理； method="post" ：表... 阅读全文

posted @ 2019-04-18 00:50 米兰的小铁將阅读(435) 评论(0) 推荐(0)

2019年4月17日

3、HTML的body内标签1

摘要：一、特殊符号的表示 #代指空格< #代指，......#这玩意有很多，记也记不完，用的时候查一下即可；二、p和br标签：段落：换行，是一个自闭和标签HTML，HTML，HTML；HTML，HTML，HTML；三、h标签：标题 #最大...... #最小四、span标签hello：白板，只输入文本，不增加效果；白板：不自带效果，后续可以通过css来增加任意效果；五、所... 阅读全文

posted @ 2019-04-17 21:43 米兰的小铁將阅读(248) 评论(0) 推荐(0)

2、HTML的head内标签

摘要：一、Meta（metadata information）提供有关页面的元信息，例：页面编码、刷新、跳转、针对搜索引擎和更新频度的描述和关键词1.页面编码（告诉浏览器是什么编码）2.刷新和跳转3.关键词4.描述5.X-UA-Compatible微软的IE6是通过XP、Win2003等操作系统发布出来，作为占统治地位的桌面操作系统，也使得IE占据了通知地位，许多的网站开发的时候，就按照IE6的标准去开... 阅读全文

posted @ 2019-04-17 21:23 米兰的小铁將阅读(173) 评论(0) 推荐(0)

1、HTML的本质以及在web中的作用

摘要：一、HTML1、一套规则，浏览器认识的规则。2、开发者：学习Html规则开发后台程序：-写Html文件（充当模板的作用）******-数据库获取数据，然后替换到html文件的指定位置（Web框架）3、本地测试-找到文件路径，直接浏览器打开-pycharm打开测试4、编写Html文件-doctype对应关系-html标签，标签内部可以写属性===>只能有一N-注释：5、标签!DOCTYPE html... 阅读全文

posted @ 2019-04-17 21:17 米兰的小铁將阅读(966) 评论(0) 推荐(0)

3.11-3.15 HDFS HA

摘要：一、背景1、Hadoop2.0之前，在HDFS集群中NameNode存在单点故障（SPOF）。对于只有一个NameNode的集群，若NameNode机器出现故障，则整个集群将无法使用，直到NameNode重新启动。NameNode主要在以下两个方面影响HDFS集群 >NameNode 机器发生意外，如宕机，集群将无法使用，直到管理员重启 >NameNode 机器需要升级，包括软件、硬件... 阅读全文

posted @ 2019-04-17 18:34 米兰的小铁將阅读(255) 评论(0) 推荐(0)

3.9-3.10 分布式协作服务框架Zookeeper

摘要：一、zookeeper概述一个开源的分布式的，为分布式应用提供协调服务的Apache项目。提供一个简单的原语集合，以便于分布式应用可以在它之上构建更高层次的同步服务。设计非常易于编程，它使用的是类似于文件系统那样的树形数据结构。目的就是将分布式服务不再需要由于协作冲突而另外实现协作服务。 1 阅读全文

posted @ 2019-04-17 14:26 米兰的小铁將阅读(217) 评论(0) 推荐(1)

米兰的小铁將

公告