点点小朋友

摘要： 模块分解，分而治之 分解的核心是将问题的难点或者关注点进行分离 算法与数据结构 选择与设计数据结构 如下设计可以避免重复： 但是存在存储过大，限定性比较大，编程实现有一定难度 阅读全文

摘要： 开闭原则（The Open-Closed Principle ，OCP） 软件实体（模块，类，方法等）应该对扩展开放，对修改关闭。 系统设计需要遵循开闭原则的原因 稳定性。开闭原则要求扩展功能不修改原来的代码，这可以让软件系统在变化中保持稳定。 扩展性。开闭原则要求对扩展开放，通过扩展提供新的或改变 阅读全文

摘要： 设计模式的定义：设计模式，即Design Patterns，是指在软件设计中，被反复使用的一种代码设计经验。 基本要素：模式名称，问题，效果 cof设计模式的简介： 设计模式的六大原则 1、开闭原则（Open Close Principle） 开闭原则的意思是：对扩展开放，对修改关闭。在程序需要进行 阅读全文

摘要： 主从角色 namenode ： 核心，架构中的主角色 管理和维护文件系统的元数据，包括目录树结构、文件和块的位置信息、访问权限等信息 namenode是访问hdfs的唯一入口 仅存储元数据 知道hdfs中文件的块列表及其位置 不持久化存储位置信息 如果发生故障属于单点故障 通常会配置大量的内存 da 阅读全文

摘要： 命令行操作：cli Hadoop的命令shell ： Hadoop fs -ls file: 操作 本地的文件系统 hadoop fs -ls hdfs://node1:8020 操作hdfs分布式文件系统 hadoop fs -ls 直接根目录，加载环境变量中fs.defaultFS的值 查看配置 阅读全文

摘要： 文件系统 文件系统：存储和组织数据的方式，实现了数据的存储，分级组织，访问和获取，使用树状结构 数据：数据本身。文件系统元数据：文件大小，最后修改时间....描述性的数据 分布式文件系统 核心属性： 分布式存储，无限扩展 元数据记录，方便寻找 分块存储，针对并行操作提供效率 副本机制，冗余存储，保障 阅读全文

摘要： 先说今日情况，本来打算返校结果回不去，然后身体差发烧了，就随便学了一些东西，阑尾炎还是好疼。 有一说一，我觉得我的电脑真的有点拉啊，三台虚拟机开启之后，运存直接90%，呜呜响，和我本人情况一样，麻了 接下来是主要学习内容： 练习添加文件夹： 打开网页验证 在此目录下继续上传： 上传小文件： 也可以在 阅读全文

摘要： 1.初始化，只能一次，只在第一台机器初始化即可 hdfs namenode -format 需要注意在之前确认没错的情况下执行 成功后又以下提示： 2.Hadoop集群的启停止命令 shell脚本一键启停 hdfs start-dfs.sh stop-dfs.sh yarn start-yarn.s 阅读全文

摘要： 今日学习内容： 主要为Hadoop的环境配置，相关配置所需文档可以留言（？）会给发送 1.hadoop介绍： 狭义: 核心组件，Hadoop hdfs 分布存储 yarn 资源管理和任务调度框架 mapreduce 计算 （企业基本不再直接使用） 广义： 围绕Hadoop打造的大数据生态圈 Hado 阅读全文

摘要： 今日学习内容： 1.安装VMware虚拟机，并且按照黑马程序员课程提示搭建了几个虚拟机，中途出现的问题是，所给的课程资料并没有给镜像文件，搜索镜像文件时，搜不到iso1908的文件，当天下载文件 的网站出现了错误导致当天并未安装完成，直到今日完成了安装，实现了虚拟机nat模式网络的连接，具体内容可以 阅读全文