酸奶面包

摘要： 一、说在前面 之前没在意string类型的细节问题，学习的时候也是不求甚解，今天有一个同专业的同学把我给问住了所以我又上网搜了搜资料学习了一下。 二、转载博客 这位博主说的十分的详细，点击进入，我就不再抄一遍了。 三、心得 总体来说这三个类型主要是效率和线程安全性的问题。 阅读全文

摘要： 一、说在前面 一般build发生错误大多数是使用外国的地址导致下载失败，可以换成国内的镜像。 二、解决方法 修改Maven的settings.xml文件，在mirrors标签内添加： 最后终于看到了SUCCESS。这样构建JavaWeb项目也没了问题。 阅读全文

摘要： 一、说在前面 想要通过程序来操作集群，就需要将编译器链接到hadoop，使用hadoop的API进行操作。具体的操作步骤我是仿照这位博主来做的，点击进入，没有什么问题，写的很好。如果出现eclipse不显示hadoop的大象的问题可以参考这位博主的博客，点击进入，我当时的问题得到了解决。 二、心得 阅读全文

摘要： 一、说在前面 本随笔将hdfs的命令进行了总结。执行以下命令需要在hadoop安装目录下的bin目录中执行，为了方便起见将hadoop的bin目录配置到环境变量中。 二、总结 -help：显示帮助信息 -ls：显示目录信息 -mkdir：在HDFS上创建目录 -moveFromLocal：从本地剪切 阅读全文

摘要： 一、说在前面 今天为分布式集群创建了一个时间管理器，用于同步三台机器的时间。 二、配置方法 阅读全文

摘要： 一、说在前面 今天完成了完全分布式布局的搭建，并写了用来看分布式运行状况的脚本。 二、配置 历史服务器在 mapred-site.xml设置 <!-- 历史服务器端地址 --> <property> <name>mapreduce.jobhistory.address</name>q <value> 阅读全文

摘要： 一、说在前面 今天跟着教程学会了在免密登录的基础上如何单点启动，并写了一个启动脚本。 二、单点启动 启动 / 停止 (1)单点启动/停止 hdfs --daemon start/stop namenode/datanode/secondarynamenode yarn --daeon start/s 阅读全文

摘要： 一、说在前面 今天在昨天的基础上将分布式的hadoop启动起来，然后进行ssh免密登录等操作 二、配置 集群启动 集群启动 如果集群是新集群，第一次启动需要格式化namenode 在namenode的节点执行：hdfs namenode -format 启动namenode 在namenode的节点 阅读全文

摘要： 一、说在前面 今天将三个虚拟机都装上了虚拟机，每一个都装了一遍，很后悔为什么没先装了之后再克隆，然后跟着老师的节奏写了一个分发脚本，为什么不先学分发脚本呢！ 二、配置 core-site.xml <configuration> <!-- 指定NameNode的地址 --> <property> <n 阅读全文

摘要： 一、说在前面 今天跟着视频把hadoop的样板机安装完毕了，搭建好了三台虚拟机的互通网络环境，总体来说还是很有成就感的。 二、配置过程 先配置好一个样板机，将网关，IP等都和自己的电脑本机相匹配，首先确认样板机可以和自己的电脑ping同并且能连上网，即可以ping通网站，因为之后需要下载很多包都需要 阅读全文