2020年3月18日
摘要：
概述 伪分布式模式下，hadoop将所有进程运行于同一台主机上，但此时hadoop将使用分布式文件系统，而且各jobs也是由JobTracker服务管理的独立进程。同时，由于伪分布式的hadoop集群只有一个节点，因此HDFS的块复制将限制为单个副本，器master和slave也都将运行于本地主机。 阅读全文
posted @ 2020-03-18 20:07
wnwn
阅读(313)
评论(0)
推荐(0)
摘要：
1.配置独立操作 独立操作默认情况下，Hadoop被配置为以非分布式模式作为单个java进程运行，这个对调式很有用； 下面的实例复制要用作输入的未打包conf目录，然后查找并显示给定正则表达式的每个匹配项。输出被写入给定的输出目录； 1.1 创建一个文件夹名为input mkdir input // 阅读全文
posted @ 2020-03-18 17:07
wnwn
阅读(180)
评论(0)
推荐(0)
摘要：
1.安装JDK 1.1 使用【rpm -qa | grep jdk】命令查看目前版本的JDK； 1.2 使用【rpm -e --nodeps】删除当前系统自带的JDK 2.1 【rpm -e --nodeps java-1.7.0-openjdk-1.7.0.191-2.6.15.5.el7.x86 阅读全文
posted @ 2020-03-18 17:06
wnwn
阅读(207)
评论(0)
推荐(0)
摘要：
hadoop是什么 hadoop是一个由Apache基金会所开发的分布式基础架构，用户在不了解分布式底层细节的情况下，开发分布式程序，充分利用集群的威力进行高速运算和存储； hadoop实现了一个分布式文件系统，简称HDFS，HDFS有高容错性的特点，并且设计用来部署在低廉的硬件上；而且它提供高吞吐 阅读全文
posted @ 2020-03-18 17:05
wnwn
阅读(255)
评论(0)
推荐(0)
摘要：
概述 串行：一个线程在处理操作； 并行：多个线程在处理操作； 并发编程：在多线程环境下，应用程序的执行； 并发编程的目的：同分运用到资源，提供程序的效率 什么情况下用到并发编程： 1.在线程阻塞时，导致应用程序停止； 2.处理任务时间过长，可以创建子任务，来进行分段处理； 3.间断任务执行； 并发编 阅读全文
posted @ 2020-03-18 14:48
wnwn
阅读(181)
评论(0)
推荐(0)
浙公网安备 33010602011771号