摘要: 该文章参考 Hadoop权威指南 引言 随着数据爆炸式增长,数据的存储和分析作为一个大的难题。多年来硬盘存储容量增长的同时,访问速度-数据从硬盘读取的速度,未内与时俱进。比如1990年, 一个磁盘存储1370M需要4.4MB/s的速度,我们只需5分钟就能读取整个磁盘的 数据。20年过去了,1TB(= 阅读全文
posted @ 2016-06-09 16:25 行舟逆水 阅读(381) 评论(0) 推荐(0)
摘要: springMVC是当前最优秀的MVC框架,springMVC使用简单,学习成本低,很容易写出性能优秀的程序,灵活性高。 1.Spring MVC的核心类与接口 DispatcherServlet 前段控制器(总控制器),将发送的请求转发到具体控制类。 HandlerMapping 映射处理器,负责 阅读全文
posted @ 2016-06-04 19:59 行舟逆水 阅读(121) 评论(0) 推荐(0)
摘要: 具体目录规范,如下图 : /opt/modules # 大型软件的安装路径 /opt/softwares # 软件源程序安装包上传路径 /opt/tools # 工具安装路径 /opt/datas #数据文件存放路径 1. maven的安装 a.在 /opt/modules目录下创建maven b. 阅读全文
posted @ 2016-05-28 00:09 行舟逆水 阅读(194) 评论(0) 推荐(0)
摘要: 1. 配置YARN安装 a. 修改mapred-site.xml,先根据mapred-site.xml.template 重命名为mapred-site.xml b. 修改yarn-site.xml c.启动ResourceManager d.验证 打开ip地址 http://linux.liuhu 阅读全文
posted @ 2016-05-24 16:31 行舟逆水 阅读(148) 评论(0) 推荐(0)
摘要: 1. 安装JDK a.查出当前已经安装的JDK # rpm -qa | grep java b.卸载原先自带的JDK # rpm -e --nodeps java-1.6.0-openjdk-1.6.0.0-1.50.1.11.5.el6_3.x86_64 tzdata-java-2012j-1.e 阅读全文
posted @ 2016-05-24 11:38 行舟逆水 阅读(182) 评论(0) 推荐(0)
摘要: 1. 使用tar命令 格式: tar [主选项+副选项] 文件或者目录 ①主选项 c:创建文件新的档案文件,相当于打包 x: 在档案中释放文件,相当于解压缩 t: 列出档案文件的内容,查看压缩文件内容 ②副选项 z: 是否具有zip属性, 一般属性为tar.gz, xx.tgz v:压缩过程显示文件 阅读全文
posted @ 2016-05-20 16:46 行舟逆水 阅读(136) 评论(0) 推荐(0)
摘要: 一切皆为文件,以文件形式管理。 1. 文件解释 比如drwxr-xr-x 表示 d;rwx;r-x;r-x ,d代表目录 第一组代表所有者:user, 用u表示 第二组代表所属组:group, 用g表示 第三组代表其他人:other, 用o表示 r: 代表可读 >4 ,可查看文件权限,cat mor 阅读全文
posted @ 2016-05-20 15:53 行舟逆水 阅读(178) 评论(0) 推荐(0)
摘要: 1. 创建用户 useradd kevin 根目录下的etc目录存放的是系统管理配置文件 passwd存储的是用户一些基本信息,其中每一行都是一个用户,查询 cat /etc/passwd kevin:x:501:502::/home/kevin:/bin/bash 表示用户:密码是否加密:uid( 阅读全文
posted @ 2016-05-20 15:18 行舟逆水 阅读(134) 评论(0) 推荐(0)
摘要: / 根目录,系统最顶端的目录 。/etc/passwd/test/test01 最外面表示斜杠表示根目录,后面斜杠表示分割。 /home 表示家目录,基本存放用户的主目录 /etc 表示配置目录 /bin、/sbin 表示binary /boot 表示引导,系统加载文件。 /dev 表示系统的设备文 阅读全文
posted @ 2016-05-12 18:57 行舟逆水 阅读(126) 评论(0) 推荐(0)