09 2017 档案

Hadoop学习笔记（五）：java开发MapReduce
摘要：1. MapReduce的流程图（摘自马士兵老师视频），我们开发的就是其中的这两个（红框）过程。简述一下这个图，input就是我们需要处理的文件（datanode上文件的一个分块）；Split就是将这个文件进行拆分，默认的就是按照行来拆分，拆分的结果是一个key-value对，key是这一行起始的位 阅读全文
posted @ 2017-09-30 10:06 我滴个小张张 阅读(613) 评论(0) 推荐(0)
Hadoop学习笔记（四）：Yarn和MapReduce
摘要：1. 先关闭掉所有的防火墙（master和所有slave） 2. 配置yarn-site.xml文件（配置所有机器，此时没有启动hadoop服务） 3. 启Yarn，输入要命令start-yarn.sh，用jps检测，看到如下情况表示启动成功 4. 在宿主机浏览器上进行查看，输入地址master:8 阅读全文
posted @ 2017-09-29 09:20 我滴个小张张 阅读(549) 评论(0) 推荐(0)
Hadoop学习笔记（三）：java操作Hadoop
摘要：1. 启动hadoop服务。 2. hadoop默认将数据存储带/tmp目录下，如下图： 由于/tmp是linux的临时目录，linux会不定时的对该目录进行清除，因此hadoop可能就会出现意外情况。下面对这个配置进行修改。修改core-site.xml文件vim /usr/local/hadoo 阅读全文
posted @ 2017-09-28 09:13 我滴个小张张 阅读(1416) 评论(0) 推荐(1)
Hadoop学习笔记（二）：简单操作
摘要：1. 启动namenode和datanode，在master上输入命令hdsf dfsadmin -report查看整个集群的运行情况（记得关闭防火墙） 2. 输入命令查看hadoop监听的端口，netstat -ntlp 3. 在宿主机浏览器输入{masterIP}:50070进行查看 4. 关闭 阅读全文
posted @ 2017-09-26 13:23 我滴个小张张 阅读(396) 评论(0) 推荐(0)
Hadoop学习笔记（一）：安装与配置
摘要：1. 查看VM的网络配置 2. 打开虚拟机，配置网络： a). vim /etc/sysconfig/network-scripts/ifcfg-eno16777736 注意：这里的192.168.93.2必须安装步骤1里的网关IP，100为自己设置的IP，但是192.168.93不能变！ b).  阅读全文
posted @ 2017-09-25 08:43 我滴个小张张 阅读(345) 评论(0) 推荐(2)
java与json，一篇就够了
摘要：本示例使用的json包为阿里的fastjson 首先写三个工具类（seter和geter方法省略，自行补上）： 测试类，直接上代码： 阅读全文
posted @ 2017-09-19 18:24 我滴个小张张 阅读(303) 评论(0) 推荐(0)
DWR第六篇之文件下载
摘要：1. 在第五篇架构基础上进行修改 2. 修改jsp页面 3. 编写后台代码： 阅读全文
posted @ 2017-09-04 14:22 我滴个小张张 阅读(358) 评论(0) 推荐(0)
DWR第五篇之文件上传
摘要：1. 在第一篇架构基础上进行 2. 修改maven依赖 3. 编写jsp页面 4. 编写后台代码： 阅读全文
posted @ 2017-09-03 14:22 我滴个小张张 阅读(540) 评论(0) 推荐(0)
DWR第四篇之对象传参
摘要：1. 本示例在第一篇架构基础上添加代码 2. 首先，在dwr.xml文件里添加对象转换器 3. 编写Person实体类 4. 在核心控制器（CoreServlet.java）里添加如下方法： 5. 编写测试的jsp页面： 6. 测试 阅读全文
posted @ 2017-09-02 08:29 我滴个小张张 阅读(347) 评论(0) 推荐(0)
DWR第三篇之逆向Ajax升级
摘要：1. 本示例在第二篇架构基础上添加代码 2.在client.jsp开头的地方添加如下代码： 本示例需要做的是定向推送，那么就需要浏览器进行登录，从而进行定向的推送功能，为了节省时间，这里不做登录模块了，在url后拼接一个参数作为登录标识。 这样，在登录的时候在url后边拼接id=xxx，就可以模拟登 阅读全文
posted @ 2017-09-01 10:32 我滴个小张张 阅读(237) 评论(0) 推荐(0)