wj_hubei

摘要： 原 Hadoop MapReduce 框架的问题 原hadoop的MapReduce框架图 从上图中可以清楚的看出原 MapReduce 程序的流程及设计思路： 可以看得出原来的 map-reduce 架构是简单明了的，在最初推出的几年，也得到了众多的成功案例，获得业界广泛的支持和肯定，但随着分布式 阅读全文

摘要： 本文仍然使用MapReduce的经典例子 WordCount来测试eclipse的开发环境。 与大部分教程不同的是，本文使用的hadoop是2.5.2的版本，相较于之前的0.X版本，hadoop 2.X有较大改动 在jar包方面，Hadoop 2.x 版本中 jar 不再集中在一个 hadoop-c 阅读全文

摘要： 原文转自：Eclipse常用快捷键与代码模板 Eclipse常用快捷键汇总 Eclipse的编辑功能非常强大，掌握了Eclipse快捷键功能，能够大大提高开发效率。Eclipse中有如下一些和编辑相关的快捷键。1. 【ALT+/】此快捷键为用户编辑的好帮手，能为用户提供内容的辅助，不要为记不全方法和 阅读全文

摘要： HDFS（Hadoop Distributed File System ）Hadoop分布式文件系统。是根据google发表的论文翻版的。论文为GFS（Google File System）Google 文件系统（中文，英文）。 1. 架构分析 基础名词解释： Block： 在HDFS中，每个文件都 阅读全文

摘要： Java异常 异常指不期而至的各种状况，如：文件找不到、网络连接失败、非法参数等。异常是一个事件，它发生在程序运行期间，干扰了正常的指令流程。Java通 过API中Throwable类的众多子类描述各种不同的异常。因而，Java异常都是对象，是Throwable子类的实例，描述了出现在一段编码中的 阅读全文

摘要： 搞什么东西之前，第一步是要知道What（是什么），然后是Why（为什么），最后才是How（怎么做）。但很多开发的朋友在做了多年项目以后，都习惯是先How，然后What，最后才是Why，这样只会让自己变得浮躁，同时往往会将技术误用于不适合的场景。 转自某博文 Hadoop框架中最核心的设计就是：Map 阅读全文

摘要： 要点： 基础：进程描述及控制 策略：进程调度 实现：互斥与同步 避免：死锁与饥饿 解决：几个经典问题 进程的引入 程序的顺序执行 源代码程序，目标程序和可执行程序 程序执行：编辑，编译，链接，执行 程序的结构：顺序，分支，循环结构 程序执行的特征：顺序性，封闭性，可再现性 程序并发执行 多道程序设计 阅读全文

摘要： 一、操作系统 1.1 操作系统结构图 操作系统是位于计算机硬件和应用软件之间的，有效组织和管理系统中各种软、硬件资源。它通过资源管理，提高了计算机系统的效率；也改善了人机界面，不需要我们直接面对简单且复杂的0和1了，向用户提供了友好的工作环境。 1.2 任务调度： 大部分操作系统(如Windows、 阅读全文

摘要： 1、虚拟内存的基本思想： 每个程序拥有自己的地址空间，这个地址空间被分割成多个块，每一块称作一页或页面。每一页有连续的地址范围。这些页被映射到物理内存，但并不是所有的页都在内存中才能运行程序。当程序引用一部分在物理内存中的地址空间时，有硬件立刻执行必要的映射。当程序引用到一部分不在物理内存中的地址空 阅读全文

摘要： 一、内存管理概念 1. 存储管理的功能 (1) 内存空间的分配与回收 , 包括内存的分配和共享。 (2) 地址转换 : 内存管理配合硬件进行地址转换 , 把逻辑地址转换成物理地址。 (3) 内存空间的扩充 : 借助于虚拟存储器或交换覆盖技术来达到扩充内存容量的目的。 (4) 内存保护和共享 : 为了 阅读全文