白大虾

摘要： YARN Hadoop2.0与HAdoop1.0的区别： Hadoop1.0主要由HDFS和MapReduce两个系统够长，但在Hadoop2.0中主要由 Hadoop Common、HDFS 、Hadoop YARN和Hadoop MapReduce2.0构成。 Hadoop1.0更多是在于离线的数据处理，Hadoop2.0可以支持MapReduce计算框架之外，可以支持Spark、St... 阅读全文

摘要： java IO 主要内容java.io.File类的使用IO原理及流的分类文件流FileInputStream / FileOutputStream / FileReader / FileWriter缓冲流BufferedInputStream / BufferedOutputStream / Bu... 阅读全文

摘要： 转自：http://zengzhaozheng.blog.51cto.com/8219051/1557054一、概述这2个月为公司数据挖掘系统做一些根据用户标签情况对用户的相似度进行评估，其中涉及一些推荐算法知识，在这段时间研究了一遍《推荐算法实践》和《Mahout in action》，在这里主要... 阅读全文

摘要： ​ 1 新建系统环境 新建 弹出“新建系统变量”对话框，分别输入变量名“JAVA_HOME”和变量值（java安装路径）“C:\Java\jdk1.7.0_03”，其中变量值是笔者的JDK安装路径，。单击“确定”按钮，关闭“新建系统变量”对话框。 2 在“环境变量”对话框中双击Path变量对其... 阅读全文

摘要： 1 安装fcitx sudo apt-get install fcitx-table-py 这里py是拼音的意思，安装关依赖库和框架都会自动安装2 把Ubuntu的系统环境改成中文安装英文版ubuntu，在打开含有中文字符文件时会乱码，有需要给UbuntuServer装中文环境1、安装中文语言包ap... 阅读全文

摘要： 由于官方版本的Hadoop是32位，若在64位Linux上安装，则必须先重新在64位环境下编译Hadoop源代码。本环境采用编译后的hadoop2.5.1 。安装参考博客：1 http://www.micmiu.com/bigdata/hadoop/hadoop2x-cluster-setup/2 ... 阅读全文

摘要： 参考 http://www.cnblogs.com/jerome-rong/archive/2012/08/16/2642035.html有两种方式：Vnc方式（优缺点）和xrdp模式中提到的Vnc远程桌面的缺点，我们采用第二种方法xrdp，该方法支持多用户登录并远程桌面。进入GNOME界面，在左上... 阅读全文

摘要： 在Ubuntu下编译hadoop2.5.x 参考博客：http://www.aboutyun.com/thread-8130-1-1.html 1 下载hadoop源码： （1） http://www.aboutyun.com/thread-8130-1-1.html wget http://mirrors.hust.edu.cn/apache/hadoop/common/hadoo... 阅读全文

摘要： hadoop在虚拟机上（远程连接也是一样只需要知道master的ip和core-site.xml配置即可。 Vmware上搭建了hadoop分布式平台： 192.168.11.134 master 192.168.11.135 slave1 192.168.11.136 slave2 core-site.xml 配置文件： fs.d... 阅读全文

摘要： 1 Spring 是什么？ 具体描述 Spring: 轻量级：Spring 是非侵入性的- 基于 Spring 开发的应用中的对象可以不依赖于 Spring 的 API 依赖注入(DI --- dependency injection、IOC) 面向切面编程(AOP --- aspect orien... 阅读全文