JamesFan博客

摘要： cron是一个Linux下的后台进程，用来定期的执行一些任务。因为我用的是Ubuntu，所以这篇文章中的所有命令也只能保证在Ubuntu下有效，但其他系统应该也差不多。想要让cron执行你指定的任务，首先就要编辑crontab文件。crontab是一个文本文件，用来存放你要运行的命令。你可以以下命令... 阅读全文

摘要： set -x与set +x指令上传者：huahuafdy我也要“分享赚钱”2014/6/19关注(210)评论(0)声明：此内容仅代表网友个人经验或观点，不代表本网站立场和观点。 set -x与set +x指令 用于脚本调试。set是把它下面的命令打印到屏幕 set -x 是开启 set +x... 阅读全文

摘要： CentOS设置程序开机自启动的方法作者:朱 茂海 /分类:系统管理字号：L M S在CentOS系统下，主要有两种方法设置自己安装的程序开机启动。1、把启动程序的命令添加到/etc/rc.d/rc.local文件中，比如下面的是设置开机启动httpd。#!/bin/sh## This script... 阅读全文

摘要： 1.配置RESOURCES节点有时会遇到maven打包后找不到资源文件了，其实这时候路径发生了变化，为了确保打包后路径不发生变化，指定一个固定的路径，请看下面配置 ... true src/main/command run.bat... 阅读全文

摘要： 环境：cdh5.1.0jdk1.7 org.apache.maven.plugins maven-compiler-plugin 1.7 1.7 maven-assembly-plugin 2.2 ... 阅读全文

摘要： 如何将maven项目打包成可执行的jar分类：maven2010-12-17 10:1810411人阅读评论(2)收藏举报jarmavenassemblyjava方法一：将项目及所依赖的所有jar包打包成一个jar。1、pom.xml添加assembly插件2、执行mvn assembly:asse... 阅读全文

摘要： iBatis简介：iBatis是apache的一个开源项目，一个O/R Mapping解决方案，iBatis最大的特点就是小巧，上手很快。如果不需要太多复杂的功能，iBatis是能够满足你的要求又足够灵活的最简单的解决方案，现在的iBatis已经改名为Mybatis了。官网为：http://www.... 阅读全文

摘要： 环境：hadoop-2.3.0-cdh5.1.0centos 6.5 x64win7 eclipse4.30. 前提条件 ,jdk,maven要安装好。1、下载hadoop，用winRAR解压。（路径不能有空格）D:\JavaDev\hadoop-2.3.0-cdh5.1.02. 配置win7环境变... 阅读全文

摘要： Hive之数据查询发布于：2013 年 10 月 11 日由Aaron发布于：Hive一，排序和聚合对于排序有两种方式，一种是order by 一种是sort byorder by 会对所有的数据进行排序，所以最后会只有一个reducer来处理，如果数据量非常大，效率会非常差劲sort by是部分排... 阅读全文

摘要： 先前条件：要先安装好MYSQL下载：hive-0.12.0-cdh5.1.0.tar.gz，并解压到安装目录1.添加环境变量修改/etc/profile文件。#vi /etc/profile增加export HIVE_HOME=/hadoop/hadoop/hive修改exportPATH=$JAV... 阅读全文

摘要： 出处：http://www.taobaotest.com/blogs/qa?bid=13894引言HBase提供了Java Api的访问接口，掌握这个就跟Java应用使用RDBMS时需要JDBC一样重要，本文将继续前两篇文章中blog表的示例，介绍常用的Api。练习前的准备工作创建一个Maven工程... 阅读全文

摘要： 1.检查是否有安装安装之前应该先查询系统是否自在了mysql的软件包 rpm -qa|grep -i mysql如果有的话需要先删除 rpm -e 软件名 --nodeps2.下载安装包cd/usr/local/srcwgethttp://cdn.mysql.com/Downloads/MySQL-... 阅读全文

摘要： 分三步：1. 添加环境变量2.编辑hbase-env.sh文件3.编辑hbase-site.xml 文件前提条件是安装好hadoop，下面展开说明1. 添加环境变量export HBASE_HOME=/usr/local/cdh/hbaseexport PATH=$PATH:$PIG_HOME/bi... 阅读全文

摘要： cdh版与0.98版的配置一样1.环境master:c1slave:c2,c3CentOS 6.5 x64 ,hadoop-2.3.0-cdh5.1.0，zookeeper-3.4.5-cdh5.1.0下载地址：http://archive.cloudera.com/cdh5/cdh/5/2. 前提... 阅读全文

摘要： 1.环境主机名IP地址JDKZooKeepermyidc1192.168.58.1291.7.0_11server.11c2192.168.58.1301.7.0_11server.22c3192.168.581311.870_11server.332.文件配置 （每个节点都要配置）tar -zxv... 阅读全文

摘要： eclipse提示框的背景颜色使用的是系统的提示框颜色配置，在windows下为黄色，但在Ubuntu12.04(gnome)下却是黑色，造成提示内容很难看清。在eclipse中我们是无法修改这个颜色的配置的，只能通过修改系统的颜色配置。在ubuntu11.10以前，我们是可以能过自定义系统外观来修... 阅读全文

摘要： Ubuntu系统默认是不允许用户以root身份登录的，在网上找到的方法如下：1、首先设置root密码，利用现有管理员帐户登陆Ubuntu，在终端执行命令：sudo passwd root，接着输入密码和root密码，重复密码。这样就有了可用的root用户。2、默认情况是不允许用root帐号直接登录图... 阅读全文

摘要： 先参考：《hadoop-2.3.0-cdh5.1.0伪分布安装（基于centos）》http://blog.csdn.net/jameshadoop/article/details/39055493注：本例使用root用户搭建一、环境操作系统：CentOS6.564位操作系统注：Hadoop2.0以... 阅读全文

摘要： 出处：http://golab.blog.51cto.com/7876557/1365883一、Hadoop基本介绍Hadoop优点1.高可靠性：Hadoop按位存储和处理数据2.高扩展性：Hadoop是在计算机集群中完成计算任务，这个集群可以方便的扩展到几千台3.高效性：Hadoop能够在节点之间... 阅读全文

摘要： 编写不易，转载请注明（http://shihlei.iteye.com/blog/2084711）！说明 本文搭建Hadoop CDH5.0.1 分布式系统，包括NameNode ，ResourceManger HA，忽略了Web Application Proxy 和Job HistorySe... 阅读全文