上一页 1 ··· 11 12 13 14 15
2013年3月6日
Linux 之命令配置网卡
摘要： 一、手动设置静态网址vim /etc/sysconfig/network-scripts/ifcfg-eth0BOOTPROTO = “static” /(原始状态 DHCP)IPADDR = 192.168.0.2NETMASK = 255.255.255.0GATEWAY = 192.168.0... 阅读全文
posted @ 2013-03-06 16:47 农民阿姨 阅读(364) 评论(0) 推荐(0)
Linux 之常用命令
摘要： el6表示该软件的运行平台或者编译平台：红帽企业版6，英文全称 redhat enterprise linux 6. 一、网卡 1.监听网卡 tcpdump -i eth0 -s0 -nn -XX port 8283 2.检查端口是否被占用 netstat -llnp|grep 8283 二.操作文 阅读全文
posted @ 2013-03-06 16:45 农民阿姨 阅读(376) 评论(0) 推荐(0)
2013年1月31日
Hadoop之redis命令
摘要： 1.redis简介 Redis是一种面向“键/值”对数据类型的内存数据库，可以满足我们对海量数据的读写需求。 redis的键只能是字符串 redis的值支持多种数据类型： 1：字符串 string 2：哈希 hash 3：字符串列表 list 4 ：字符串集合 set 不重复，无序 5：有序集合sorted set ，不重复，有序 6：Hype... 阅读全文
posted @ 2013-01-31 12:04 农民阿姨 阅读(1096) 评论(0) 推荐(0)
2013年1月24日
Hadoop之Redis安装
摘要： 1.首先安装c的编译环境 yum -y install cpp yum -y install binutils yum -y install glibc yum -y install glibc-kernheaders yum -y install glibc-common yum -y install glibc-devel yum -y install gcc yum -... 阅读全文
posted @ 2013-01-24 11:11 农民阿姨 阅读(600) 评论(0) 推荐(0)
2013年1月14日
Hadoop之Hbase命令
摘要： Hadoop之Hbase命令 新浪微博展现的数据。 阅读全文
posted @ 2013-01-14 11:48 农民阿姨 阅读(134) 评论(0) 推荐(0)
Hadoop之Hbase安装
摘要： Hadoop之Hbase安装 阅读全文
posted @ 2013-01-14 11:00 农民阿姨 阅读(205) 评论(0) 推荐(0)
2013年1月10日
Hadoop之Hive 命令
摘要： Hive 简介： 1.Hive 是SQL解析引擎，它将SQL语句转译成M/R Job 然后在Hadoop执行 2.Hive 的表其实就是HDFS的目录，按表名把文件夹分开。如果是分区表，则分区值是子文件夹，可以直接在M/R job里使用这些数据。 3.HIve相当于hadoop的客户端工具，部署时不一定放在集群节点中，可以放在某个节点上。 Hive 数据存储： 1.Hive 的数据存储基于h... 阅读全文
posted @ 2013-01-10 15:17 农民阿姨 阅读(811) 评论(0) 推荐(0)
Hadoop之Hive 安装_在hadoop 伪分布上
摘要： 1. Hive mysql的metastore安装准备 把hive-0.12.0.tar.gz解压到/zzy/ # tar -zxvf hive-0.12.0.tar.gz -C /zzy (-C 指定解包后的路径) 修改/etc/profile文件，将hive加入环境变量 # vim /etc/profile export JAVA_HOME=/usr/java/jdk1.7... 阅读全文
posted @ 2013-01-10 11:11 农民阿姨 阅读(546) 评论(0) 推荐(0)
2013年1月9日
Hadoop之hive和hadoop的交互流程
摘要： 1、通过用户界面提交SQL 驱动接收SQL 2、驱动将SQL传送给编译器 3、编译器获得SQL 检查语法、匹配资源、去metastore查询 4、metastore返回相应的数据库字段信息 优化SQL、产生执行计划 5、驱动接收执行计划 将执行计划发送执行引擎 6、执行引擎解析 6.1、 DDL操作：直接和metastore交互... 阅读全文
posted @ 2013-01-09 08:24 农民阿姨 阅读(466) 评论(0) 推荐(0)
2013年1月6日
Hadoop之mapreduce 实例五
摘要： Hadoop之mapreduce 实例五 阅读全文
posted @ 2013-01-06 19:34 农民阿姨 阅读(112) 评论(0) 推荐(0)
Hadoop之mapreduce 实例四
摘要： Hadoop之mapreduce 实例四 阅读全文
posted @ 2013-01-06 14:43 农民阿姨 阅读(177) 评论(0) 推荐(0)
2013年1月4日
Hadoop之mapreduce 实例三
摘要： Hadoop之mapreduce 实例三 阅读全文
posted @ 2013-01-04 16:58 农民阿姨 阅读(108) 评论(0) 推荐(0)
2012年12月27日
Hadoop之mapreduce 实例二
摘要： Hadoop之mapreduce 实例二 阅读全文
posted @ 2012-12-27 21:36 农民阿姨 阅读(173) 评论(0) 推荐(0)
2012年12月26日
Hadoop之mapreduce 实例一
摘要： Hadoop之mapreduce 实例一 阅读全文
posted @ 2012-12-26 21:28 农民阿姨 阅读(112) 评论(0) 推荐(0)
2012年12月19日
Hadoop简介
摘要： 如今Apache Hadoop已成为大数据行业发展背后的驱动力。Hive和Pig等技术也经常被提到，但是他们都有什么功能，为什么会需要奇怪的名字（如Oozie，ZooKeeper、Flume）。Hadoop带... 阅读全文
posted @ 2012-12-19 21:42 农民阿姨 阅读(369) 评论(0) 推荐(0)
Hadoop之MapReduce
摘要： 此文章已于 23:19:00 2015/8/4 重新发布到 农民阿姨 Hadoop之MapReduce 提交任务 hadoop jar hadoopdemo-1.0-SNAPSHOT-jar-with-dependencies.jar /user/root/testmr/hello.txt /use 阅读全文
posted @ 2012-12-19 21:01 农民阿姨 阅读(419) 评论(0) 推荐(0)
hadoop1.2.1伪分布模式安装教程
摘要： 安装其实很简单，把下载下来的Hadoop文件拷贝到相应的目录下，然后接压缩即可，关键是先要安装好JDK,前期的Linux要配置好。下面我把我的操作过程记录如下，供大家参考:登录到HadoopSrv01机器上，进行如下操作：1： su - grid2： tar -xvf hadoop-1.2.1-bi... 阅读全文
posted @ 2012-12-19 20:51 农民阿姨 阅读(207) 评论(0) 推荐(0)
Hadoop之序列化
摘要： 1.序列化（Serialization）是指把结构化对象转化为字节流。 -写到内存2.反序列化（Deserialization）是序列化的逆过程。即把字节流转回结构化对象。-读到内存3.Java序列化（java.io.Serializable）java Serializable 是标志接口，在使用的... 阅读全文
posted @ 2012-12-19 14:02 农民阿姨 阅读(197) 评论(0) 推荐(0)
2012年12月18日
Hadoop之常用命令
摘要： 1.传输文件 hdfs fs –put hell / 2. jar包运行 hadoop jar wordcount.jar 3. 查看文件： hadoop fs -text /part-r-0000 4.查看文件大小 hadoop fs -du -h / 5.统计文件数据量 hdfs dfs -ls 阅读全文
posted @ 2012-12-18 15:01 农民阿姨 阅读(231) 评论(0) 推荐(0)
上一页 1 ··· 11 12 13 14 15