2014 年 6月随笔档案 - jseven

Hadoop技术内幕HDFS-笔记6之RPC

摘要：1.1. hadoop远程过程调用1、远程接口调用（必须实现VersionedProtocol接口）里面有一个方法，IPC通信时会比较客户端和服务端接口的版本号。必须一致才可以package rpc;import org.apache.hadoop.ipc.VersionedProtocol;pu... 阅读全文

posted @ 2014-06-30 23:13 jseven 阅读(270) 评论(0) 推荐(0)

Hadoop技术内幕HDFS-笔记5之动态代理

摘要：1.1. java动态代理java.lang.reflect包下的Proxy（创建代理对象）和InvocationHandler（调用转发）两个类代理对象代表目标对象（target）执行相应的活动静态代理：代理对象实现目标对象一致的接口，实现代理接口和调用转发（不推荐使用）在调用前后的附加逻辑，体... 阅读全文

posted @ 2014-06-30 23:09 jseven 阅读(393) 评论(0) 推荐(0)

Hadoop技术内幕HDFS-笔记4之远程调用

摘要：1. hadoop远程过程调用RPC：XML-RPC，JSON-RPC，CORBA，RMI（Remote Method Invocation）,Haoop IPC(进程间通信)RPC原理：允许本地程序（客户端）调用其他机器（服务器）上的过程，客户端使用参数将信息传送给调用方，通过返回值得到消息。RP... 阅读全文

posted @ 2014-06-30 23:00 jseven 阅读(765) 评论(0) 推荐(0)

Hadoop技术内幕HDFS-笔记4之压缩

摘要：1.1. 压缩减少存储空间，加快传输速率在hadoop中，压缩应用于文件存储、Map端到Reduce端的数据交换等情景。hadoop，主要考虑压缩速率和压缩文件的可分割性压缩算法：时间和空间的权衡更快的压缩和解压缩效率通常压缩比较低。hadoop提供了对压缩算法的编码和解码器类编码和解码示例（采用... 阅读全文

posted @ 2014-06-30 22:57 jseven 阅读(421) 评论(0) 推荐(0)

Hadoop技术内幕HDFS-笔记3之序列化

摘要：1.1. 序列化org.apache.hadoop.io包序列化：将一个对象编码为一个字节流反序列化：相反过程用途：1、作为一种持久化格式：可存储在硬盘上，供以后反序列化使用2、作为一种通信数据格式：可在JVM之间，通过网路相互传递3、复制的机制：深度复制1.1.1. java内建序列化机制：... 阅读全文

posted @ 2014-06-30 22:51 jseven 阅读(495) 评论(0) 推荐(0)

Hadoop技术内幕HDFS-笔记2

摘要：任何一个复杂的软件系统，为了提高其适应性和扩展性，一般都会有一个配置模块或者配置系统，作完成其扩展、定制的手段和方式。1.1. Windows的配置文件（第一次知道这事啊）：采用的是ini后缀的文本文件，可通过动态链接库提供方法进行处理。初始化文件或profile概要文件1.2. Java配置文件：... 阅读全文

posted @ 2014-06-27 08:58 jseven 阅读(242) 评论(0) 推荐(0)

Hadoop技术内幕HDFS-笔记1

摘要：书籍学习——董西成《Hadoop技术内幕深入解析HADOOP COMMON和HDFS架构设计与实现原理》HDFS 高容错，高伸缩性Lucene是引擎开发包，提供了一个纯java的高性能全文检索，可方便的嵌入到各种应用中实现全文搜索/索引功能。Nutch是以Lucene为基础实现的搜索引擎应用，Lu... 阅读全文

posted @ 2014-06-26 19:50 jseven 阅读(467) 评论(0) 推荐(0)

生活

摘要：我上床的时候是晚上11点，窗户外面下着小雪。我缩到被子里面，拿起闹钟，发现闹钟停了，我忘买电池了。天这么冷，我不愿意再起来。我就给妈妈打了个长途电话： “妈，我闹钟没电池了，明天还要去公司开会，要赶早，你六点的时候给我个电话叫我起床吧。” 妈妈在那头的声音有点哑，可能已经睡了，她说：“好，乖... 阅读全文

posted @ 2014-06-26 12:40 jseven 阅读(175) 评论(0) 推荐(0)

宗镜录略讲——南怀瑾老师——系列11

摘要：有点长，慢慢看！背道驰更远　学剑向文殊斯则劳形役思，丧力捐功。你以为在山里打坐是修道？永明寿禅师给你八个字评论：“劳形役思，丧力捐功”。“劳形”，你满辛苦地开运动会。庄子谓打坐的人是“坐驰”，打起坐来妄念奔驰，坐着开运动会，里头热闹得很，所以你坐一坐会累、会腿麻，又要观想，又要念咒子、又要求功德，... 阅读全文

posted @ 2014-06-25 18:49 jseven 阅读(1073) 评论(0) 推荐(0)

宗镜录略讲——南怀瑾老师——系列10

摘要：第四章　莫教幻识误明月如不辩眼中之赤眚，但灭灯上之重光，罔穷识内之幻身，空避日中之虚影。这段重点在告诉我们动静二相都是它变的。道体“本体”不在动相、也不在静相上面。认为静相就是道的人犯了什么大错误呢？好比眼睛有毛病，看一个灯光变成两个光圈，那是眼睛不正常，并非真有两个光圈或真有黑点。要使光圈的幻影... 阅读全文

posted @ 2014-06-25 18:46 jseven 阅读(266) 评论(0) 推荐(0)

宗镜录略讲——南怀瑾老师——系列9

摘要：人我如虎大家注意这篇文章，先是提出“三乘五性”，而不是这么讲，当然被我们这样一讲，等于狗啃骨头，啃得支离破碎。如果诸位自己回去念，在灯前点一支香，不是为了信佛，诚诚敬敬的，灯太亮了，味道不好，不如点一支蜡烛，若隐若现，两腿一翘，泡一杯茶，如果你抽烟，最好抽一支，然后高声朗诵一番，不涅一个槃，那个... 阅读全文

posted @ 2014-06-25 18:27 jseven 阅读(277) 评论(0) 推荐(0)

hadoop1-TopK问题实现之优化设计

摘要：此次map设计引入了一个自定义的list容器，使map输出时仅输出前几名即可。直接程序代码（引言可参考上一篇）： package test;import java.io.DataInput;import java.io.DataOutput;import java.io.IOException;i... 阅读全文

posted @ 2014-06-25 08:39 jseven 阅读(333) 评论(0) 推荐(0)

hadoop1-TopK问题实现

摘要：1、对于排名，一般都是很热衷的，那么如何实现在数据量多的情况下，得到所需要的数据呢，选取前几名的实际应用中，也会有许多，形成统一的算法实现，比着参考就可以了。2、数据文件a.txt：24679643、输出数据为（例如取前三名，前面为数据，后面为名次，名次可通过输入参数配置）：9 17 26 34、设... 阅读全文

posted @ 2014-06-25 08:36 jseven 阅读(580) 评论(0) 推荐(1)

hadoop1-构建电影推荐系统

摘要：问题导读：1. 推荐系统概述；2. 推荐系统指标设计；3. Hadoop并行算法；4. 推荐系统架构；5. MapReduce程序实现。前言Netflix电影推荐的百万美金比赛，把“推荐”变成了时下最热门的数据挖掘算法之一。也正是由于Netflix的比赛，让企业界和学科界有了更深层次的技术碰撞。引发... 阅读全文

posted @ 2014-06-25 08:28 jseven 阅读(905) 评论(0) 推荐(0)

一位盲人

摘要：一位盲人老者打车，至下车计价器显示11.4元，帅哥司机把他扶至小区保安处。只说，我不收你钱，因为我比你挣钱容易。小区内走出一斯文大叔，上车，一路畅谈。至下车计价器显示14.5，下车时掏出30元，说：这钱还有刚才那位的，我也不伟大但挣钱比你也容易点，就希望你能继续做好事! 有个故事很有启发，... 阅读全文

posted @ 2014-06-24 08:34 jseven 阅读(200) 评论(0) 推荐(0)

hadoop1-商品推荐之商品关联性最简易建模2

摘要：1、继承自上一篇，需要参考一下，就去看看。2、增加数据量，实现相同商品ID的依据升序输出数据文件 1.txt：001={001,002,004,006,008} 003={003,002,001,009,004}001={001,002,004,006,008} 004={004,005,006... 阅读全文

posted @ 2014-06-24 08:30 jseven 阅读(489) 评论(0) 推荐(0)

hadoop1-商品推荐之商品关联性最简易建模1

摘要：1、如题，这是自己通过在QQ交流上得到的一个想法。2、数据文件 1.txt：001={001,002,004,006,008} 003={003,002,001,009,004}002={002,003,005,006,008,009,007} 004={004,005,006,009,008,... 阅读全文

posted @ 2014-06-24 08:24 jseven 阅读(374) 评论(0) 推荐(0)

来认识一下这些基于好友关系链和算法推荐的电影发现产品

摘要：据报道，百度在上个月已收购影视剧搜索及推荐服务“今晚看啥”团队，这个团队中的6、7人已开始在百度大厦内部办公，他们的汇报对象是百度垂直搜索部高级总监胡浩。随着巨头的进入，基于算法推荐的电影发现产品再次受到舆论关注。目前用户在互联网上发现电影的途径可大致做如下三种形式划分：官方推荐：这是最传统的1.0... 阅读全文

posted @ 2014-06-19 21:26 jseven 阅读(500) 评论(0) 推荐(0)

hadoop 倒排索引

摘要：6、倒排索引 "倒排索引"是文档检索系统中最常用的数据结构，被广泛地应用于全文搜索引擎。它主要是用来存储某个单词（或词组）在一个文档或一组文档中的存储位置的映射，即提供了一种根据内容来查找文档的方式。由于不是根据文档来确定文档所包含的内容，而是进行相反的操作，因而称为倒排索引（Inverted In... 阅读全文

posted @ 2014-06-18 23:23 jseven 阅读(1454) 评论(0) 推荐(0)

hadoop 多表关联

摘要：5、多表关联多表关联和单表关联类似，它也是通过对原始数据进行一定的处理，从其中挖掘出关心的信息。下面进入这个实例。5.1 实例描述输入是两个文件，一个代表工厂表，包含工厂名列和地址编号列；另一个代表地址表，包含地址名列和地址编号列。要求从输入数据中找出工厂名和地址名的对应关系，输出"工厂名——地... 阅读全文

posted @ 2014-06-18 22:03 jseven 阅读(458) 评论(0) 推荐(0)

宗镜录略讲——南怀瑾老师——系列8

摘要：即此用　离此用《宗镜录》谈到道体，它的自性根本是离开你，不是你离开它。换句话说大家要求空，一般人打坐都想空念头，很多人问我怎么空？唉！我说“天下本无事，庸人自扰之”，是念头来空你，不是你空它。“根本性离”是自性离开你，不是你离开它。比方我们八点钟坐在这里，大家检查第一次的念头、思想现在还有没有？它早... 阅读全文

posted @ 2014-06-18 13:54 jseven 阅读(668) 评论(0) 推荐(0)

宗镜录略讲——南怀瑾老师——系列7

摘要：第三章　如幻似真情何堪现在讲到形而上道体的问题，也就是我们平常所讲的“明心见性”。什么叫如来本性？——一切众生自己的本性。若欲穷微洞本，究旨通宗，则根本性离，毕竟寂灭，绝升沉之异，无缚脱之殊。最高的道体是什么样子？是“根本性离，毕竟寂灭”。寂灭是中国文字，梵文原意是涅槃之意，用中文翻译叫寂灭，另有... 阅读全文

posted @ 2014-06-18 13:44 jseven 阅读(299) 评论(0) 推荐(0)

宗镜录略讲——南怀瑾老师——系列6

摘要：性相近，习相远接下来讲“三乘五性”，三乘即声闻、缘觉、菩萨，人的禀赋根性不同，也就是现代心理学所说，人的性向问题。各个性向不同，这还只是人世间的心理研究，不如佛学深，比如苏东坡的诗：“书到今生读已迟”，人的聪明智慧不是靠这一生，是前生累积来的。有些学生爱玩小乘道——有为法。这是他的根性，要想把他转过... 阅读全文

posted @ 2014-06-18 13:37 jseven 阅读(338) 评论(0) 推荐(0)

hadoop Map中获取当前spilt文件名

摘要：旧版mapred下面实现方法如下： // 获得输入文件的路径名String path=((FileSplit)reporter.getInputSplit()).getPath().toString();在新版mapreduce中，在map函数中就是Contextcontext.fileName =... 阅读全文

posted @ 2014-06-17 22:55 jseven 阅读(727) 评论(0) 推荐(0)

hadoop 单表关联

摘要：恩，说真的，原来的那篇文章对于这个单表处理有点搞复杂了。4、单表关联前面的实例都是在数据上进行一些简单的处理，为进一步的操作打基础。"单表关联"这个实例要求从给出的数据中寻找所关心的数据，它是对原始数据所包含信息的挖掘。下面进入这个实例。4.1 实例描述实例中给出child-parent（孩子—... 阅读全文

posted @ 2014-06-17 22:38 jseven 阅读(1069) 评论(0) 推荐(0)

hadoop 平均成绩

摘要：3.1 实例描述对输入文件中数据进行就算学生平均成绩。输入文件中的每行内容均为一个学生的姓名和他相应的成绩，如果有多门学科，则每门学科为一个文件。要求在输出中每行有两个间隔的数据，其中，第一个代表学生的姓名，第二个代表其平均成绩。样本输入： 1）math：张三 88李四 99王五 66赵六 ... 阅读全文

posted @ 2014-06-17 21:19 jseven 阅读(1231) 评论(0) 推荐(0)

hadoop 数据排序

摘要：2.0 数据排序"数据排序"是许多实际任务执行时要完成的第一项工作，比如学生成绩评比、数据建立索引等。这个实例和数据去重类似，都是先对原始数据进行初步处理，为进一步的数据操作打好基础。2.1 实例描述对输入文件中数据进行排序。输入文件中的每行内容均为一个数字，即一个数据。要求在输出中每行有两个间隔... 阅读全文

posted @ 2014-06-17 20:44 jseven 阅读(1069) 评论(0) 推荐(0)

PL/SQL DEVELOPER 使用的一些技巧

摘要：1，登录后默认自动选中My Objects 默认情况下，PLSQL Developer登录后，Brower里会选择All objects。 Tools菜单 --> Object Brower Filters，会打开Brower Folders的定单窗口，把“My Objects”设为默认,同时把“M... 阅读全文

posted @ 2014-06-17 12:55 jseven 阅读(164) 评论(0) 推荐(0)

namenode未启动

摘要：1、问题：start-all.sh结果jps发现namenode没有启动，其它进程都启动2、查看日志，没有namenode生产的日志3、奇了，检查其它进程的日志，都在重新连接namenode Zzzzzzz.....4、记得虚拟机是直接关机的，未执行stop-all.sh5、删除tmp目录（metd... 阅读全文

posted @ 2014-06-16 22:47 jseven 阅读(409) 评论(0) 推荐(0)

宗镜录略讲——南怀瑾老师——系列5

摘要：世上庸人多“于无脱法中，自生系缚”。用不着解脱，自然解脱，就叫“无脱”，并没有一个东西给你跳出来，只要自己一念清净自然出来，这叫“无脱之脱”。众生认识不到自己本性本来没有束缚，都是自己找烦恼，所以大家打坐想找开悟，实际上只要真懂得两句话：“天下本无事，庸人自扰之”，就开悟了，你不扰乱就开悟了。拼命在... 阅读全文

posted @ 2014-06-16 19:31 jseven 阅读(414) 评论(0) 推荐(0)

宗镜录略讲——南怀瑾老师——系列4

摘要：一切众生、一切佛的本性，就是一切万物的本体，本来是清净、圆明的，以中国文化来讲是“本善”的。不要把它作普通善恶的善来看，它是超越此相对待的善，是至善的，那为什么会动妄念？为什么会有世界？为什么会有万象差别的不同？佛法的形上学可与《易经》合参永明寿禅师以《楞严经》要旨答：“最初不觉，忽起动心。”觉与不... 阅读全文

posted @ 2014-06-15 23:08 jseven 阅读(521) 评论(0) 推荐(0)

hadoop数据去重

摘要："数据去重"主要是为了掌握和利用并行化思想来对数据进行有意义的筛选。统计大数据集上的数据种类个数、从网站日志中计算访问地等这些看似庞杂的任务都会涉及数据去重。下面就进入这个实例的MapReduce程序设计。1.1 实例描述对数据文件中的数据进行去重。数据文件中的每行都是一个数据。样例输入如下... 阅读全文

posted @ 2014-06-15 22:12 jseven 阅读(1918) 评论(1) 推荐(0)

面试集锦

摘要：1、算法题：有2个桶，容量分别为3升和5升，如何得到4升的水，假设水无限使用，写出步骤。 1）将5升的水倒入3升的桶中，此时5升的桶剩余2升 2）清空3升的桶，将5升桶里的2升水倒入2升桶中 3）将盛满5升水的桶向3升的里面倒，倒满为止，此时五升桶里的水为4升2、racle数据库中有一个表字段nam... 阅读全文

posted @ 2014-06-15 21:37 jseven 阅读(364) 评论(0) 推荐(0)

Oracle/SQL 修改字段类型和长度

摘要：标准SQL修改字段类型和长度语句：ALTER TABLE tableName modify column columnName 类型;例如Mysql的修改字段类型语句：alter table test modify column name varchar(255);Oracle修改字段类型和长度语句... 阅读全文

posted @ 2014-06-15 21:36 jseven 阅读(3926) 评论(0) 推荐(0)

linux python安装

摘要：1、下载源代码 http://www.python.org/ftp/python/2.5.2/Python-2.5.2.tar.bz22、 $ tar –jxvf Python-2.5.2.tar.bz2 $ cd Python-2.5.2 $ ./configure $ make $ ... 阅读全文

posted @ 2014-06-15 21:00 jseven 阅读(144) 评论(0) 推荐(0)

使用 Apache Pig 处理数据7

摘要：Mapreduce 模式中的 Pig对于 MapReduce 模式，必须首先确保 Hadoop 正在运行。要做到这一点，最简单的方法是在 Hadoop 文件系统树的根上执行文件列表操作，如清单 3 所示。清单 3. 测试 Hadoop 可用性$ hadoop dfs -ls /Found 3 it... 阅读全文

posted @ 2014-06-15 20:44 jseven 阅读(329) 评论(0) 推荐(0)

使用 Apache Pig 处理数据6

摘要：Pig Latin 是一个相对简单的语言，它可以执行语句。一调语句就是一个操作，它需要输入一些内容（比如代表一个元组集的包），并发出另一个包作为其输出。一个包就是一个关系，与表类似，您可以在关系数据库中找到它（其中，元组代表行，并且每个元组都由字段组成）。用 Pig Latin 编写的脚本往往遵... 阅读全文

posted @ 2014-06-15 18:35 jseven 阅读(203) 评论(0) 推荐(0)

使用 Apache Pig 处理数据5

摘要：使用 Apache Pig 从大数据集中获得所需的信息Apache Pig 是一个高级过程语言，适合于使用 Hadoop 和 MapReduce 平台来查询大型半结构化数据集。通过允许对分布式数据集进行类似 SQL 的查询，Pig 可以简化 Hadoop 的使用。本文将探索 Pig 背后的语言，并在... 阅读全文

posted @ 2014-06-15 18:31 jseven 阅读(205) 评论(0) 推荐(0)

请善待他人

摘要：一位医生在接到紧急手术的电话后，以最快的速度赶到医院并换上手术服，男孩的父亲失控地对他喊道：“你怎么这么晚才来？你难道不知道我儿子正处在危险中吗？你怎么一点责任心都没有。”医生淡然地笑着说：“很抱歉，刚刚我不在医院，接到电话就马上赶来了，您冷静一下。“冷静？如果手术室里躺着的是你的儿子，你能冷静... 阅读全文

posted @ 2014-06-15 18:15 jseven 阅读(233) 评论(0) 推荐(0)

pig使用入门3-UDF的使用

摘要：1、Working with UDF(user defined function) pig能够支持两种类型的UDFs：eval和load/store，其中load/store的自定义函数主要是用来加载和保存特定的数据格式； eval自定义函数主要用来进行常规的数据转换。1.1 eval 如... 阅读全文

posted @ 2014-06-15 18:06 jseven 阅读(699) 评论(0) 推荐(0)

pig使用入门2

摘要：1、练习首先编写两个数据文件A： 0,1,2 1,3,4 数据文件B： 0,5,2 1,7,8 上传到HDFS对应目录/input目录下2、运行pig ,加载A和B 加载数据A：使用指定的分隔符, grunt> a = load '/input/A' using PigStora... 阅读全文

posted @ 2014-06-15 17:38 jseven 阅读(175) 评论(0) 推荐(0)

pig使用入门1

摘要：1、在pig下载的安装包，解压完成了之后，有一个tutorial目录，我们使用里面的数据来开始pig学习。如果tutorial目录下没有存在pigtutorial.tar.gz文件的话，那么需要使用ant来编译出这个文件如果没有ant，见分类linux下的ant安装2、进入tutorial目录，... 阅读全文

posted @ 2014-06-15 17:27 jseven 阅读(475) 评论(0) 推荐(0)

could only be replicated to 0 nodes, instead of 1

摘要：1、检查空间是否够用（我的就是这个原因） df -hl 查看，如果可用的很少，那就是了。2、datanode是否正常启动访问：50070，查看datanode的个数，如果不对应，重新启动3、是否在safemode下 hadoop dfsadmin -safemode get,查看，leave... 阅读全文

posted @ 2014-06-15 17:13 jseven 阅读(253) 评论(0) 推荐(0)

LINUX ant安装

摘要：1、下载 http://ant.apache.org/bindownload.cgi2、linux 下解压，tar -zxvf apache-ant...3、设置环境变量 ANT_HOME=... 添加ANT_HOME/bin进入PATH里面。4、source /etc/profile5、查看... 阅读全文

posted @ 2014-06-15 13:15 jseven 阅读(176) 评论(0) 推荐(0)

hadoop的第一次WordCount

摘要：1、新建MR工程 2、设置工程名字 3、finish 4、使用navicate浏览，使用package太长了。 5、将hadoop例子下的WordCount复制过来，当然我自己打的，重新熟悉一下。改改包名即可。一个示例完成。6、linux下准备数据文件 >hadoop dfs -m... 阅读全文

posted @ 2014-06-15 10:13 jseven 阅读(278) 评论(0) 推荐(0)

win7+Myeclipse10开发Hadoop应用程序环境搭建

摘要：1、复制linux下已配置安装好的hadoop目录进入windows, 同时修改hadoo-env.sh文件的JAVA_HOME为windows下的jdk目录。2、复制hadoop-eclipse-1.2.jar插件进入myeclipse文件夹下dropins下下载：我的文件下有一个以hado... 阅读全文

posted @ 2014-06-15 09:43 jseven 阅读(553) 评论(0) 推荐(0)

Hadoop大数据入门练习题

摘要：1. 下面哪个程序负责HDFS数据存储。 a) NameNode b) Jobtracker c) Datanode √（完成数据存储） d) secondaryNameNode e) tasktracker 2. HDfS中的block默认保存几份？ a) 3份√（hdfs-si... 阅读全文

posted @ 2014-06-14 21:53 jseven 阅读(4196) 评论(0) 推荐(0)

欢迎加入JAVA HOME

摘要：JAVA HOME IS A QQ GROUP. Welcome to join us. Although there are just two numbers. But,with you,we will grow up quickly! 点击链接加入群【JAVAHOME】：http... 阅读全文

posted @ 2014-06-14 20:06 jseven 阅读(237) 评论(0) 推荐(0)

sqlserver截取字符串

摘要：1、使用charindex(',',column_name)取得 ","所在的位置2、使用substring(str,start,end)截取3、例子 substring(column_name,0,charindex(',',column_name)) 即要赋予的值。阅读全文

posted @ 2014-06-14 13:40 jseven 阅读(594) 评论(0) 推荐(0)

sqoop 学习系列1——安装

摘要：1、sqoop安装 1）解压缩、重命名、设置环境变量同hadoop 2）将相应的数据库如mysql的驱动jar包放入$SQOOP_HOME/lib中 3）使用sqoop命令就可以完成数据的导入和导出操作了。阅读全文

posted @ 2014-06-13 23:31 jseven 阅读(128) 评论(0) 推荐(0)

pig学习系列1——安装

摘要：1、pig安装 1）解压，重命名、设置环境变量，同hadoop 2）编辑文件$PIG_HOME/conf/pig.properties，增加两行如下内容 fs.default.name=hdfs://hadoop:9000 mapred.job.tracker=hadoop:9001... 阅读全文

posted @ 2014-06-13 23:29 jseven 阅读(148) 评论(0) 推荐(0)

hive学习系列2——环境安装

摘要：1、hive的安装 (1)解压缩、重命名、设置环境变量，参考hadoop1学习系列2 (2)在目录$HIVE_HOME/conf/下，执行命令mv hive-default.xml.template hive-site.xml重命名在目录$HIVE_HOME/conf/下，执行命令mv hive-... 阅读全文

posted @ 2014-06-13 23:26 jseven 阅读(170) 评论(0) 推荐(0)

hive学习系列1——Mysql安装

摘要：安装mysql (1)执行命令rpm -qa |grep mysql 查看mysql是否安装删除linux上已经安装的mysql相关库信息。rpm -e xxxxxxx(查看的库名,可使用右键复制) --nodeps 执行命令rpm -qa |grep mysql 检查是否删除干净 (2)执行命令... 阅读全文

posted @ 2014-06-13 23:23 jseven 阅读(174) 评论(0) 推荐(0)

hbase学习系列1——伪分布模式安装

摘要：1 在hadoop上解压缩、重命名、设置环境变量HBASE_HOME，参考hadoop学习系列22 修改文件$HBASE_HOME/conf/hbase-env.sh，修改内容如下export JAVA_HOME=/usr/local/jdkexport HBASE_MANAGES_ZK=true#... 阅读全文

posted @ 2014-06-13 23:19 jseven 阅读(276) 评论(0) 推荐(0)

hadoop1学习系列2-hadoop伪分布安装

摘要：1.hadoop的伪分布安装(采用Host-only模式) 1.1 设置ip地址 1.1.1设置宿主机的VirtualBox Host-only Network网路设置 IP地址：192.168.56.1 子网掩码：255.255.255.0 默认网关：不填 ... 阅读全文

posted @ 2014-06-13 23:16 jseven 阅读(228) 评论(0) 推荐(0)

windows 使用技巧汇总

摘要：1、本地资源共享给远程桌面打开远程桌面连接，设置显示选项——》本地资源——》详细信息——》选择需要共享的驱动盘或文件即可。阅读全文

posted @ 2014-06-13 21:15 jseven 阅读(136) 评论(0) 推荐(0)

oracle sql使用技巧汇总

摘要：1、删除一个表的重复数据　所用的table_name一样DELETE FROM table_name a WHERE rowid > ( SELECT min(rowid) FROM table_name b WHERE b.id = a.id and b.name=a.name)... 阅读全文

posted @ 2014-06-13 21:15 jseven 阅读(255) 评论(0) 推荐(0)

hadoop1学习系列1——运行环境搭建

摘要：1、VirtualBox 安装恩，一路默认即可安装完毕。2、宿主机网络环境配置（使用Host-Only模式，上网啥的不用改配置） 2.1 右击VirtualBox选择属性，更改网络IP设置 2.2 设置为Ip地址和子网掩码为如下属性：，点击确定。（注意Centos默认网段为56） 3、... 阅读全文

posted @ 2014-06-13 13:38 jseven 阅读(167) 评论(0) 推荐(0)

linux 改变用户密码

摘要：当前用户：输入passwd 改变当前用户密码 root用户，修改其他用户密码：password username 即可。阅读全文

posted @ 2014-06-11 23:11 jseven 阅读(261) 评论(0) 推荐(0)

使用rapid-framework3.5结合sqlserver2005快速开发

摘要：1. 使用rapid-framework3.5结合sqlserver2005快速开发目的：原有网站上采用mysql示例，但是在直接使用sqlserver2005数据库会出现一些问题，所以有了此篇文档。环境：Myeclipse10Tomcat7.0Jdk7.0Struts2+hibernate+spr... 阅读全文

posted @ 2014-06-11 22:48 jseven 阅读(397) 评论(0) 推荐(0)

问题：如何实现java主线程等待子线程执行完毕之后再执行？

摘要：工作总往往会遇到异步去执行某段逻辑, 然后先处理其他事情, 处理完后再把那段逻辑的处理结果进行汇总的场景, 这时候就需要使用线程了. 一个线程启动之后, 是异步的去执行需要执行的内容的, 不会影响主线程的流程, 往往需要让主线程指定后, 等待子线程的完成. 这里有几种方式. 站在主线程的角度... 阅读全文

posted @ 2014-06-11 22:21 jseven 阅读(19992) 评论(0) 推荐(2)

web工程内存设置参考

摘要：如果是web工程报内存溢出，可能就要设置tomcat或相应java容器的内存。（1）tomcat（免安装版）的安装根目录%tomcat%bin/catalina.bat文件， SET JAVA_OPTS 一行； set JAVA_OPTS=-Xms1024m -Xmx1024m -XX:... 阅读全文

posted @ 2014-06-11 22:10 jseven 阅读(321) 评论(0) 推荐(0)

Myeclipse10内存设置

摘要：Myeclipse10内存设置 1、修改myeclipse10安装目录下myeclipse10下的myeclipse.ini文件按推荐设置： 2、设置默认虚拟机运行参数 Windows-> Preferences->Java->Installed JREs->点击正在使用的JDK->E... 阅读全文

posted @ 2014-06-11 22:02 jseven 阅读(560) 评论(0) 推荐(0)

【麦当劳肯德基】是美国在中国的基因武器试验场

摘要：有些时候,一提肯德基,我真的控制不住自己的情绪.在这里,我只是以一种十分客观的态度把肯德基的一些内幕告诉大家,只希望每个中国人... 能真正认识肯得基.我慢慢说我的经历吧. 本人是个在外漂泊的大学生,说来惭愧,在外也认识了不少朋友.我的一个朋友的父亲是中国银行某市的一个高层领导,他和美国的肯德... 阅读全文

posted @ 2014-06-11 21:39 jseven 阅读(289) 评论(0) 推荐(0)

oracle 表空间的创建

摘要：oracle 表空间的创建阅读全文

posted @ 2014-06-11 16:48 jseven 阅读(147) 评论(0) 推荐(0)

oracle 字符串与日期转换sql

摘要：oracle 字符串与日期转换sql 阅读全文

posted @ 2014-06-11 16:43 jseven 阅读(2252) 评论(0) 推荐(0)

《婚姻之礼》 ---心密二祖王骧陆

摘要：经云：婚姻之礼废，夫妇之道苦矣。此婚姻者，由文字起，至成婚大礼告成，乃至白首偕老止，礼皆不可废也。其郑重如此，原因夫妇为人伦之始。由夫妇而家庭，家庭而社会而有国。上以承宗继祖，下以启发后人。此正是对社会服务，对国家尽职；不是放弃家庭，出门做事，为社会服务也。夫妇的融合，第一是缘。何以生在同时... 阅读全文

posted @ 2014-06-11 16:35 jseven 阅读(433) 评论(0) 推荐(0)

快速代码生成脚手架-rapid-framwork初级使用

摘要：利用（代码生成技术）脚手架，可以提高javaWEB快速开发效率。本文采用rapid-framework搭建了一个易于入门的demo示例。工程采用struts2+spring+hibernate的框架组合。阅读全文

posted @ 2014-06-10 19:00 jseven 阅读(1031) 评论(0) 推荐(0)

愚人愚言100则2

摘要：201．稻穗成熟，头自然低下。202．如果不把自己内心的我执三毒倒掉，善知识现前，对你是没有用的。203．得到你不应该得到的东西，会是一种灾难。204．彻底的认识你自己，你就会认识佛。205．真正的布施，是把烦恼、忧虑、分别、执著，通通放下。206．若无「是非」挂心头，便是人间好时节。207．透视一... 阅读全文

posted @ 2014-06-10 14:00 jseven 阅读(235) 评论(0) 推荐(0)

愚人愚言100则

摘要：101．无论你处理任何事情，若心存尊重他人的想法，是一件非常有帮助的事情。102．吵闹处，须冷静。冷落处，须热情。103．我们无法祈求痛苦停止，但是必须祈求我们的心能够征服痛苦。104．真正的名誉，在虚荣之外。105．身在万物中，心在万物上。106．我将努力采取行动，因为我确信我所做的事将使情况改... 阅读全文

posted @ 2014-06-10 13:56 jseven 阅读(398) 评论(0) 推荐(0)

第一天——感恩

摘要：今后呢，要好好的写文章。也许自己不是一个大牛，但是对于技术希望自己越来越精通。也祝愿每一个看技术的人，都能成为一个技术大牛。一门技术，但是呢，也不能忘了生活。生活就是一门艺术，所以要好好珍惜。阅读全文

posted @ 2014-06-09 13:41 jseven 阅读(114) 评论(0) 推荐(0)

06 2014 档案

公告