博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理

2014年5月14日

摘要: 一、背景Hadoop中实现了用于全局排序的InputSampler类和TotalOrderPartitioner类,调用示例是org.apache.hadoop.examples.Sort。但是当我们以Text文件作为输入时,结果并非按Text中的string列排序,而且输出结果是SequenceF... 阅读全文

posted @ 2014-05-14 14:12 Y.Cloud 阅读(5263) 评论(0) 推荐(0) 编辑

摘要: 一、版本对比公司版Mahout由于Mahout只能允许于hadoop0.20以上版本上,而百度的hadoop是hadoop0.19的一个分支。因此百度HPC组曾经将Mahout移植到百度的hadoop集群。Mahout上古版本,只有itembased一种算法,且只能用于百度版hadoop。开源Mah... 阅读全文

posted @ 2014-05-14 13:04 Y.Cloud 阅读(2321) 评论(0) 推荐(0) 编辑

2014年5月4日

摘要: 按数值排序示例:按气温字段对天气数据集排序问题:不能将气温视为Text对象并以字典顺序排序正统做法:用顺序文件存储数据,其IntWritable键代表气温,其Text值就是数据行常用简单做法:首先,增加偏移量以消除所有负数;其次,在数字面前加0,使所有数字的长度相等;最后,用字典法排序。stream... 阅读全文

posted @ 2014-05-04 12:50 Y.Cloud 阅读(9259) 评论(0) 推荐(1) 编辑

2014年5月3日

摘要: 本人在csdn的博客莫名其妙地被封了(http://blog.csdn.net/fty8788),非常郁闷。回忆起,可能是我近半年由于工作事情忙很少写博客了,被某213盗用发了不恰当的东东。我也查不到是不是发了什么私信、评论,只看到多了几篇莫名其妙的博客。可csdn居然直接封了我的博客,原来的文章一... 阅读全文

posted @ 2014-05-03 23:51 Y.Cloud 阅读(169) 评论(0) 推荐(0) 编辑

2010年5月21日

摘要: 消息队列提供了一种从一个进程向另一个进程发送一个数据块的方法。  头文件:sys/types.h、sys/ipc.h、sys/msg.h  消息结构定义:  struct my_message{  long int message_type;  ....  }  1.msgget函数  int msgget(key_t key, int msgflag);  key:键值。不重复即可,IPC_PR... 阅读全文

posted @ 2010-05-21 21:57 Y.Cloud 阅读(1808) 评论(0) 推荐(1) 编辑

2010年5月11日

摘要: 本人喜爱玩游戏,读研之前一直玩的是单机游戏,从没玩过角色扮演网络游戏。直到去年9月偶然玩起了DNF这样一款网游,一发不可收拾玩到现在还没收手。说来惭愧,玩了大半年大半部分时间是在玩外挂。  可能是我对外挂比对游戏本身更感兴趣吧。从开始买人家的外挂,到后来完全用上了免费挂,自己也能整出部分功能来。应该说对外挂有了一定的了解。  据我了解,外挂可分为两种类型:一种是内存修改型(如强大的GE),另一种是... 阅读全文

posted @ 2010-05-11 17:20 Y.Cloud 阅读(356) 评论(0) 推荐(0) 编辑

2009年9月22日

摘要: 服了博客园了,刚才写了半天的东西,一个连接失败就全没了,博客园的网络咋这么烂呢? 既然如此,直接进入正题。 首先,网络配置。虚拟机中的网络连接选择Custom,再选VMnet8(NAT)。查看母机网络,配置VMware Network Adapter VMnet8的网络,IP地址使用内网192.168.0.1,网关为母机外网IP,DNS和母机保持一致。子机如果是windows,不用设置就可以上网。... 阅读全文

posted @ 2009-09-22 10:58 Y.Cloud 阅读(254) 评论(0) 推荐(0) 编辑

2009年9月18日

摘要: 今天在写一个程序时发现一个奇异的现象。 注意其中的float ssavg_ap[4]; float ssdev_ap[4]; 当我把它两放在main函数外面作全局变量时,程序编译没问题,但执行时就出现如下错误:Inset error 1064:You have an error in your SQL syntax; check the manual that corresponds to you... 阅读全文

posted @ 2009-09-18 20:08 Y.Cloud 阅读(223) 评论(0) 推荐(0) 编辑

2009年7月7日

摘要: 前几天刚刚把大学本科生涯给结果了,在学校附近辗转几天后,我抛却所有的不舍与烦恼,杀气十足地踏进研究生的实验室,准备大干一场。谁知,顶头上司忙里偷闲去了,在实验室闲了两天也没啥事干,只好一遍一遍地审阅bbs上的帖子,找起了游戏准备回住处玩(在实验室还是不能太猖狂),但无赖还是没办法排解这颗闲心,于是做起了四个月前的行当:TJU ACM-ICPC。TOJ 1601. Box of Bricks简单题... 阅读全文

posted @ 2009-07-07 17:19 Y.Cloud 阅读(291) 评论(0) 推荐(0) 编辑

2009年6月22日

摘要: 这半年多数时间心情还是挺好的,偶尔写写论文,玩玩游戏,和同学吃个饭,打个球,旅个游,日子还挺滋润。唯独到了这大学本科的最后时刻,各种烦心事接踵而至:本专业论文老是被批,明天答辩,真想赶紧跟老师说拜拜;暑假不让回家,还不给解决住宿问题;聚会,送老乡、送同学都怕忙不过来。。。  这些事其实都没啥,就是各种事情堆积在一起,感觉着实不爽,就像心里老压着一块块的石头,期盼这段日子早点过去,但想想四年的同学、... 阅读全文

posted @ 2009-06-22 14:00 Y.Cloud 阅读(119) 评论(0) 推荐(0) 编辑