摘要：
当数据量比较大，我们需要更快的完成任务，多个map和reduce进程是唯一的选择。但是如果输入文件是一个的话，map任务只能启动一个。此时bucket table是个很好的选择，通过指定CLUSTERED的字段，将文件通过hash打散成多个小文件。create table sunwg_test11(id int,name string)CLUSTERED BY(id) SORTED BY(name) INTO 32 BUCKETSROW FORMAT DELIMITEDFIELDS TERMINATED BY ‘/t’;执行insert前不要忘记设置set hive.enforce.bucke 阅读全文
阅读排行榜
Silverlight嵌入Html并调用该Html中的Javascript
2012-09-06 20:41 by java20130722, 334 阅读, 收藏,
摘要：
本文将分两步进行说明，第一步说明如何在silverlight的xaml脚本中加入html。第二步说如何在silverlight中调用html中的javascript函数。说明：vs2010 ultimate + silverlight5本文中所有代码都可以在github中查看，git版本中采用了master-dev的方式。在master中可以查看每一个demo的最后完成，在dev中可以查看每一步的代码。github地址：git@github.com:kiwiwin/silverlight-demo.git。文件夹名称htmlhost-javascript-demo一、在xaml中加入html1 阅读全文
自定义Java Annotations实例以及用Java Reflection来解析自定义的Annotation
2013-07-16 18:17 by java20130722, 333 阅读, 收藏,
摘要：
转自 http://www.journaldev.com/721/java-annotations-tutorial-with-custom-annotation-example-and-parsing-using-reflectionJava程序员都知道，在Java世界里到处可见@Override， @Deprecated等等这些Annotations， 这些代码不仅不影响Java代码编译运行，还能对代码起到很好的解释作用。那么我们如何定义自己的Annotation呐？ 接下来就是很好的例子！package com.journaldev.annotations; import java... 阅读全文
Android 8位颜色值和6位颜色值的区别
2011-12-05 14:02 by java20130722, 332 阅读, 收藏,
摘要：
很简单的一个问题:0xffff00ff 和我们传统的写得#FFFFFF有什么区别?以前一直没有在意这个问题,直到android这才发现,留个标记一下:0xffff00ff 分组时 0x|ff|ff00ff 分别表示 整数|透明度|颜色值 阅读全文
hive迁移hadoop namenode时遇到的问题
2013-03-14 17:33 by java20130722, 331 阅读, 收藏,
摘要：
使用了一段时间的hive和hadoop，在迁移datanode时很容易，要迁移namenode，hive里就闹情绪了。更改namenode后，在hive中运行select 依旧指向之前的namenode地址。要如何解决呢，具体操作如下：1.复制打包老的namenode2.复制打包老的namenode的hdfs目录3.到新机器准备好：修改master的值 复制到各节点 修改hive的定义4.hive这里使用了mysql来保存metadata因为这些信息会被写死在hive的DBS和SBS表里，下面是关键的一步：进入mysql，执行下面的sql，update DBS set DB_LOCATION_ 阅读全文
浙公网安备 33010602011771号