摘要：
大家好，我们公司现在有一个多线程的需求，但是对时间有要求，我有时间方案，但是感觉不是太好，所以想求助兄弟们。我现在有以下需求: 主节点并行的调用子节点，总时间不超过20秒，但是又能保证先返回的数据，先能被我们获取到我的实现方式是通过线程池实现的，但是当遍历Futurn的时候，会出现某个出现超时，其他... 阅读全文
摘要：
题记： 近期在做某个大型银行的大数据项目，当在处理非结构化数据时，却发现他们给的数据并不符合hive和pig的处理要求，数据每行必须需要多个分割符才能完美处理，一下午也没有想到完美的办法解决，今天重新审视了一下整个过程。看来hive的命令行没法搞定了。于是乎，只能通过代码来搞定。1、重新实现hiv... 阅读全文
摘要：
题记： 近期在做某个大型银行的大数据项目，当在处理非结构化数据时，却发现他们给的数据并不符合hive和pig的处理要求，数据每行必须需要多个分割符才能完美处理，一下午也没有想到完美的办法解决，今天重新审视了一下整个过程。看来hive的命令行没法搞定了。于是乎，只能通过代码来搞定。1、重新实现hiv... 阅读全文
摘要：
很多软件在正式发布前都会发布一些预览版或者测试版，一般都叫“beta版”或者 “rc版”，特别是开源软件，甚至有“alpha版”，下面来解释一下各个版本的意思。alpha版：内部测试版。α是希腊字母的第一个，表示最早的版本，一般用户不要下载这个版本，这个版本包含很多BUG，功能也不全，主要是给开发人... 阅读全文
摘要：
准备：去hive官方下载，本次教程安装的是hive0.13.1版本的，当然你也可以去我的百度云盘下载。1、解压hive，命令如图所示：2、配置hive的环境变量， 配置完后，执行下source /ect/profile 使其立即生效3、在hive中修改hive-config.sh文件。3、修改had... 阅读全文
摘要：
1、查看hadoop启动的进程有哪些？2、查看hdfs里面有哪些文件3、查看某个文件里面的内容4、删除某个文件5、其他的可以查询api 阅读全文
摘要：
1、首先，去官网注册一个微信公众号2、点击开发者中心，填写服务器配置信息3、通过ngrok来映射本地的请求到服务器端4、通过代码来验证请求，并给出相应的回复，不多说，贴代码package com.weixin.action;import java.io.IOException;/* * 第一次请求的... 阅读全文
摘要：
1、什么叫WebView?Android手机中内置了一款高性能webkit内核浏览器，在SDK中封装为一个叫做WebView组件。WebKit是一个开源项目，包含一个网页引擎WebCore和一个脚本引擎JavaScriptCore，它们分别对应的是KDE的KHTML和KJS。2、WebView是干什... 阅读全文
摘要：
配置完成之后，运行pig -help一直报错报错如下：Cannot locate pig-withouthadoop.jar. do 'ant jar-withouthadoop', and try again检测了所有的设置，最后发现我下载的是源码，而不是编译之后的文件大家看看两个文件的比较，大小... 阅读全文