05 2014 档案

hadoop2.x整合手册【3】---编译sqoop的jar以及client的api调用
摘要:编译sqoop在windows下使用mvn编译的时候jre的环境是不够的,必须安装jdk,并且设置JAVA_HOME这个环境变量设置完成后使用cmd进入到sqoop目录下的client目录然后调用mvn maven安装路径\mvn compile进行编译,调用maven安装路径\mvn packag... 阅读全文

posted @ 2014-05-26 14:20 AI001 阅读(367) 评论(0) 推荐(0)

hadoop2.x整合手册【2】---sqoop1.9.x安装与部署
摘要:sqoop1.9简介此版本的sqoop分为服务器和客户端两个部分,服务端可以独立安装hadoop集群的任意一台节点,甚至此节点的hadoop服务可以不处于运行状态。在启动服务端后任意安装客户端即可。在新的架构下,各种命令的执行全部放在了客户端。类似redis的客户端使用方式。安装步骤1.修改serv... 阅读全文

posted @ 2014-05-23 17:23 AI001 阅读(253) 评论(0) 推荐(0)

hadoop2.x整合手册【1】--hadoop2.x安装与配置
摘要:前置工作此处阅读需要曾经有1.x版本的安装部署经验ssh无密码配置如同1.X版本和防火墙需要关闭,而需要的java环境也要准备好将hadoop集群进行网络隔离,服务请求以及数据请求不要直接访问hadoop集群安装步骤一、核心配置文件以及配置(此处配置来源于官网)conf/core-site.xmlP... 阅读全文

posted @ 2014-05-21 15:54 AI001 阅读(281) 评论(0) 推荐(0)

中国黑客传说:游走在黑暗中的精灵
摘要:声明:本文内容禁止讲给16岁以下的小朋友听,以免吓坏小朋友。出于保护当事人的原因,禁止任何人在任何时候以任何理由向我打听其人其事,我不会做出任何回复。我不对本文的真实性负责。本文禁止任何媒体转载,但允许个人转载至微博或个人博客!原文:http://taosay.net/index.php/2013/... 阅读全文

posted @ 2014-05-21 12:38 AI001 阅读(254) 评论(0) 推荐(0)

什么样的工作可以让程序员年薪高达50万美元?
摘要:本文由 伯乐在线 - tuzi37 翻译自 Amin Ariana。欢迎加入技术翻译小组。转载请参见文章末尾处的要求。【伯乐在线导读】:有位国外网友曾读了“商业内幕”网站的一篇有关谷歌程序员年薪300万美元的文章,他在 Quora 上提问想知道,到底是什么样的工作,让他们身价如此之高。针对这个问题,... 阅读全文

posted @ 2014-05-19 10:05 AI001 阅读(143) 评论(0) 推荐(0)

阿里云oss的net断点续传demo
摘要:断点续传:(存在问题) class Program { static void Main(string[] args) { String bucketName = "自己的bucket名"; String key = "... 阅读全文

posted @ 2014-05-13 17:09 AI001 阅读(1286) 评论(0) 推荐(0)

花费功夫的几个问题
摘要:上一个项目里用了没有用过的一个框架,其中果然碰到了几个问题,幸亏都是可搜索引擎的。remark一下,以备将来1.IE11在NET4.0下出现“__doPostBack未定义”:这个问题是在使用了服务端控件以后会出现的,但是是在ie11或ie10下,主要原因是服务端对浏览器版本识别错误造成的,需要服务... 阅读全文

posted @ 2014-05-05 11:21 AI001 阅读(155) 评论(0) 推荐(0)

没有可持续集成的日子里
摘要:幸福的生活是比较出来的在五一前经历了一个噩梦般的48小时连轴转之后,我开始非常怀念在持续化集成环境下工作的日子了。至少,在可持续集成环境下我不会怀疑我调用的服务接口的可用性,毕竟,环境中繁多但是全面的自动化单元测试保证了服务接口的可用性。然而由于现在公司的技术“作风”,我现在开始不信任任何一个并非出... 阅读全文

posted @ 2014-05-05 10:30 AI001 阅读(170) 评论(0) 推荐(0)

Apache Avro 与 Thrift 比较
摘要:http://www.alidata.org/archives/1307Avro和Thrift都是跨语言,基于二进制的高性能的通讯中间件. 它们都提供了数据序列化的功能和RPC服务. 总体功能上类似,但是哲学不一样. Thrift出自Facebook用于后台各个服务间的通讯,Thrift的设计强调统... 阅读全文

posted @ 2014-05-03 08:48 AI001 阅读(1338) 评论(0) 推荐(0)

导航