摘要: 将博客搬至CSDN 阅读全文
posted @ 2019-01-21 16:58 随笔` 阅读(125) 评论(0) 推荐(0) 编辑
摘要: 在C:\Program Files (x86)\ArcGIS\Desktop10.2\bin 目录下添加 pg依赖的插件 插件下载地址: 阅读全文
posted @ 2019-01-21 16:57 随笔` 阅读(1151) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2019-01-02 13:46 随笔` 阅读(290) 评论(0) 推荐(0) 编辑
摘要: 1、上传安装包到集群服务器 2、解压 3、修改配置文件 进入zookeeper的安装目录的conf目录 cp zoo_sample.cfg zoo.cfg vi zoo.cfg # The number of milliseconds of each tick tickTime=2000 initL 阅读全文
posted @ 2018-12-17 20:22 随笔` 阅读(149) 评论(0) 推荐(0) 编辑
摘要: //maven 下载不完全 ,去maven If you are using maven to build your jar, you need to add the following dependency: <dependency> <groupId>org.apache.avro</group 阅读全文
posted @ 2018-11-26 09:10 随笔` 阅读(2123) 评论(0) 推荐(0) 编辑
摘要: win7下eclipse中错误的详细描述如下: org.apache.hadoop.security.AccessControlException: org.apache.hadoop.security .AccessControlException: Permission denied: user 阅读全文
posted @ 2018-11-25 20:20 随笔` 阅读(1389) 评论(0) 推荐(0) 编辑
摘要: 1.map方法读取一个文件的一行记录进行分析, 输入:LongWritable(当前读取的文件位置), Text(内容) 2.map将读取到的信息进行分类,输入Context (键值对) ;作为Reduce 的输入数据: 1)其中reduce 中的输入数据的先后是有顺序的,reduce-task 会 阅读全文
posted @ 2018-11-23 23:09 随笔` 阅读(167) 评论(0) 推荐(0) 编辑
摘要: 1. wordcount示例开发 1.1. wordcount程序整体运行流程示意图 map阶段: 将每一行文本数据变成<单词,1>这样的kv数据 reduce阶段:将相同单词的一组kv数据进行聚合:累加所有的v 注意点:mapreduce程序中, map阶段的进、出数据, reduce阶段的进、出 阅读全文
posted @ 2018-11-23 22:55 随笔` 阅读(150) 评论(0) 推荐(0) 编辑
摘要: 错误日志: 错误代码: 修改方式添加 job 提交的地址 开放以下代码 阅读全文
posted @ 2018-11-19 21:38 随笔` 阅读(2046) 评论(1) 推荐(0) 编辑
摘要: 1.ClassCastException 错误代码 正确代码 将第一个泛型修改成LongWritable 阅读全文
posted @ 2018-11-19 21:29 随笔` 阅读(225) 评论(0) 推荐(0) 编辑