01 2020 档案

记录遇到的一些Hadoop—Mapreduc相关的问题
摘要：一：类类型使用不一致（mapper和reduce） 20/01/13 16:03:42 INFO mapreduce.JobSubmitter: Submitting tokens for job: job_1578714121919_0001 20/01/13 16:03:42 INFO conf 阅读全文

posted @ 2020-01-13 18:10 PandOne 阅读(306) 评论(0) 推荐(0)

记录一个低级又让人踩坑的bug（org.springframework.web.method.annotation.MethodArgumentTypeMismatchException）
摘要：1.造成缘由，前端返回Long类型值，无值时null作为字符串返回给后端controller，后端以Long类型接收。 具体日志： 2020-01-09 18:02:27,435] [ERROR] [http-nio-8080-exec-5] [com.ideatech.ams.exception. 阅读全文

posted @ 2020-01-10 10:40 PandOne 阅读(14128) 评论(0) 推荐(0)

Hadoop通过idea连接远程集群出现的用户权限问题
摘要：使用开发机器：mac 集成工具：idea 开发测试hadoop程序期间需要连接远程集群服务。 通过hadoop源码可以知道，Hadoop 在连接集群时首先会获取本机运行环境一些参数，其中访问远程集群的使用用户即为本机用户，或者配置的HADOOP_USER_NAME的环境变量参数值。 一般我们会去配置 阅读全文

posted @ 2020-01-06 17:10 PandOne 阅读(770) 评论(0) 推荐(0)

导航