tele - 博客园

2018年8月18日

摘要：修改$HADOOP_HOME/etc/hadoop/mapred-site.xml,加入以下配置(修改主机名为你自己的主机或IP,尽量不要使用中文注释) 依次执行start-dfs.sh,start-yarn.sh后jps查看namenode,datanode等是否启动,成功启动后启动history 阅读全文

posted @ 2018-08-18 21:22 tele 阅读(1991) 评论(0) 推荐(0)

hadoop 3.x Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster

摘要：启动hdfs后执行share目录中自带的mapreduce程序时报如下错误找到$HADOOP_HOME/etc/mapred-site.xml,增加以下配置阅读全文

posted @ 2018-08-18 16:10 tele 阅读(6695) 评论(14) 推荐(0)

2018年8月17日

hadoop 3.x 无法访问hdfs(50070,8088)的web界面

摘要： 1.启动hadoop.然后netstat -nltp|grep 50070,如果,没有找到进程,说明没有配置web界面的端口修改hdfs-site,xml中加上如下配置再次启动后,netstat -nltp|grep 5070,仍然没有该端口号信息的话说明namenode可能没有成功启动,建议先j 阅读全文

posted @ 2018-08-17 23:13 tele 阅读(6246) 评论(0) 推荐(0)

ue 不能初始化ftp组件

摘要：进入到ue的安装目录下shift并右键-->在此处打开命令窗口,执行以下命令 regsvr32.exe wodFtpDLX.dll,如果是64位要执行regsvr32.exe wodFtpDLX64.dll regsvr32.exe wodTelnetDLX.ocx如果是64位要执行regsvr32 阅读全文

posted @ 2018-08-17 22:36 tele 阅读(1994) 评论(0) 推荐(0)

hadoop 3.x 单机集群配置/启动时的问题处理

摘要：一.修改配置文件(hadoop目录/etc/hadoop/配置文件) 1.修改hadoop-env.sh,指定JAVA_HOME 修改完毕后 2.修改core-site.xml 3.修改hdfs-site.xml 到这启动hadoop的基本配置已经完成了(配置完这些已经可以启动hadoop了),下面阅读全文

posted @ 2018-08-17 22:31 tele 阅读(2474) 评论(0) 推荐(0)

Centos 6.x 配置hadoop的环境变量

摘要： 1.安装jdk 原来是用的rpm安装的1.7,所以先使用rpm -qa|grep jdk,找到安装的1.7后 rpm -e --nodeps xxx.使用securecrt把官网下载的jdk-8u181-linux-x64.tar.gz上传(rz命令)到linux上,接着使用 tar -zxvf j 阅读全文

posted @ 2018-08-17 11:17 tele 阅读(1974) 评论(0) 推荐(0)

2018年8月15日

java lambda表达式以及Predicate接口

摘要：了解lambda之前先了解下什么是函数式接口,函数式接口即接口里必须有一个抽象方法(抽象的方法只能有一个,可以有其他的用default修饰的方法以及从Object继承的方法) jdk8里新增了一个@FunctionalInterface注解,这个注解标注此接口为函数式接口,但是并不是必须的,任何满足阅读全文

posted @ 2018-08-15 18:27 tele 阅读(4919) 评论(0) 推荐(0)

2018年8月14日

单例模式

摘要： Runtime类中就使用了饱汉式单例模式阅读全文

posted @ 2018-08-14 16:21 tele 阅读(183) 评论(0) 推荐(0)

2018年8月13日

笔记整理(一)

摘要：把大一,大二,大三学习时的笔记整理下,有的是课本上的,还有的记不清了 1.字节解码成字符,字符编码成字节 2.序列化与持久化对象序列化(实现Serializable接口),把对象序列化成流(或者反过来),方便存储即持久化(IO.JDBC) 多语言环境下,java序列化后存储的对象很难用其他语言还原阅读全文

posted @ 2018-08-13 20:58 tele 阅读(140) 评论(0) 推荐(0)

webcollector 2.x 爬取搜狗搜索结果页

摘要：输出截图(部分) 验证第二页数据标题阅读全文

posted @ 2018-08-13 11:12 tele 阅读(865) 评论(0) 推荐(0)

code never lies

公告