上一页 1 ··· 11 12 13 14 15 16 17 18 19 ··· 23 下一页
摘要: 1、写入,SequenceFile的key和value不一定是Writable,只要能被Serialization序列化和反序列化就可以。 2、读取,如果key和value使用了Writable,使用next()方法就可以把数据读入到key和value中,对于非Writable的类型的序列化需要根据 阅读全文
posted @ 2019-02-14 16:39 我是属车的 阅读(665) 评论(0) 推荐(0)
摘要: MapReduce任务有三种运行方式: 1、windows(linux)本地调试运行,需要本地hadoop环境支持 2、本地编译成jar包,手动发送到hadoop集群上用hadoop jar或者yarn jar方式运行。 3、本地编译环境在IDE里直接提交到集群上运行,实际上这种方式就是第二种方式的 阅读全文
posted @ 2019-02-02 21:04 我是属车的 阅读(4154) 评论(0) 推荐(0)
摘要: hadoop集群搭建参考:https://www.cnblogs.com/asker009/p/9126354.html 1、创建一个maven工程,添加依赖 2、实现cat、copy、filestatus等基本代码,代码可以在windows的IDE环境中正常运行(参考上篇在windows里调试ha 阅读全文
posted @ 2019-02-02 12:30 我是属车的 阅读(660) 评论(0) 推荐(0)
摘要: 1、在github上搜索winutils下载winutils.exe相关的一套文件,下载对应hadoop的版本。(https://github.com/steveloughran/winutils) 2、将所有文件复制到hadoop的bin目录下 3、将hadoop.dll复制到windows\sy 阅读全文
posted @ 2019-02-02 12:21 我是属车的 阅读(1142) 评论(0) 推荐(0)
摘要: 在hadoop生态中,wordcount是hadoop世界的第一个hello world程序。 wordcount程序是用于对文本中出现的词计数,从而得到词频,本例中的词以空格分隔。 关于mapper、combiner、shuffler、reducer等含义请参照Hadoop权威指南里的说明。 代码 阅读全文
posted @ 2019-01-30 12:34 我是属车的 阅读(4197) 评论(0) 推荐(0)
摘要: 1、使用hostname命令修改,临时的,重启失效。 2、修改/etc/sysconfig/network,永久的,重启生效。 3、如果修改/etc/sysconfig/network后不生效,查看/etc/hostname是否存在,修改其里面内容。 4、通过查看 cat /proc/sys/ker 阅读全文
posted @ 2019-01-28 14:25 我是属车的 阅读(1137) 评论(0) 推荐(0)
摘要: 有几种情况,记录备忘: 1、两个环境字体不一样,linux环境下可能没有字体,重新安装字体即可。 2、tomcat等容器下没有temp目录,手动建立即可。 3、如果报找不到类的错误,检查JDK是否正确,以及检查是否具备显示图片验证码需要图形组件。 4、还有一种是没有任何报错的,不显示图片,可能的情况 阅读全文
posted @ 2019-01-28 00:12 我是属车的 阅读(1294) 评论(0) 推荐(0)
摘要: 1、确保JDK已经安装,版本在1.8以上 2、到网管下载安装 3、查看tomcat配置 4、配置端口,开通防火墙端口 5、配置管理用户 6、测试tomcat 7、发布webapp 阅读全文
posted @ 2019-01-27 23:12 我是属车的 阅读(267) 评论(0) 推荐(0)
摘要: 背景: mysql5.7数据库安装在windows环境中,数据需要迁移到CentOS7.4的mariadb5.5中。web应用是采用springboot2.x开发的,迁移数据完成后,还需要简单修改一些应用的配置。 1、在windows环境中使用mysqldump -u root -p busdata 阅读全文
posted @ 2019-01-26 22:47 我是属车的 阅读(1549) 评论(0) 推荐(0)
摘要: 1、安装 2、安全设置 3、登入数据库 4、修改密码 5、管理用户 5.1、创建用户和删除用户 创建用户除了可以明确指定登陆IP、域名、主机名外,还可以使用通配的方式 PS:在windows下用mysql workbench登陆: 6、授权 6.1、语法 语法元素: privileges,授权账户的 阅读全文
posted @ 2019-01-24 17:22 我是属车的 阅读(1104) 评论(0) 推荐(0)
上一页 1 ··· 11 12 13 14 15 16 17 18 19 ··· 23 下一页