会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
我是属车的
博客园
首页
新随笔
联系
订阅
管理
上一页
1
···
11
12
13
14
15
16
17
18
19
···
23
下一页
2019年2月14日
hadoop SequenceFile示例
摘要: 1、写入,SequenceFile的key和value不一定是Writable,只要能被Serialization序列化和反序列化就可以。 2、读取,如果key和value使用了Writable,使用next()方法就可以把数据读入到key和value中,对于非Writable的类型的序列化需要根据
阅读全文
posted @ 2019-02-14 16:39 我是属车的
阅读(665)
评论(0)
推荐(0)
2019年2月2日
hadoop 把mapreduce任务从本地提交到hadoop集群上运行
摘要: MapReduce任务有三种运行方式: 1、windows(linux)本地调试运行,需要本地hadoop环境支持 2、本地编译成jar包,手动发送到hadoop集群上用hadoop jar或者yarn jar方式运行。 3、本地编译环境在IDE里直接提交到集群上运行,实际上这种方式就是第二种方式的
阅读全文
posted @ 2019-02-02 21:04 我是属车的
阅读(4154)
评论(0)
推荐(0)
hadoop 编码实现文件传输、查看等基本文件控制
摘要: hadoop集群搭建参考:https://www.cnblogs.com/asker009/p/9126354.html 1、创建一个maven工程,添加依赖 2、实现cat、copy、filestatus等基本代码,代码可以在windows的IDE环境中正常运行(参考上篇在windows里调试ha
阅读全文
posted @ 2019-02-02 12:30 我是属车的
阅读(660)
评论(0)
推荐(0)
windows下本地调试hadoop代码,远程调试hadoop节点。
摘要: 1、在github上搜索winutils下载winutils.exe相关的一套文件,下载对应hadoop的版本。(https://github.com/steveloughran/winutils) 2、将所有文件复制到hadoop的bin目录下 3、将hadoop.dll复制到windows\sy
阅读全文
posted @ 2019-02-02 12:21 我是属车的
阅读(1142)
评论(0)
推荐(0)
2019年1月30日
hadoop的第一个hello world程序(wordcount)
摘要: 在hadoop生态中,wordcount是hadoop世界的第一个hello world程序。 wordcount程序是用于对文本中出现的词计数,从而得到词频,本例中的词以空格分隔。 关于mapper、combiner、shuffler、reducer等含义请参照Hadoop权威指南里的说明。 代码
阅读全文
posted @ 2019-01-30 12:34 我是属车的
阅读(4197)
评论(0)
推荐(0)
2019年1月28日
CentOS7 修改主机名
摘要: 1、使用hostname命令修改,临时的,重启失效。 2、修改/etc/sysconfig/network,永久的,重启生效。 3、如果修改/etc/sysconfig/network后不生效,查看/etc/hostname是否存在,修改其里面内容。 4、通过查看 cat /proc/sys/ker
阅读全文
posted @ 2019-01-28 14:25 我是属车的
阅读(1137)
评论(0)
推荐(0)
kaptcha验证码在windows下正常,在linux下无法显示
摘要: 有几种情况,记录备忘: 1、两个环境字体不一样,linux环境下可能没有字体,重新安装字体即可。 2、tomcat等容器下没有temp目录,手动建立即可。 3、如果报找不到类的错误,检查JDK是否正确,以及检查是否具备显示图片验证码需要图形组件。 4、还有一种是没有任何报错的,不显示图片,可能的情况
阅读全文
posted @ 2019-01-28 00:12 我是属车的
阅读(1294)
评论(0)
推荐(0)
2019年1月27日
CentOS 安装tomcat
摘要: 1、确保JDK已经安装,版本在1.8以上 2、到网管下载安装 3、查看tomcat配置 4、配置端口,开通防火墙端口 5、配置管理用户 6、测试tomcat 7、发布webapp
阅读全文
posted @ 2019-01-27 23:12 我是属车的
阅读(267)
评论(0)
推荐(0)
2019年1月26日
mysql 迁移 mariadb
摘要: 背景: mysql5.7数据库安装在windows环境中,数据需要迁移到CentOS7.4的mariadb5.5中。web应用是采用springboot2.x开发的,迁移数据完成后,还需要简单修改一些应用的配置。 1、在windows环境中使用mysqldump -u root -p busdata
阅读全文
posted @ 2019-01-26 22:47 我是属车的
阅读(1549)
评论(0)
推荐(0)
2019年1月24日
CentOS 安装MariaDB
摘要: 1、安装 2、安全设置 3、登入数据库 4、修改密码 5、管理用户 5.1、创建用户和删除用户 创建用户除了可以明确指定登陆IP、域名、主机名外,还可以使用通配的方式 PS:在windows下用mysql workbench登陆: 6、授权 6.1、语法 语法元素: privileges,授权账户的
阅读全文
posted @ 2019-01-24 17:22 我是属车的
阅读(1104)
评论(0)
推荐(0)
上一页
1
···
11
12
13
14
15
16
17
18
19
···
23
下一页
公告