会员
周边
新闻
博问
融资
云市场
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
蔡军帅
当你的才华撑不起你的野心时,就该静下心来好好读博客了。
博客园
首页
新随笔
联系
订阅
管理
上一页
1
···
7
8
9
10
11
12
13
14
15
···
164
下一页
2020年4月21日
大数据Hadoop第八周——Wordcount程序的运行+Spark下载解压+Scala语言环境和简介
摘要: 大数据第8周 1.Wordcount程序的运行 1.1准备数据 上传到hdfs一个英文的文本文件,尽量不要在根目录下。文件内容也不要太多,可以自己数清楚有几个词,方便检查是否正确。 1.2写入运行参数 当前界面显示出要运行的程序,然后点击主菜单的“run”。 并选择“Run Configuratio
阅读全文
posted @ 2020-04-21 13:50 蔡军帅
阅读(218)
评论(0)
推荐(0)
编辑
2020年4月14日
大数据Hadoop第七周——Eclipse环境下java语言mapreduce程序开发环境配置+WordCount.java详解
摘要: 大数据第七周 1 Eclipse环境下java语言mapreduce程序开发环境配置 1.1 拷贝eclipse软件 先拷贝到根目录下,然后解压 tar -zxvf eclipse-java-2020-03-R-linux-gtk-x86_64.tar.gz 打开eclipse:进入eclipse
阅读全文
posted @ 2020-04-14 17:01 蔡军帅
阅读(444)
评论(0)
推荐(0)
编辑
大数据Hadoop第七周——Eclipse环境下java语言mapreduce程序开发环境配置+WordCount.java详解...
摘要: 大数据第七周1 Eclipse环境下java语言mapreduce程序开发环境配置1.1 拷贝eclipse软件先拷贝到根目录下,然后解压tar -zxvf eclipse-java-2020-03-R-...
阅读全文
posted @ 2020-04-14 17:01 蔡军帅
阅读(198)
评论(0)
推荐(0)
编辑
2020年4月7日
大数据Hadoop第六周——启动集群并验证
摘要: 大数据第6周1.启动集群并验证启动集群:start-all.sh启动后先用jps验证线程数是否正确,按照我的配置,master节点线程:连个slave节点:为了验证集群mapreduce工作是否正常,...
阅读全文
posted @ 2020-04-07 22:50 蔡军帅
阅读(153)
评论(0)
推荐(0)
编辑
大数据Hadoop第六周——启动集群并验证
摘要: 大数据第6周 1.启动集群并验证 启动集群:start-all.sh 启动后先用jps验证线程数是否正确,按照我的配置,master节点线程: 连个slave节点: 为了验证集群mapreduce工作是否正常,可以运行例子程序,例如: 进入相应目录hadoop-2.7/share/hadoo
阅读全文
posted @ 2020-04-07 22:50 蔡军帅
阅读(602)
评论(0)
推荐(0)
编辑
2020年3月31日
大数据Hadoop第五周——Hadoop系统配置、启动Hadoop集群
摘要: 大数据第5周 1.Hadoop系统配置 1.1 环境配置 需要配置两个文件:hadoop-env.sh和yarn-env.sh,配置JAVA_HOME变量。 vi hadoop-env.sh,修改成了如下内容: vi yarn-env.sh,增加了一句:export JAVA_HOME=/home/
阅读全文
posted @ 2020-03-31 12:53 蔡军帅
阅读(285)
评论(0)
推荐(0)
编辑
大数据Hadoop第五周——Hadoop系统配置、启动Hadoop集群
摘要: 大数据第5周 1.Hadoop系统配置 1.1 环境配置 需要配置两个文件:hadoop-env.sh和yarn-env.sh,配置JAVA_HOME变量。 vi hadoop-env.sh,修改成了如下...
阅读全文
posted @ 2020-03-31 12:53 蔡军帅
阅读(128)
评论(0)
推荐(0)
编辑
2020年3月24日
大数据Hadoop第四周——免密钥登录设置、配置java和hadoop环境
摘要: 大数据第4周 0.检查联网每次打开虚拟机都无法联网,都忘了打开服务这一步 1.用户名相同要求三个虚拟机的用户名相同,否者相互访问时需要使用用户名,这样集群会有问题。如要新增用户,先转换为root用户su...
阅读全文
posted @ 2020-03-24 14:30 蔡军帅
阅读(203)
评论(0)
推荐(0)
编辑
大数据Hadoop第四周——免密钥登录设置、配置java和hadoop环境
摘要: 大数据第4周 0.检查联网 每次打开虚拟机都无法联网,都忘了打开服务这一步 1.用户名相同 要求三个虚拟机的用户名相同,否者相互访问时需要使用用户名,这样集群会有问题。 如要新增用户,先转换为root用户su root,然后执行以下操作: 添加新用户:useradd 用户名 设置用户密码:pas
阅读全文
posted @ 2020-03-24 14:30 蔡军帅
阅读(513)
评论(0)
推荐(0)
编辑
2020年3月22日
(转载)VM虚拟机 自定义(高级)安装win 7系统史上超详细图文教程(附win7 iso镜像资源)
摘要: 本文转载自:https://blog.csdn.net/weixin_43288322/article/details/84640995 最近开始用wireshark抓包玩,觉得用个虚拟机比较方便,反正要重头装一遍,顺便写给需要的朋友看,这篇主要是自定义安装,毕竟C盘是市中心地价老贵了,首先是做好如
阅读全文
posted @ 2020-03-22 16:48 蔡军帅
阅读(1048)
评论(0)
推荐(0)
编辑
上一页
1
···
7
8
9
10
11
12
13
14
15
···
164
下一页