摘要： 启动Hadoop 打开Cgywin窗口，执行cd ~/hadoop命令，进入hadoop文件夹，如下图： 启动Hadoop前，需要先格式化Hadoop的文件系统HDFS，执行命令：bin/hadoop namenode -format 注意namenode要小些，否则如果输入NameNode，会提示 阅读全文

摘要： 4、安装sshd服务 双击桌面上的Cygwin图标，启动Cygwin，执行ssh-host-config -y命令 执行后，会提示输入密码，否则会退出该配置，此时输入密码和确认密码，回车。最后出现Host configuration finished.Have fun!表示安装成功。 输入net s 阅读全文

摘要： 1、安装JDK1.6或更高版本 官网下载JDK，安装时注意，最好不要安装到带有空格的路径名下，例如:Programe Files，否则在配置Hadoop的配置文件时会找不到JDK（按相关说法，配置文件中的路径加引号即可解决，但我没测试成功）。 2、安装Cygwin Cygwin是Windows平台下 阅读全文

摘要： 4、测试和使用 1）创建hdfs的目录，如下： Hadoop fs –mkdir /user Hadoop fs –mkdir /user/input 2）上传文件 Hadoop fs –put e:/test.txt /user/input Txt文本内容如下，输入： Hadoop fs –cat 阅读全文

摘要： 一、下载压缩包： 1、JavaJDK，1.8以上。 2、Hadoop2.8.3，下载地址：http://archive.apache.org/dist/hadoop/core/ Hadoop2.8.3windows环境下的第三方包：winutils， https://github.com/steve 阅读全文

摘要： 运行wc来进行测试首先要创建文件夹 hdfs dfs -mkdir -p /wc/input1上传文件到输入路径 hdfs dfs -put aaa.txt /wc/input1进入hadoop2.9.0/share/hadoop/mapreduce路径，运行 hadoop jar hadoop-m 阅读全文

摘要： windows下安装hadoop 下载hadoop安装包：hadoop2.9官方下载地址然后解压到合适的位置开始配置2.1 进入安装路径下/etc/hadoop/因为我之前安装了cygwin所以可以使用ls，原生的可以使用dir命令查看路径下有什么文件 修改下面的文件 2.2 首先修改core-si 阅读全文

摘要： 学习时长 16h 代码行数 约2000行 发表博客数量 8篇 学到的知识 Python爬虫；echarts大屏显示；echarts地图下钻 学习时长 16h 代码行数 约2000行 发表博客数量 8篇 学到的知识 Python爬虫；echarts大屏显示；echarts地图下钻 阅读全文

摘要： 学习时长 15h 代码行数 约1500行 发表博客数量 6篇 学到的知识 Spring AOP；结组作业 阅读全文

摘要： 成功在网上爬取到全国的疫情数据，在pycharm中成功创建mysql数据库与数据表，并将数据写入，明天研究echart制表。 阅读全文