上一页 1 ··· 3 4 5 6 7 8 下一页
摘要: hdfs文件流操作方法一: 附上读写流程图 阅读全文
posted @ 2019-04-28 23:39 大魔王阿黎 阅读(173) 评论(0) 推荐(0)
摘要: 1 package it.dawn.HDFSPra; 2 3 import java.io.FileNotFoundException; 4 import java.io.IOException; 5 import java.net.URI; 6 import java.net.URISyntaxException; 7 import java.util.Array... 阅读全文
posted @ 2019-04-27 23:44 大魔王阿黎 阅读(201) 评论(0) 推荐(0)
摘要: 1)hdfs的客户端 1.网页形式->测试用 http://192.168.40.11:50070/dfshealth.html#tab-overview 2.命令行形式->测试用 3.企业级API 2)查看帮助 hdfs dfs -help 3)查看当前目录信息 hdfs dfs -ls / 3) 阅读全文
posted @ 2019-04-27 23:38 大魔王阿黎 阅读(168) 评论(0) 推荐(0)
摘要: 链接:https://pan.baidu.com/s/1IaqqbQdsNHKa49z0j-KshQ 提取码:6t50 阅读全文
posted @ 2019-04-27 00:38 大魔王阿黎 阅读(237) 评论(0) 推荐(0)
摘要: 1-> 集群的准备工作 1)关闭防火墙(进行远程连接) systemctl stop firewalld systemctl -disable firewalld 2)永久修改设置主机名 vi /etc/hostname 注意:需要重启生效->reboot 3)配置映射文件 vi /etc/host 阅读全文
posted @ 2019-04-27 00:04 大魔王阿黎 阅读(160) 评论(0) 推荐(0)
摘要: 3 大数据简介 1-> 什么是大数据? 大数据(big data),指无法在一定时间范围内用常规软件工具进行捕捉、管理和 处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优 化能力的海量、高增长率和多样化的信息资产。 传统的数据处理技术已经无法胜任,需要催生新的技术。一套用来处 阅读全文
posted @ 2019-04-26 00:20 大魔王阿黎 阅读(148) 评论(0) 推荐(0)
摘要: 大数据学习之Linux进阶 1-> 配置IP 1)修改配置文件 vi /sysconfig/network-scripts/ifcfg-eno16777736 2)注释掉dhcp #BOOTPROTO="dhcp" 3)添加配置(windows->ipconfig -all) IPADDR=192. 阅读全文
posted @ 2019-04-24 23:32 大魔王阿黎 阅读(114) 评论(0) 推荐(0)
摘要: 大数据学习之Linux基础 01:Linux简介 linux是一种自由和开放源代码的类UNIX操作系统。该操作系统的内核由林纳斯·托瓦兹 在1991年10月5日首次发布。,在加上用户空间的应用程序之后,成为Linux操作系统。 Linux也是自由软件和开放源代码软件发展中最著名的例子。 应用:长时间 阅读全文
posted @ 2019-04-24 23:27 大魔王阿黎 阅读(178) 评论(0) 推荐(0)
摘要: 问题分析 :mysql-connector-java的版本太低,数据库的版本太高 因此将mysql-connector-java升级到最新版本就解 。或者降低MySQL的版本。我之前用的是8.0版本的MySQL,改为5.5的就没事!!!!! 阅读全文
posted @ 2018-11-11 17:35 大魔王阿黎 阅读(7145) 评论(0) 推荐(1)
摘要: 一伪分布模式 特点:在单机上,模拟一个分布式的环境,具备Hadoop的所有功能 HDFS:NameNode + DataNode + SecondaryNameNode Yarn:ResourceManager + NodeManager (*)hadoop-env.sh JAVA_HOME /ro 阅读全文
posted @ 2018-10-10 22:01 大魔王阿黎 阅读(478) 评论(0) 推荐(0)
上一页 1 ··· 3 4 5 6 7 8 下一页