摘要：
hdfs文件流操作方法一： 附上读写流程图 阅读全文
posted @ 2019-04-28 23:39
大魔王阿黎
阅读(173)
评论(0)
推荐(0)
摘要：
1 package it.dawn.HDFSPra; 2 3 import java.io.FileNotFoundException; 4 import java.io.IOException; 5 import java.net.URI; 6 import java.net.URISyntaxException; 7 import java.util.Array... 阅读全文
posted @ 2019-04-27 23:44
大魔王阿黎
阅读(201)
评论(0)
推荐(0)
摘要：
1）hdfs的客户端 1.网页形式->测试用 http://192.168.40.11:50070/dfshealth.html#tab-overview 2.命令行形式->测试用 3.企业级API 2）查看帮助 hdfs dfs -help 3）查看当前目录信息 hdfs dfs -ls / 3） 阅读全文
posted @ 2019-04-27 23:38
大魔王阿黎
阅读(168)
评论(0)
推荐(0)
摘要：
链接：https://pan.baidu.com/s/1IaqqbQdsNHKa49z0j-KshQ 提取码：6t50 阅读全文
posted @ 2019-04-27 00:38
大魔王阿黎
阅读(237)
评论(0)
推荐(0)
摘要：
1-> 集群的准备工作 1）关闭防火墙(进行远程连接) systemctl stop firewalld systemctl -disable firewalld 2）永久修改设置主机名 vi /etc/hostname 注意：需要重启生效->reboot 3）配置映射文件 vi /etc/host 阅读全文
posted @ 2019-04-27 00:04
大魔王阿黎
阅读(160)
评论(0)
推荐(0)
摘要：
3 大数据简介 1-> 什么是大数据？ 大数据（big data），指无法在一定时间范围内用常规软件工具进行捕捉、管理和 处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优 化能力的海量、高增长率和多样化的信息资产。 传统的数据处理技术已经无法胜任，需要催生新的技术。一套用来处 阅读全文
posted @ 2019-04-26 00:20
大魔王阿黎
阅读(148)
评论(0)
推荐(0)
摘要：
大数据学习之Linux进阶 1-> 配置IP 1）修改配置文件 vi /sysconfig/network-scripts/ifcfg-eno16777736 2）注释掉dhcp #BOOTPROTO="dhcp" 3）添加配置（windows->ipconfig -all） IPADDR=192. 阅读全文
posted @ 2019-04-24 23:32
大魔王阿黎
阅读(114)
评论(0)
推荐(0)
摘要：
大数据学习之Linux基础 01：Linux简介 linux是一种自由和开放源代码的类UNIX操作系统。该操作系统的内核由林纳斯·托瓦兹 在1991年10月5日首次发布。，在加上用户空间的应用程序之后，成为Linux操作系统。 Linux也是自由软件和开放源代码软件发展中最著名的例子。 应用：长时间 阅读全文
posted @ 2019-04-24 23:27
大魔王阿黎
阅读(178)
评论(0)
推荐(0)
摘要：
问题分析 ：mysql-connector-java的版本太低，数据库的版本太高 因此将mysql-connector-java升级到最新版本就解 。或者降低MySQL的版本。我之前用的是8.0版本的MySQL，改为5.5的就没事！！！！！ 阅读全文
posted @ 2018-11-11 17:35
大魔王阿黎
阅读(7145)
评论(0)
推荐(1)
摘要：
一伪分布模式 特点：在单机上，模拟一个分布式的环境，具备Hadoop的所有功能 HDFS：NameNode + DataNode + SecondaryNameNode Yarn：ResourceManager + NodeManager （*）hadoop-env.sh JAVA_HOME /ro 阅读全文
posted @ 2018-10-10 22:01
大魔王阿黎
阅读(478)
评论(0)
推荐(0)
浙公网安备 33010602011771号