摘要：
Hdfs下载数据源码分析 在这里，我是接着之前的，贴下代码 package cn.itcast.hadoop.hdfs; import java.io.FileInputStream; import java.io.FileNotFoundException; import java.io.IOEx 阅读全文
posted @ 2016-09-21 23:02
大数据和AI躺过的坑
阅读(560)
评论(0)
推荐(0)
摘要：
hadoop中的RPC框架实现机制 RPC是Remotr Process Call， 进程间的远程过程调用，不是在一个jvm里。 即，Controller拿不到Service的实例对象。 hadoop中的RPC应用实例demo 在windows是调用端，在linux里是服务端。 在这里，需要Logi 阅读全文
posted @ 2016-09-21 22:28
大数据和AI躺过的坑
阅读(489)
评论(0)
推荐(0)
摘要：
HDFS的JAVA客户端编写 现在，我们来玩玩，在linux系统里，玩eclipse 或者， 即，更改图标，成功 这个，别慌。重新换个版本就好，有错误出错是好事。 http://www.eclipse.org/downloads/download.php?file=/technology/epp/d 阅读全文
posted @ 2016-09-21 17:35
大数据和AI躺过的坑
阅读(343)
评论(0)
推荐(0)
摘要：
第一天的笔记，是伪分布hadoop集群搭建， 后面是hadoop Ha的分布式集群搭建 第一天，是HDFS的shell操作 NN工作机制 里面是二进制 DN工作原理 上传完了之后，在hdfs的虚拟路径下，有这个文件，其实，是切分成很多block，放到公共的datanode文件夹下。 13421772 阅读全文
posted @ 2016-09-21 16:56
大数据和AI躺过的坑
阅读(606)
评论(0)
推荐(0)
摘要：
（2015年1月11日） 课程目录 01-NN元数据管理机制 02-NN工作机制2 03-DN工作原理 04-HDFS的JAVA客户端编写 05-filesystem设计思想总结 06-hadoop中的RPC框架实现机制 07-hadoop中的RPC应用实例demo 08-hdfs下载数据源码跟踪铺 阅读全文
posted @ 2016-09-21 16:37
大数据和AI躺过的坑
阅读(301)
评论(0)
推荐(0)
摘要：
不多说，直接上干货！ Hdfs是根/目录，windows是每一个盘符 1 从Linux里传一个到，hdfs里去 2 从hdfs里下一个到，linux里去 想从hdfs里，下载到linux， 涨知识，记住，hdfs是建立在linux上， 现在，hdfs里还有jdk-7u65-linux-i586.ta 阅读全文
posted @ 2016-09-21 16:31
大数据和AI躺过的坑
阅读(361)
评论(0)
推荐(0)
摘要：
由于，之前，已经在/etc/profile里，配置了hadoop的全局变量，所以，现在可以在任何路径下执行hadoop命令。 来玩玩 其实啊，在这里，出现了错误， 参考解决链接： http://ithelpblog.com/os/linux/redhat/centos-redhat/howto-fi 阅读全文
posted @ 2016-09-21 16:10
大数据和AI躺过的坑
阅读(272)
评论(0)
推荐(0)
摘要：
企业公认的最新文本版本： https://archive.apache.org/dist/ 玩玩这个远程连接软件，是个绿色软件。 别人已经做好了的。 解压之后， 下面，软件展示下， 这会默认去打开， 为了，方便，使用，放到桌面，作为快捷方式 成功 学个知识点，让普通用户如hadoop具备sudo执行 阅读全文
posted @ 2016-09-21 16:04
大数据和AI躺过的坑
阅读(435)
评论(0)
推荐(0)
摘要：
不多说，直接上干货！ 一、weekend110的Linux带图形系统安装 二、网络配置 明明是配置好的啊，只能说是域名出现问题了， 出现ping：unknow host www.baidu.com的问题解决 解决Ubuntu系统的每次开机重启后，resolv.conf清空的问题 网络配置和静态IP设 阅读全文
posted @ 2016-09-21 15:18
大数据和AI躺过的坑
阅读(296)
评论(0)
推荐(0)
摘要：
（2015年1月10日） 课程目录 01-hadoop职位需求状况 02-hadoop课程安排 03-hadoop应用场景 04-hadoop对海量数据处理的解决思路 05-hadoop版本选择和伪分布式安装1 06-hadoop版本选择和伪分布式安装2 07-hdfs&mapreduce测试 08 阅读全文
posted @ 2016-09-21 15:00
大数据和AI躺过的坑
阅读(384)
评论(0)
推荐(0)
浙公网安备 33010602011771号