愤怒中的小草

博客园 首页 新随笔 联系 订阅 管理

随笔分类 -  hadoop

大数据学习路线（转载）
摘要：正文： 一、大数据相关的工作介绍 二、大数据工程师的技能要求 三、大数据学习规划 四、持续学习资源推荐（书籍，博客，网站） 五、项目案例分析（批处理+实时处理） 二、大数据介绍 大数据本质也是数据，但是又有了新的特征，包括数据来源广、数据格式多样化（结构化数据、非结构化数据、Excel文件、文本文件 阅读全文
posted @ 2018-12-28 22:10 愤怒中的小草 阅读(151) 评论(0) 推荐(0)

hadoop集群部署配置补充
摘要：/etc/hosts192.168.153.147 Hadoop-host192.168.153.146 Hadoopnode1 192.168.153.145 Hadoopnode2::1 localhost/etc/profileexport HADOOP_HOME=/opt/hadoop ex 阅读全文
posted @ 2018-05-29 22:24 愤怒中的小草 阅读(134) 评论(0) 推荐(0)

hadoop集群部署
摘要：1. 目录/opt/hadoop/etc/hadoop core-site.xml mip：在主节点的mip就是自己的ip，而所有从节点的mip是主节点的ip。 9000：主节点和从节点配置的端口都是9000 hdfs-site.xml dfs.nameservices：在一个全分布式集群大众集群当 阅读全文
posted @ 2018-05-28 23:26 愤怒中的小草 阅读(139) 评论(0) 推荐(0)

hadoop安装
摘要：1. centos7 ip设置 2. 关闭防火墙 3. 安装jdk 4. 安装hadoop 阅读全文
posted @ 2018-05-28 21:53 愤怒中的小草 阅读(127) 评论(0) 推荐(0)