随笔分类 -  06大数据-apache大数据环境搭建

大数据学习思维导图
摘要： 阅读全文
posted @ 2018-02-07 09:58 四叶草Grass 阅读(1324) 评论(0) 推荐(0)
大数据架构师技能图谱
摘要：一、大数据通用处理平台 Spark Flink Hadoop 二、分布式存储 HDFS 三、资源调度 Yarn Mesos 四、机器学习工具 Mahout Spark Mlib TensorFlow (Google 系) Amazon Machine Learning DMTK (微软分布式机器学习 阅读全文
posted @ 2018-02-06 10:49 四叶草Grass 阅读(724) 评论(0) 推荐(0)
2018年，Java程序员转型大数据开发，是不是一个好选择？
摘要：近日网上有一篇关于Java程序员职场生存现状的文章“2017年 Java 程序员，风光背后的危机”，在Java程序员圈子里引起了广泛关注和热议。 2017年，Java 程序员面临更加激烈的竞争。 不得不承认，经历过行业的飞速发展期，互联网的整体发展趋于平稳。为什么这么说？为什么要放在 Java 程序 阅读全文
posted @ 2018-02-06 10:48 四叶草Grass 阅读(323) 评论(0) 推荐(0)
当我说要做大数据工程师时他们都笑我，直到三个月后……
摘要：转载自：http://blog.csdn.net/gitchat/article/details/78341484 GitChat 作者：Fickr孫啟誠 原文： 三个月大数据研发学习计划实战解析 关注微信公众号：「GitChat 技术杂谈」 一本正经的讲技术 【不要错过文末彩蛋】 申明： 本文旨在 阅读全文
posted @ 2018-02-01 15:35 四叶草Grass 阅读(282) 评论(0) 推荐(0)
大数据开源组件图谱
摘要：转载自：http://blog.csdn.net/u010039929/article/details/70157376 文件系统 数据存储 内存技术 数据搜集 消息系统 数据处理 查询引擎 分析和报告工具 调度与管理服务 机器学习 开发平台 文件系统 HDFS Hadoop Distributed 阅读全文
posted @ 2017-10-22 16:16 四叶草Grass 阅读(354) 评论(0) 推荐(0)
单机RedHat6.5+JDK1.8+Hadoop2.7.3+Spark2.1.1+zookeeper3.4.6+kafka2.11+flume1.6环境搭建步骤
摘要：1、RHEL 6.5系统安装配置图解教程(rhel-server-6.5) 2、在Linux下安装JDK图文解析 3、RedHat6.5上安装Hadoop单机 4、RedHat6.5安装Spark单机 5、RedHat6.5安装zookeeper单机 6、RedHat6.5安装kafka单机 7、R 阅读全文
posted @ 2017-09-09 21:24 四叶草Grass 阅读(173) 评论(0) 推荐(0)
使用shell脚本批处理控制大数据环境服务启动停止
摘要：三台集群机器： master 192.168.168.200 slave1 192.168.168.201 slave2 192.168.168.202 1、start-master.sh #!bin/sh echo " " echo " 启动 Hadoop " echo " " start-all 阅读全文
posted @ 2017-07-25 15:06 四叶草Grass 阅读(197) 评论(0) 推荐(0)
集群RedHat6.5+JDK1.8+Hadoop2.7.3+Spark2.1.1+zookeeper3.4.6+kafka2.11+flume1.6环境搭建步骤
摘要：1、RHEL 6.5系统安装配置图解教程(rhel-server-6.5) 2、在Linux下安装JDK图文解析 3、RedHat6.5上安装Hadoop集群 4、RedHat6.5安装Spark集群 5、RedHat6.5安装zookeeper集群 6、RedHat6.5安装kafka集群 7、R 阅读全文
posted @ 2017-07-18 11:41 四叶草Grass 阅读(157) 评论(0) 推荐(0)