摘要: HDFS常用操作命令 启动hdfs #start-all.sh 查看hdfs的配置文件 #cat hdfs-site.sh #hadoop fs -put /soft/jdk / #HDFS上传文件命令 查看上传后的文件属性 #hadoop fs -ls / 进入存放datanode的block目录 阅读全文
posted @ 2018-04-02 16:59 racin 阅读(2133) 评论(0) 推荐(0) 编辑
摘要: HIVE基本操作命令 创建数据库 >create database db_name; >create database if not exists db_name;//创建一个不存在的数据库final 查看数据库 >show databases; 选择性查看数据库 >show databases l 阅读全文
posted @ 2018-04-02 16:54 racin 阅读(8426) 评论(0) 推荐(0) 编辑
摘要: hive本地化安装使用默认数据库(主节点) 解压hive文件 hadoop@master:~$sudo tar -zxvf apache-hive-2.1.0-bin.tar.gz -C /opt/modules 配置环境变量 hadoop@master:~$vi /etc/profile expo 阅读全文
posted @ 2018-04-02 16:45 racin 阅读(223) 评论(0) 推荐(0) 编辑
摘要: 分布式搭建 在ubuntu下创建hadoop用户组和用户 bigdata@master:~$sudo addgroup hadoop bigdata@master:~$sudo adduser --ingroup hadoop hadoop 给hadoop用户添加权限 bigdata@master: 阅读全文
posted @ 2018-04-02 16:40 racin 阅读(285) 评论(0) 推荐(0) 编辑
摘要: Hive安装配置(mysql) 安装mysql hadoop$:sudo apt-get update hadoop$:sudo apt-get install mysql-server 启动mysql hadoop$:sudo service mysql start 进入mysql界面 hadoo 阅读全文
posted @ 2018-03-28 21:57 racin 阅读(2909) 评论(0) 推荐(0) 编辑
摘要: HDFS架构 HDFS也是按照Master和Slave的结构,分namenode,secondarynamenode,datanode这几个角色。 Namenode:是maseter节点,是大领导。管理数据快映射;处理客户端的读写请求; Datanode:slave节点,负责存储cliet发来的数据 阅读全文
posted @ 2018-03-28 08:59 racin 阅读(262) 评论(0) 推荐(0) 编辑