随笔分类 -  hbase和Hive

hbase索索引引
摘要：1.damo 第二个 3.hbase的命令 4.别的测试demo 模拟多个列值插入测试demo demo3 cdh tm 阅读全文
posted @ 2018-07-07 16:00 努力中国
hbase创建索引
摘要：1.代码 上面这个代码有缺陷，只能索引一次结果。建议使用下面的 2.在hadoop创建文件 3.将文件上传hadoop-1 使用shell命令上传到hdfs 下面特殊 对CDH用户：假设系统有一个文件夹/user/directory，注意，这个文件夹的拥有者不是所谓的“root”。实际上，这个文件夹 阅读全文
posted @ 2018-07-02 14:20 努力中国
spark读取hive数据
摘要：1.首先将集群的这3个文件hive-site.xml，core-size.xml,hdfs-site.xml放到资源文件里(必须，否则报错) 2.代码方面。下面几个测试都可以运行。 1）test03.java 2)Hive03.scala 3) SparkHiveText.scala 运行时会出现类 阅读全文
posted @ 2018-06-13 17:47 努力中国
hive读取hbase数据
摘要：简单的例子看这个:https://blog.csdn.net/dominic_tiger/article/details/70237542 和 https://blog.csdn.net/xiewenbo/article/details/24627323 之前创建时报错 FAILED: Error 阅读全文
posted @ 2018-06-13 09:57 努力中国
hive安装
摘要：上面是要改的hive-site.xml 1.修改环境变量/etc/profile： 执行source /etc.profile： 执行hive --version 有hive的版本显现，安装成功！ 1）当运行时报错 报错信息 解决办法： 这是由于没有初始化数据库，生成元数据。 需要执行以下指令(在h 阅读全文
posted @ 2018-06-11 18:28 努力中国
hbase shell 简单操作
摘要：进入hbase Shell 1.查看服务器状态 2.查看HBase版本 3.DDL操作 1).create命令 创建一个具有三个列族"member_id"和"address"即"info"的表"member"，其中表名、行和列都要用单引号括起来，并以逗号隔开。 2).list命令 查看当前HBase 阅读全文
posted @ 2018-05-22 18:08 努力中国
sqoop将mysql导入到hbase中
摘要：1、安装MariaDB 安装命令 yum -y install mariadb mariadb-server 安装完成MariaDB，首先启动MariaDB systemctl start mariadb 设置开机启动 systemctl enable mariadb 接下来进行MariaDB的相关 阅读全文
posted @ 2018-05-15 09:34 努力中国
Hbase常用命令
只有注册用户登录后才能阅读该文。
posted @ 2018-05-02 17:12 努力中国 阅读(17) 评论(0) 推荐(0)
java调hbaseAPI----简单的增删改查操作
摘要：确保自己的集群注册过 C:\Windows\System32\drivers\etc\hosts 方案Ⅰ 远程连接需要有配置文件 代码 上面这个方案需要添加配置文件 方案Ⅱ 下面是示例代码。这个代码不需要依赖上面两个配置文件直接运行，如果放上面的配置文件会报错 3.百万数据插入并优化 4.数字格式化 阅读全文
posted @ 2018-03-19 12:11 努力中国
hive简单学习---1
摘要：修改下面的文件(那个文件先重命名) *上面的hive?createDatabaseIfNotExist=true是创建一个hive数据库，后面参数是如果没有这个数据库，则创建这个hive数据库 阅读全文
posted @ 2018-01-05 14:40 努力中国
Hbase简单学习---1 图形画界面
摘要：1.求和2.put一行数据或一列数据3.删除某一列的数据4.全表扫描5.get某一行或某一列的数据6.相当于组合的命令，对表进行初始化删除一个然后又创建一个表 hbase图形化界面 在主节点hadoop-2运行报如下错误： 是因为没有启动hbase的集群 在主节节点hadoop-2下启动即可 hba 阅读全文
posted @ 2018-01-04 18:54 努力中国