摘要: Hbase的访问方式 1、Native Java API:最常规和高效的访问方式; 2、HBase Shell:HBase的命令行工具,最简单的接口,适合HBase管理使用; 3、Thrift Gateway:利用Thrift序列化技术,支持C++,PHP,Python等多种语言,适合其他异构系统在 阅读全文
posted @ 2018-11-14 15:04 乀崋 阅读(1391) 评论(0) 推荐(0) 编辑
摘要: 图1 大数据技能体系 一、数据库-熟悉两个产品Oracle、Gbase 8a。 二、数据仓库-4年企业(电网)数据仓库建设。 三、BI工具-熟悉一款BI产品Tableau。 四、ETL-掌握一类产品Informatica。 五、编程语言-java已不掌握,自学python,sql还熟悉一些。 六、h 阅读全文
posted @ 2018-11-14 15:03 乀崋 阅读(518) 评论(0) 推荐(0) 编辑
摘要: get命令和HTable类的get()方法用于从HBase表中读取数据。使用 get 命令,可以同时获取一行数据。它的语法如下: 下面的例子说明如何使用get命令。扫描emp01表的第一行。 读取指定列 下面给出的是语法,使用get方法读取指定列。 下面给出的示例,是用于读取HBase表中的特定列。 阅读全文
posted @ 2018-11-14 09:02 乀崋 阅读(429) 评论(0) 推荐(0) 编辑
摘要: 安装简要说明新版本的kafka自带有zookeeper,其实自带的zookeeper完全够用,本篇文章以记录使用自带zookeeper搭建kafka集群。1、关于kafka下载kafka下载页面:http://kafka.apache.org/downloads2、修改kafka配置文件kafka安 阅读全文
posted @ 2018-11-06 20:40 乀崋 阅读(547) 评论(0) 推荐(0) 编辑
摘要: 分布式搭建 一、下载zookeeper安装包 自行下载:我用的是 zookeeper-3.5.4-beta.tar.gz 二、环境准备 1、 我的虚拟机自带的java是1.7的,这个版本要求java1.8的版本,因此又下载了java1.8,进行了环境变量配置 2、我准备了三台虚拟机,分别为192.1 阅读全文
posted @ 2018-10-27 10:41 乀崋 阅读(261) 评论(0) 推荐(0) 编辑
摘要: 之前在安装OGG总是遇到字符集问题,尤其是多源端对一个目标端时,源端字符集不同,导致出现字符集问题 无法同步数据,查阅了大量的园子资料,都说要设置复制或抽取进程中SETENV (NLS_LANG=AMERICAN_AMERICA.ZHS16GBK),设置为和源端或者目标端一致即可,经过大量测出一对一 阅读全文
posted @ 2018-10-26 15:51 乀崋 阅读(1557) 评论(0) 推荐(0) 编辑
摘要: 一.linux关闭防火墙: a.用户直接在终端输入:service iptables stop 查看防火墙状况:service iptables status b.root用户在终端输入:#setup 使用光标选择firewall选项 二.使用xmanager连接linux系统, a.检查Linux 阅读全文
posted @ 2018-10-17 15:01 乀崋 阅读(969) 评论(0) 推荐(0) 编辑
摘要: 一、Informatica9.5.1创建资源库出错找不到libpmora8.so 错误如下: Database driver event...Error occurred loading library [libclntsh.so.10.1: cannot open shared object fi 阅读全文
posted @ 2018-10-17 09:43 乀崋 阅读(1460) 评论(0) 推荐(0) 编辑
摘要: 一、执行命令pip install paramiko,情况如下: C:\Users\ZFH>pip install paramikoCollecting paramiko Downloading https://files.pythonhosted.org/packages/cf/ae/94e70d 阅读全文
posted @ 2018-10-15 21:45 乀崋 阅读(652) 评论(0) 推荐(0) 编辑
摘要: 1 __author__ = 'ZFH' 2 # 2018.09.26 3 #-*- Coding:utf-8 -*- 4 5 import os,sys 6 7 8 BASE_DIR_Atm = os.path.dirname(os.path.dirname(__file__)) 9 BASE_D 阅读全文
posted @ 2018-10-15 14:43 乀崋 阅读(437) 评论(1) 推荐(0) 编辑