摘要: 1 hive介绍与原理分析 1.1 hive的优缺点 优点: Hive 使用类SQL 查询语法, 最大限度的实现了和SQL标准的兼容,大大降低了传统数据分析人员处理大数据的难度 使用JDBC 接口/ODBC接口,开发人员更易开发应用; 以MR 作为计算引擎、HDFS 作为存储系统,为超大数据集设计的 阅读全文
posted @ 2022-07-23 14:04 zhengsongsong 阅读(86) 评论(0) 推荐(0) 编辑
摘要: 安装 1、下载tar包 https://github.com/azkaban/azkaban/archive/3.72.0.tar.gz 2、解压 tar -xvf azkaban-3.72.0.tar.gz -C /opt/dsfsadf 3、安装依赖 yum install -y gcc-c++ 阅读全文
posted @ 2022-07-13 17:56 zhengsongsong 阅读(373) 评论(0) 推荐(0) 编辑
摘要: 1、Azkaban特点 兼容任何版本的hadoop 易于使用的Web用户界面 简单的工作流的上传 方便设置任务之间的关系 调度工作流 模块化和可插拔的插件机制 认证/授权(权限的工作) 能够杀死并重新启动工作流 有关失败和成功的电子邮件提醒 2、Azkaban的架构 Azkaban由三个关键组件构成 阅读全文
posted @ 2022-07-13 17:28 zhengsongsong 阅读(127) 评论(0) 推荐(0) 编辑
摘要: 报错信息: ERROR: query plan with multiple segworker groups is not supported HINT: likely caused by a function that reads or modifies data in a distributed 阅读全文
posted @ 2022-01-11 09:35 zhengsongsong 阅读(821) 评论(0) 推荐(0) 编辑
摘要: 1、安装docker 卸载旧版本 sudo apt-get remove docker docker-engine docker.io containerd runc 更新apt源 sudo apt update 安装 apt 依赖包,用于通过 HTTPS 来获取仓库 sudo apt-get in 阅读全文
posted @ 2021-12-30 18:10 zhengsongsong 阅读(1349) 评论(1) 推荐(1) 编辑
摘要: 报错信息: 在Greenplum数据库中,我们使用存储过程查询数据的时候会报错如下信息 function cannot execute on a QE slice because it accesses relation 首先我们先了解下复制表 复制表(Replicated Table) Green 阅读全文
posted @ 2021-12-29 14:04 zhengsongsong 阅读(1711) 评论(0) 推荐(0) 编辑
摘要: 1、找到my.cnf配置文件位置 默认在 /etc/my.cnf 或者在 /etc/mysql/my.cnf 2、编辑配置文件 在my.inf主配置文件中直接添加三行 三个参数来指定, 第一个参数是打开binlog日志 第二个参数是binlog日志的基本文件名,后面会追加标识来表示每一个文件 第三个 阅读全文
posted @ 2021-12-27 13:49 zhengsongsong 阅读(293) 评论(0) 推荐(0) 编辑
摘要: 1、查询所有分支 git branch -a 2、删除check_zhengss_auth 删除本地分支 git branch -d <BranchName> 3、删除check_zhengss_auth 删除远程分支 git push origin --delete <BranchName> 4、 阅读全文
posted @ 2021-12-24 11:43 zhengsongsong 阅读(86) 评论(0) 推荐(0) 编辑
摘要: 启动程序报错如下: 应该很容易就搜索到,缺少这样的dll文件,是没有安装Visual C++ Redistributable for Visual Studio 2012的缘故 但是在安装了Visual C++ Redistributable for Visual Studio 2012 X64版本 阅读全文
posted @ 2021-12-18 12:06 zhengsongsong 阅读(99) 评论(0) 推荐(0) 编辑
摘要: 1、查看所有分支 git branch -a 2、本地分支重命名 check_zhengss_grade git branch -m oldName newName 3、将重命名后的分支推送到远程 git push origin newName 4、删除远程的旧分支 git push --delet 阅读全文
posted @ 2021-12-17 13:40 zhengsongsong 阅读(205) 评论(0) 推荐(0) 编辑