2020年12月10日
Oozie
摘要： 1.Oozie是什么？ 工作流调度引擎。 相当于Azkaban。 2.Oozie的原理是什么？ 一个Oozie的job，是一个MapReduce程序，但是只有MapTask。 3.Oozie起源于哪里？ 起源于雅虎，主要用于管理与组织Hadoop工作。 4.Oozie有什么优势？ Oozie不是仅用 阅读全文
posted @ 2020-12-10 22:32 山中何事 阅读(213) 评论(0) 推荐(0)
Hue
摘要： 1.Hue是什么? Hadoop User Experience 一个开源的Apache Hadoop UI系统 。 2.Hue的原理是什么？ 最早是由Cloudera Desktop演化而来，由Cloudera贡献给开源社区，它是基于Python Web框架Django实现的。 3.Hue有什么用 阅读全文
posted @ 2020-12-10 22:21 山中何事 阅读(124) 评论(0) 推荐(0)
2020年12月9日
Linux如何安装Git（yum方式）
摘要： 1.查看系统是否已经安装git git --version 2.CentOS7 yum 安装git yum install -y git 3.安装成功 4.卸载git yum remove git 阅读全文
posted @ 2020-12-09 23:46 山中何事 阅读(289) 评论(0) 推荐(0)
2020年12月8日
阿里的RDS
摘要： 1.RDS是什么？ 阿里云关系型数据库RDS（Relational Database Service）是一种稳定可靠、可弹性伸缩的在线数据库服务。 基于阿里云分布式文件系统和SSD盘高性能存储，RDS支持MySQL、SQL Server、PostgreSQL、PPAS（Postgre Plus Ad 阅读全文
posted @ 2020-12-08 23:02 山中何事 阅读(505) 评论(0) 推荐(0)
Sentry
摘要： 1.Sentry是什么？ Sentry是一个异常日志集中收集系统。 英文意思：警卫 2.Sentry有什么用？ 它可以捕捉到stack trace，stack locals，proceding event和引发该异常的commit号。 当bug fix后，Sentry会自动追踪上次异常是否在本次提交 阅读全文
posted @ 2020-12-08 22:37 山中何事 阅读(869) 评论(0) 推荐(0)
阿里的DataWorks
摘要： 一、概述 DataWorks数据工场，是MaxComputer的可视化开发平台，一站式开发、管理界面。 1.功能概述 1.强大调度：支持分钟到月的调度 2.多种任务：支持ODPS、SHELL等多种任务 3.可视化开发：B/S架构的可视化开发界面，简单易上手 2.基本概念 1.任务 0个或多个表作为输 阅读全文
posted @ 2020-12-08 20:24 山中何事 阅读(843) 评论(0) 推荐(0)
SSH
摘要： 1.SSH是什么？ Secure Shell(SSH) 是由 IETF(The Internet Engineering Task Force) 制定的建立在应用层基础上的安全网络协议。它是专为远程登录会话(甚至可以用Windows远程登录Linux服务器进行文件互传)和其他网络服务提供安全性的协议 阅读全文
posted @ 2020-12-08 20:13 山中何事 阅读(133) 评论(0) 推荐(0)
MySQL中的索引
摘要： 1.索引是什么？ 索引（Index）是帮助MySQL高效获取数据的数据结构。 索引就是数据结构，排好序的快速查找数据结构。 2.索引怎么分类？ ①单值索引 概念：即一个索引只包含单个列，一个表可以有多个单列索引。 ②唯一索引 概念：索引列的值必须唯一，但允许有空值。 ③主键索引 概念：设定为主键后数 阅读全文
posted @ 2020-12-08 20:10 山中何事 阅读(67) 评论(0) 推荐(0)
Hive中的rollup
摘要： 1.rollup有什么用？ 可以实现从右到左递减多级的统计，显示统计某一层次结构的聚合。 2.举个例子 select device_id,os_id,app_id,client_v,channel,count(user_id) from test_1 group by device_id,os_id 阅读全文
posted @ 2020-12-08 19:39 山中何事 阅读(1753) 评论(0) 推荐(0)
XShell公钥连接服务器
摘要： 创建一个连接，如图填写：点击 用户身份验证 — 方法选择 public key— 用户名随意填— 点浏览— 弹出窗后，点导入： 阅读全文
posted @ 2020-12-08 08:57 山中何事 阅读(144) 评论(0) 推荐(0)