会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
架构艺术
博客园
首页
博问
闪存
新随笔
订阅
管理
上一页
1
2
3
4
5
6
7
8
9
10
···
12
下一页
2020年11月5日
数仓构建流程-数据中台
摘要: 基本概念 业务板块:业务板块定义了数据仓库的多种命名空间,是一种系统级的概念对象。当数据的业务含义存在较大差异时,您可以创建不同的业务板块,让各成员独立管理不同的业务,后续数据仓库的建设将按照业务板块进行划分。在Dataphin中,项目可以归属至业务板块以实现规范建模功能,同一个业务板块中可能包含多
阅读全文
posted @ 2020-11-05 19:00 架构艺术
阅读(1719)
评论(0)
推荐(0)
2020年11月3日
数据模型-数据中台
摘要: 行业数据模型概述 分层数据模型 行业业务流程 行业主题域模型。在数据中台,主题对应一个宏观的分析领域,比如销售分析就是分析“销售”这个主题。联系较为紧密的主题的集合就是主题域。每一个行业都可以拆分为有多个(是个左右不等)主题域组成的主题域模型。 概念模型。在主题域的基础上,每个主题域内增加了实体以及
阅读全文
posted @ 2020-11-03 15:53 架构艺术
阅读(914)
评论(0)
推荐(0)
2020年10月29日
hive新增字段和修改字段的影响
摘要: DROP TABLE IF EXISTS tmp_dm_test_a.t_aa_orc; USE tmp_dm_test_a; CREATE EXTERNAL TABLE IF NOT EXISTS tmp_dm_test_a.t_aa_orc( user_id string COMMENT '用户
阅读全文
posted @ 2020-10-29 14:15 架构艺术
阅读(2325)
评论(0)
推荐(0)
zip与unzip带密码压缩与解压缩
摘要: # -P加密 zip -r -P T09j03x# 20180109.zip inc_day\=20180109 # -P指定密码 unzip -o -P T09j03x# 20180109.zip -d /home/sfapp/tianjin/fengtu_rst/rst
阅读全文
posted @ 2020-10-29 10:29 架构艺术
阅读(2390)
评论(0)
推荐(0)
2020年10月15日
linux文件dos转unix格式
摘要: 1.在windows下,使用notepad++,将文件格式改为unix就可以了 2.在linux下,使用vim打开文件,使用:set ff查看文件格式,你会发现其格式是dos的,然后我们使用:set ff=unix就可以将文件格式改为unix,如果不放心,可以使用:set ff查看,就会发现文件格式
阅读全文
posted @ 2020-10-15 17:14 架构艺术
阅读(1740)
评论(0)
推荐(0)
2020年10月10日
9、元组---Python
摘要: 一、创建元组 创建空元组 tup1 = () 元组中只包含一个元素时,需要在元素后面添加逗号来消除歧义 tup1 = (50,) 二、访问元组: 索引,截取 元组与字符串类似,下标索引从0开始,可以进行截取,组合等。 tup1 = ('physics', 'chemistry', 1997, 200
阅读全文
posted @ 2020-10-10 14:01 架构艺术
阅读(156)
评论(0)
推荐(0)
2020年9月29日
hive多分隔符支持
摘要: 1.问题描述 如何将多个字符作为字段分割符的数据文件加载到Hive表中,事例数据如下: 字段分隔符为“@#$” test1@#$test1name@#$test2value test2@#$test2name@#$test2value test3@#$test3name@#$test4value 如
阅读全文
posted @ 2020-09-29 21:32 架构艺术
阅读(522)
评论(0)
推荐(0)
shell 遍历目录下的所有文件
摘要: dir=/usr/local/nginx/logs for file in $dir/*; do echo $file done //结果 ./test.sh /usr/local/nginx/logs/access1.log /usr/local/nginx/logs/access.log /us
阅读全文
posted @ 2020-09-29 20:32 架构艺术
阅读(310)
评论(0)
推荐(0)
使用ansible控制Hadoop服务的启动和停止【转】
摘要: https://www.cnblogs.com/sfccl/p/11247129.html 一、环境: 服务器一台,已安装centos7.5系统,做ansible服务器; 客户机三台:hadoop-master(192.168.1.18)、hadoop-slave1(192.168.1.19)、ha
阅读全文
posted @ 2020-09-29 11:05 架构艺术
阅读(159)
评论(0)
推荐(0)
2020年9月22日
Shell中的括号有其特殊的用法
摘要: Shell中的括号有其特殊的用法, 现总结如下:1. 符号$后的括号 ${a} 变量a的值, 在不引起歧义的情况下可以省略大括号. $(cmd) 命令替换, 结果为shell命令cmd的输出, 和`cmd`效果相同, 不过某些Shell版本不支持$()形式的命令替换, 如tcsh. $((exp))
阅读全文
posted @ 2020-09-22 15:38 架构艺术
阅读(168)
评论(0)
推荐(0)
上一页
1
2
3
4
5
6
7
8
9
10
···
12
下一页