随笔分类 -  atlas

MOF (Meta Object Facility) 规范（转）
摘要：一、MOF的定义 MOF (Meta Object Facility) 称为元对象设施或者元对象机制，是OMG 组织为了帮助销售商、开发者和用户更好的使用元模型和元数据技术而制定的。 MOF最初是OMG( Object Management Group, 对象管理组织) 在1996年一个征求建议书( 阅读全文
posted @ 2024-01-08 14:10 粒子先生 阅读(1015) 评论(0) 推荐(0)
Atlas关系型数据库元数据模型
摘要：[ { "category": "ENTITY", "guid": "00b4a314-1185-4cd4-84e9-20275990d58d", "createdBy": "hadoop", "updatedBy": "hadoop", "createTime": 1615973091411, " 阅读全文
posted @ 2024-01-08 13:41 粒子先生 阅读(44) 评论(0) 推荐(0)
Atlas类型系统
摘要：预定义系统类型 Atlas自带了一些预定义的系统类型。我们在前面的部分中看到了一个示例（DataSet）。在本节中，我们将看到更多这些类型并了解它们的重要性。 Referenceable：该类型表示可以使用名为qualifiedName的唯一属性搜索的所有实体。 { "category": "ENT 阅读全文
posted @ 2024-01-08 13:40 粒子先生 阅读(197) 评论(0) 推荐(0)
Atlas集成Sqoop
摘要：注册hook 编辑sqoop‐site.xml,添加如下配置 <property> <name>sqoop.job.data.publish.class</name> <value>org.apache.atlas.sqoop.hook.SqoopHook</value> </property> 引 阅读全文
posted @ 2024-01-08 13:33 粒子先生 阅读(61) 评论(0) 推荐(0)
Atlas集成Hive
摘要：修改atlas-application.properties 添加atlas.hook.hive.synchronous=false atlas.hook.hive.numRetries=3 atlas.hook.hive.queueSize=10000 atlas.cluster.name=pri 阅读全文
posted @ 2024-01-08 13:32 粒子先生 阅读(129) 评论(0) 推荐(0)
Atlas初步调研
摘要：简介 Atlas是Hadoop生态的元数据管理框架，有以下功能特性： 元数据类型：支持多种Hadoop和非Hadoop元数据的预定义类型，提供元数据定义新类型的能力，类型可以具有原始属性、复杂属性、对象引用，可以从其他类型继承。 分类：提供动态创建分类的能力，元数据实体可以与多个分类相关联，具有分类 阅读全文
posted @ 2024-01-08 13:29 粒子先生 阅读(55) 评论(0) 推荐(0)
Atlas内嵌安装
摘要：安装jdk yum install java-1.8.0-openjdk* -y #配置环境变量 export JAVA_HOME=/usr/lib/jvm/java export PATH=$PATH:$JAVA_HOME/bin 安装maven curl -o /etc/yum.repos.d/ 阅读全文
posted @ 2024-01-05 10:41 粒子先生 阅读(30) 评论(0) 推荐(0)
Atlas Rest API
摘要：Atlas Rest API总结部分Rest API，其他API查看Atlas官网Atlas Rest API AdminREST查看Atlas Metadata Server节点状态 GET /admin/statuscurl -s -u admin:admin "http://node2:210 阅读全文
posted @ 2024-01-05 10:39 粒子先生 阅读(136) 评论(0) 推荐(0)