元数据库和数据字典
PolarDB-X 的元数据库为information_schema库，兼容MySQL的元数据库。查询元数据库可以直接在JDBC连接中使用SQL语句进行查询。Information_schema视图 兼容情况 SCHEMATA 兼容 TABLES 兼容 COLUMNS 兼容 STATISTICS 兼容 COLUMN_STATISTICS...
元数据库数据字典
云原生数据仓库MySQL版的元数据库分为记载性能相关信息的performance_schema库和记载元数据的information_schema库，并和MySQL的元数据库有一定的兼容性，但并不是100%一致。查询元数据库可以直接在JDBC连接中使用SQL语句进行查询。查询云...
元数据库数据字典
云原生数据仓库AnalyticDB MySQL版 的元数据库为INFORMATION_SCHEMA库，兼容MySQL的元数据库。查询元数据库可以直接在JDBC连接中使用SQL语句进行查询。查询test库下的所有表，示例如下：select*from TABLES where table_schema='test' ...
SyncInstanceMeta-同步实例下所有数据库的元数据
调用SyncInstanceMeta同步实例下所有数据库字典元数据。接口说明 仅管控模式为安全协同的数据库实例可调用此 API。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK...
SyncDatabaseMeta-同步数据库元数据
同步数据库字典元数据。接口说明 仅管控模式为安全协同的数据库实例可调用此 API。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API...
社区兼容版账号管理
读取和设置权限：对授权的数据库和字典仅可进行读和设置的操作，不可写入数据。DDL权限 是否授予DDL权限。允许DDL。禁止DDL。密码 数据库账号密码，设置规则如下。由大写字母、小写字母、数字和特殊字符中的至少三种组成。()_+-=为特殊字符...
版本发布记录
支持对新用户和已有用户进行数据库和数据字典的权限修改。社区兼容版账号管理 全局参数修改 用户登录产品控制台可直接完成全局参数修改和生效重启。config.xml参数修改 2020年08月 功能名称 描述 相关文档 数据均衡扩容 保证增加集群节点时...
企业版账号管理
在 修改权限 面板，请根据需求修改数据库账号的 数据库和字典访问范围、DML权限 和 DDL权限。单击 确定。重置密码 登录 云数据库ClickHouse控制台。在页面左上角，选择集群所在地域。在 集群列表 页面，选择 企业版实例列表，单击目标集群...
数据备份
备份内容包含当前集群所有库、表、视图、数据字典和元数据结构。备份过程中会进行数据文件读取复制，影响集群的读写效率，请尽量在业务低峰期或运维时间段启动备份任务。已启动的备份任务不能中断。已开通冷热分层存储功能的集群不支持再...
概述
参见 元数据管理 章节，定义数据湖的元数据库和表。控制台概览 控制台概览分为2个部分，左侧为主要功能区，右侧为产品主要信息，帮助用户快速上手产品。注册数据湖位置 阿里云数据湖构建采用OSS作为统一数据湖位置，用户需要注册一个OSS的...
产品简介
产品功能架构 元数据管理，通过控制台查看和管理数据湖中元数据库和表的信息，通过 新增元数据库 的方式操作元数据，集成到第三方应用服务。并支持多版本管理、可通过元数据发现和入湖任务自动生成元数据。入湖基础操作，通过入湖任务的...
Hive统一元数据
所以，在任何时候删除OSS上或者集群HDFS上数据（包括释放集群操作）的时候，需要先确认该数据对应的元数据已经删除（即要删掉数据对应的表和数据库），否则元数据库中可能出现一些脏数据。计算存储分离。EMR上可以支持将数据存放在阿里云...
基于DLF、RDS或Flink、OSS支持Delta Lake或Hudi存储...
同时，DLF采用元数据管理功能管理元数据库和元数据表。数据湖探索与分析 MaxCompute DataWorks 对数据湖数据进行分析。前提条件 已开通如下服务或已创建实例、项目：已开通OSS服务。更多开通OSS服务操作，请参见 开通OSS服务。已开通DTS...
元数据管理
您可以使用该功能管理元数据库和元数据表。创建元数据库 登录 数据湖管理控制台，选择 元数据 目录下的 元数据管理。单击 新建数据库。配置元数据库参数。选择所属数据目录。输入元数据库名称。（选填）输入元数据库描述。输入元数据库的...
数据备份与删除
独立部署版本：私有云独立部署，Dataphin输出PostgreSQL数据库作为元数据库。元数据库采用一主一备或一主两备模式，保障元数据库稳定性；每天进行元数据库全量冷备，保留七天，过期自动删除。公有云独立部署，Dataphin元数据库采用阿里云上...
API概览
本产品（数据湖构建/2020-07-10）的...GetDatabaseProfile 获取库数据概况 获取库数据概况的详细信息。GetLifecycleRule 获取库表生命周期规则 获取库表生命周期规则。ListPartitionsProfile 获取分区数据概况 获取分区数据概况的详细信息。
导出数据字典
具体操作，请参见 新建数据字典 和 导入数据字典。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。说明 若您已在 资产加工 页面，请跳过“单击 资产...
导出数据字典
具体操作，请参见 新建数据字典 和 导入数据字典。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。说明 若您已在 资产加工 页面，请跳过“单击 资产加工”...
元数据仓库共享模型概述
提高系统稳定性：如果您直接连接元数据库查询或同步数据，可能会对Dataphin系统的稳定性产生影响，从而影响功能使用。提升输出稳定性：Dataphin的系统元数据库表结构可能会跟随功能升级产生变化，包括表新增下线、字段新增下线等。直接使用...
查看数据字典详情
前提条件 已存在数据字典，具体操作，请参见 新建数据字典 和 导入数据字典。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。说明 若您已在 资产加工 ...
查看数据字典详情
前提条件 已存在数据字典，具体操作，请参见 新建数据字典 和 导入数据字典。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。说明 若您已在 资产加工 页面...
管理敏感数据
说明 开通敏感数据管理功能后，即可查看当前实例中的数据库相关信息和数据库中敏感字段的扫描结果。根据扫描出来的信息，您可以单击 前往DMS使用敏感数据保护 前往DMS数据管理服务控制台对敏感数据执行管控操作。更多信息，请参见 管理敏感...
使用星环TDH作为元仓计算引擎进行元仓初始化
元数据库配置 元数据获取方式 支持元数据库和HMS（Hive Metastore Serivce）方式获取元数据。使用HMS方式获取元数据库，若集群配置认证方式为Kerberos，需上传Keytab File文件和填写Principal。Keytab File：Hive metastore的Kerberos认证...
DMS默认屏蔽的实例系统库
背景信息 数据管理DMS中录入实例后，系统将自动采集实例中数据库的元数据（字典）信息。为了保护系统库，同时减少系统库对用户的干扰，如果实例的管控模式为安全协同模式，系统在采集元数据信息时会自动屏蔽实例的系统库。元数据的更多信息...
物理化数据字典
前提条件 已创建或者导入数据字典，具体操作，请参见 新建数据字典 和 导入数据字典。已创建对应的云计算资源，具体操作，请参见 新建云计算资源。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，...
物理化数据字典
前提条件 已创建或者导入数据字典，具体操作，请参见 新建数据字典 和 导入数据字典。已创建对应的云计算资源，具体操作，请参见 新建云计算资源。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击...
JindoFS缓存模式
概述 缓存模式兼容现有OSS存储方式，文件以对象的形式存储在OSS上，每个文件根据实际访问情况会在本地进行数据和元数据的缓存，从而提高访问数据以及元数据的性能，Cache模式提供不同元数据同步策略以满足您在不同场景下的需求。...
EMR+DLF数据湖解决方案
您可以通过DLF来可视化创建元数据，或者使用Hive/Spark SQL来创建数据库和数据表等。登录 元数据库管理控制台，在左上角选择与OSS相同的地域，例如华东1（杭州）。使用控制台，可视化创建元数据库。例如emr_dlf_data_lake。在左侧导航栏，...
操作流程
具体操作，请参见 新建数据字典 和 物理化数据字典。新建质量校验函数并物理化 通过新建质量校验函数实现质量检测函数的自定义，方便用户在定义数据元或维度属性时进行质量规则引用，以支持后续对字段的质量规则的快速配置和校验。具体操作...
操作流程
具体操作，请参见 新建数据字典 和 物理化数据字典。新建质量校验函数并物理化 通过新建质量校验函数实现质量检测函数的自定义，方便用户在定义数据元或维度属性时进行质量规则引用，以支持后续对字段的质量规则的快速配置和校验。具体操作...
添加 Oracle 数据源的白名单
本文为您介绍如何添加 VPC 内自建数据库和数据库网关类型 Oracle 数据源的白名单。背景信息 Oracle 数据源的实例类型包括 VPC 内自建数据库、数据库网关 和 公网 IP 自建数据库。公网 IP 是 OMS 服务的公网出口，仅访问公网数据源时，需要...
使用Hadoop作为元仓计算引擎进行元仓初始化
元数据获取方式 元数据获取方式支持 元数据库 和 HMS（Hive Metastore Serivce）、DLF 三种方式获取元数据。不同获取方式所配置信息不同。详情如下：元数据库方式获取 参数 描述 数据库类型 选择Hive的元数据库类型。Dataphin支持选择 ...
创建数据库
数据库：数据库是以一定方式储存在一起、能与多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合，可以简单理解为存放数据的仓库。字符集：字符集是数据库中字母、符号的集合，以及它们的编码规则。注意事项 支持在控制台...
E-MapReduce数据迁移方案
将旧集群的元数据库的表结构和数据通过 mysqldump 命令全部导出。替换location、Hive元数据中分区等信息均带有location信息的，带dfs nameservices前缀的表，如 hdfs:/mycluster:8020/，而E-MapReduce集群的nameservices前缀是统一的E-...
创建Impala数据源
元数据库获取方式 参数 说明 数据库类型 请根据集群中使用的元数据库类型，选择对应的数据库类型。Dataphin支持选择 MySQL。MySQL 数据库类型支持 MySQL 5.1.43、MYSQL 5.6/5.7 和 MySQL 8 版本。JDBC URL 填写目标数据库的JDBC连接地址。...
修改表 ALTER TABLE 的不兼容点
本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时，MySQL 数据库执行的 ALTER TABLE DDL 支持被数据传输的 DDL 同步组件转换，但 OceanBase 数据库 MySQL 租户不支持执行的场景。行内 CHECK 表达式中引用了其它列 ...
管理数据库（仅 MySQL）
单击左侧导航栏中的 数据库管理，在 数据库管理 页面右上角，支持搜索数据库名称、登录数据库和新建数据库，详情参见 登录数据库、创建数据库（仅 MySQL）。您可在数据库列表中查看 数据库名称、字符集、状态、已使用磁盘、绑定账号 等信息...
复制数据库SQL Server 2008 R2版
若您需要创建一个与现有数据库数据完全相同的数据库，您可以使用复制数据库的方式。本文介绍如何通过RDS控制台复制并创建新的数据库。前提条件 实例版本为SQL Server 2008 R2。说明 SQL Server 2008 R2（本地盘）实例支持通过RDS控制台复制...
新建 TiDB 数据源
说明 TiDB 数据源的实例类型包括 VPC 内自建数据库 和 公网 IP 自建数据库。实例类型 参数 描述 VPC 内自建数据库 是否跨阿里云主账号 数据传输支持对不同阿里云主账号下的实例配置数据迁移或数据同步项目，实现跨阿里云主账号的数据迁移或...
数据类型转换
Oracle 数据库和 OceanBase 数据库 Oracle 租户一致。BINARY_DOUBLE BINARY_DOUBLE 二进制精度浮点数，是一种 64 位双精度浮点数数据类型。Oracle 数据库和 OceanBase 数据库 Oracle 租户一致。DECIMAL(p,s)NUMBER(p,s)DEC(p,s)NUMBER(p,s)...
- 产品推荐
- 这些文档可能帮助您