查看表资产详情
背景信息 将数据建模中创建的数据表进行编目及公开后，可在数据资产中心查看资产详情。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 发现。在顶部菜单栏，单击 资产目录。在 资产目录 页面，单击 数据表 页签，选择下面...
查看表资产详情
背景信息 将数据建模中创建的数据表进行编目及公开后，可在数据资产中心查看资产详情。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 发现。在顶部菜单栏，单击 资产目录。在 资产目录 页面，单击 数据表 页签，选择...
配置Hive输出组件
加载策略 向目标数据源（Hive数据源）写入数据时，数据写入表中的策略。加载策略包括 覆盖数据 和 追加数据，适用场景说明如下：覆盖数据：写入的数据中有主键时新数据覆盖旧数据，无主键时追加数据。追加数据：写入的数据中有主键时忽略新...
表
对于内部表，所有的数据都被存储在MaxCompute中，表中列的数据类型可以是MaxCompute支持的任意一种 数据类型版本说明。对于外部表，MaxCompute并不真正持有数据，表格的数据可以存放在 OSS 或 OTS 中。MaxCompute仅会记录表格的Meta信息，...
概览信息
资产搜索：选择需要搜索的资产，例如数据表，在 资产搜索 文本框中输入数据表的资产名称，单击 图标，跳转到资产目录展示相应的数据表。说明 支持数据表、指标、标签和API资产搜索。数据资产总量统计：总资产统计：展示资产总量和今日新增...
概览信息
资产搜索：选择需要搜索的资产，例如数据表，在 资产搜索 文本框中输入数据表的资产名称，单击 图标，跳转到资产目录展示相应的数据表。说明 支持数据表、指标、标签和API资产搜索。数据资产总量统计：总资产统计：展示资产总量和今日新增...
配置AnalyticDB for MySQL 3.0输出组件
加载策略 包括：覆盖数据 即以当前来源表为准，覆盖目标表中的历史数据。追加数据 即在目标表的已有的数据基础上追加数据，且不修改历史数据。解析方案 非必填项。数据输出前和输出完成的特殊处理方式，比如为了满足服务的持续可用性，当前...
配置同步任务
加载策略 向目标数据源（HDFS数据源）写入数据时，数据写入表中的策略。加载策略包括覆盖数据、追加数据、文件名冲突报错，适用场景说明如下：覆盖数据：覆盖数据策略下，先删除目标目录下的文件，再新增数据文件。追加数据：追加数据策略...
配置数据表资产目录
背景信息 将数据建模模块中创建的数据表进行编目及公开后，可在发现中查看和申请使用。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 运营。在顶部菜单栏，单击 资产管理。在左侧菜单栏，选择 系统资产管理>数据表管理，...
配置数据表资产目录
背景信息 将数据建模模块中创建的数据表进行编目及公开后，可在发现中查看和申请使用。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 运营。在顶部菜单栏，单击 资产管理。在左侧菜单栏，选择 系统资产管理>数据表管理...
配置AnalyticDB for MySQL 3.0输出组件
加载策略 包括：覆盖数据 即以当前来源表为准，覆盖目标表中的历史数据。追加数据 即在目标表的已有的数据基础上追加数据，且不修改历史数据。解析方案 非必填项。数据输出前和输出完成的特殊处理方式，比如为了满足服务的持续可用性，当前...
配置OpenGauss输出组件
加载策略 包括：覆盖数据 即以当前来源表为准，覆盖目标表中的历史数据。追加数据 即在目标表的已有的数据基础上追加数据，且不修改历史数据。copy 用于表与文件之间的相互复制。并且在遇到冲突时会根据 冲突解决策略 进行 冲突时报错 或 ...
配置OpenGauss输出组件
加载策略 包括：覆盖数据 即以当前来源表为准，覆盖目标表中的历史数据。追加数据 即在目标表的已有的数据基础上追加数据，且不修改历史数据。copy 用于表与文件之间的相互复制。并且在遇到冲突时会根据 冲突解决策略 进行 冲突时报错 或 ...
数据集成侧同步任务能力说明
说明 以业务数据库数据同步到MaxCompute数据仓库为例，当有大量的数据存储在数据库系统里，需要将数据库中的全量及增量数据同步到MaxCompute进行数仓分析时，数据集成传统方式是通过全量同步或者依赖数据库表中的 modify_time 等字段进行...
配置TiDB输出组件
加载策略 包括：覆盖数据 即以当前来源表为准，覆盖目标表中的历史数据。追加数据 即在目标表的已有的数据基础上追加数据，且不修改历史数据。解析方案 非必填项，可选择输出数据前后的语句准备。是指数据输出前和输出完成的一些特殊处理...
配置TiDB输出组件
加载策略 包括：覆盖数据 即以当前来源表为准，覆盖目标表中的历史数据。追加数据 即在目标表的已有的数据基础上追加数据，且不修改历史数据。解析方案 非必填项，可选择输出数据前后的语句准备。是指数据输出前和输出完成的一些特殊处理...
我是安全管理员
解决方案 数据归档概述 数据归档功能支持定时将大表的数据归档至其他数据库，同时支持源表数据删除、表空间整理回收等。一键建仓 一键创建实时同步的数据仓库，数据在秒级的延迟下，同步至AnalyticDB MySQL版数据库中。数据库迁移 通过创建...
配置同步任务
覆盖数据 即以当前来源表为准，覆盖目标表中的历史数据。追加数据 即在目标表的已有的数据基础上追加数据，且不修改历史数据。Copy模式：AnalyticDB for PostgreSQL提供copy命令，用于表与文件（标准输出，标准输入）之间的相互复制。数据...
数据标准
数据字典管理：支持创建并维护逻辑表中使用的数据字典，方便用户在定义数据元或维度属性时进行数据字典引用，支持数据字典物理化、数据字典导入、导出，方便数据字典使用与跨项目复制。质量校验函数：支持质量检测函数自定义，方便用户在...
功能简介
数据字典管理：支持创建并维护逻辑表中使用的数据字典，方便用户在定义数据元或维度属性时进行数据字典引用，支持数据字典物理化、数据字典导入、导出，方便数据字典使用与跨项目复制。质量校验函数：支持质量检测函数自定义，方便用户在...
功能简介
数据字典管理：支持创建并维护逻辑表中使用的数据字典，方便用户在定义数据元或维度属性时进行数据字典引用，支持数据字典物理化、数据字典导入、导出，方便数据字典使用与跨项目复制。质量校验函数：支持质量检测函数自定义，方便用户在...
创建及管理内部表
字段名 表中每一列的标识。数据类型 字段的属性。主键 确定列的唯一标识。可空 字段可以为空值。数组 有序的元素序列。描述 字段的相关描述。操作 包括 删除、上移 和 下移。属性 存储模式 包括 列存 和 行存 两种存储模式。默认为 列存。...
我是DBA
解决方案 数据归档 数据归档功能支持定时将大表的数据归档至其他数据库，同时支持源表数据删除、表空间整理回收等。一键建仓 一键创建实时同步的数据仓库，数据在秒级的延迟下，同步至AnalyticDB MySQL版数据库中。数据库迁移 通过创建工单...
我是管理员
数据归档 数据归档功能定时将大表的数据归档至其他数据库，支持源表数据删除、表空间整理回收等功能。数据库迁移 通过创建工单实现数据库迁移、校验和清理的闭环操作。运维管理 通知管理 可根据您的业务需求，订阅不同功能模块的消息事件，...
配置ArgoDB输出组件
加载策略 覆盖数据：即以当前来源表为准，覆盖目标表中的历史数据。覆盖数据策略下，当主键/约束冲突时，会先删除原数据，再插入整行新数据。追加数据：即在目标表的已有的数据基础上追加数据，且不修改历史数据。追加数据策略下，当指主键...
概览
无锁数据变更 数据变更时，将自动结合表中的主键或非空唯一键，分批对表中的目标数据进行操作，在保证执行效率的同时，尽可能减小对数据库性能、空间的影响。操作审计 DMS的操作日志中保存了所有数据查询和变更记录，您可随时查询数据库的...
Tunnel操作
示例2：将log.txt中的数据上传至项目空间test_project的表test_table（二级分区表）中的 p1="b1",p2="b2"分区。log.txt文件归档在D盘的test文件夹中。命令示例如下。Tunnel upload D:\test\log.txt test_project.test_table/p1="b1",p2="b2...
通用数据查询与管理
如果需要快速地查找数据，例如查找工作空间、数据源中的表、数据分析和数据服务中的代码或API，您可以在数据地图中进行查找。进入数据地图 登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据治理>数据地图，在右侧页面中单击...
空间管理
自治服务的空间管理功能提供分层的监控与分析，从实例深入到数据库，再从数据库深入到表，帮助用户发现和...未使用空间（MB）表中未使用的空间（单位为MB）和百分比。行数 表的记录总数。索引数量 表中索引的数量。创建时间 表的创建时间。
功能特性
您可以将数据库中的表或单条SQL查询结果作为数据集，在仪表盘或大屏中对数据集中的数据以表格、折线图、饼图等图形或组件展现出来，并对这些图形或组件进行自由组合、布局，以某种分析思路对业务进行直观呈现。数据分析概述 访问数据分析...
MySQL分库分表同步至MaxCompute
目前支持将增量数据实时写入MaxCompute的Log表，Log表中的增量数据再定期与目标端Base表全量数据进行合并（Merge），最终将结果写入Base表中。时间自动分区设置。您可以在 时间自动分区设置 配置该任务写入MaxCompute分区表或是非分区表，...
MySQL分库分表同步至MaxCompute
目前支持将增量数据实时写入MaxCompute的Log表，Log表中的增量数据再定期与目标端Base表全量数据进行合并（Merge），最终将结果写入Base表中。时间自动分区设置。您可以在 时间自动分区设置 配置该任务写入MaxCompute分区表或是非分区表，...
空间管理
数据空间(MB)表中数据占用空间（单位为MB）和百分比。索引空间(MB)表的索引占用空间（单位为MB）和百分比。未使用空间(MB)表中未使用的空间（单位为MB）和百分比。行数 表的记录总数。索引数量 表中索引的数量。创建时间 表的创建时间。
创建Kudu数据源
例如同一个kudu服务和Impala等多个存储系统结合使用时，可以将Impala作为表的前缀，用来标识来源数据为Impala，以便和其他存储系统中的表区分。单击 测试连接，测试数据源是否可以和Dataphin进行正常的连通。测试成功后，单击 确定。
创建Hudi数据源
表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema.table 的变量格式访问。更多信息，请参见 Dataphin数据源表开发方式。重要 目前仅支持 MySQL、Hologres...
回收表碎片空间
查询结果示例图如下，Data_free表示表中的碎片空间（单位：字节）。回收表碎片空间 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 数据库开发>数据变更>无锁变更。说明 若您使用的是极简模式的控制台，请单击左上角的，选择 全部功能>数据库...
创建单物理表服务单元
您需要根据业务数据表中字段的类型选择对应的参数类型。如果业务数据表的字段类型不在待选参数类型范围内，推荐 您选择String。服务单元字段 支持自定义勾选部分源表字段作为服务单元字段，对源表新增字段也可在编辑时添加勾选。配置数据源...
使用须知
访问Lindorm CDC数据的介绍 访问语法示例：Lindorm宽表引擎（lindorm_table）中有一个Database名称为DB1，DB1中有一个表名为tableX，可以通过以下两种方式查询表的数据。示例一 SELECT fieldA FROM lindorm_table.DB1.tableX;示例二 USE ...
Flink数据导入
本文介绍如何将开源Flink中的数据导入 AnalyticDB MySQL版 数仓版（3.0）集群。前提条件 下载Flink驱动，并将其部署到Flink所有节点的${flink部署目录}/lib 目录下。您可以根据Flink版本下载对应的驱动：Flink 1.11版本：flink-connector-...
创建数仓分层
各个分层的功能介绍如下：数据引入层 ODS（Operational Data Store）ODS层用于接收并处理需要存储至数据仓库系统的原始数据，其数据表的结构与原始数据所在的数据系统中的表结构一致，是数据仓库的数据准备区。ODS层对原始数据的操作具体...
- 产品推荐
- 这些文档可能帮助您