管理问题数据

问题数据表分区结构:分区级别 分区字段名 描述 一级分区 dqc_task_run_dt 当前问题数据的采集时间,即数据质量规则运行时间(格式为yyyymmdd)。二级分区 dqc_task_id 当前问题数据采集对应的DQC规则实例ID。说明 DQC规则执行将产生DQC...

无锁结构变更

背景信息 为解决变更数据表结构时的锁表问题,ODC V4.2.0 版本提供了无锁结构变更功能,该功能可以较好地规避因锁表以致于阻塞业务。本文档旨在介绍如何通过提交无锁变更工单实现数据库无锁结构变更。ODC 支持的在线结构变更 分类 操作 ...

通过无锁变更工单实现无锁结构变更

解决变更数据库表结构时的锁表问题数据管理DMS 推出了无锁结构变更功能,该功能可以较好地规避因锁表以致于阻塞业务和数据库原生OnlineDDL带来的主备延迟问题。本文介绍通过提交无锁变更工单实现数据库无锁结构变更的方法。前提条件 ...

定义敏感数据

其中 account、name、balance、credit、address 为业务判定的敏感数据字段,则对应全密态数据库下定义的数据表结构如下:CREATE TABLE example(account enc_int4,-账户号码,对应明文的integer类型 name enc_text,-姓名,对应明文的text...

定义敏感数据

其中 account、name、balance、credit、address 为业务判定的敏感数据字段,则对应全密态数据库下定义的数据表结构如下:CREATE TABLE example(account enc_int4,-账户号码,对应明文的integer类型 name enc_text,-姓名,对应明文的text...

需求分析

MySQL用户信息数据结构(ods_user_info_d)字段名称 字段说明 uid 用户名 gender 性别 age_range 年龄分段 zodiac 星座 步骤二:分析产出目标用户画像数据结构 根据原始数据分析可获得的有效数据,并基于业务需求确认最终数据表结构。...

需求分析

MySQL用户信息数据结构(ods_user_info_d)字段名称 字段说明 uid 用户名 gender 性别 age_range 年龄分段 zodiac 星座 步骤二:分析产出目标用户画像数据结构 根据原始数据分析可获得的有效数据,并基于业务需求确认最终数据表结构。...

如何解决增量迁移延迟或同步延迟

解法7:检查目标库实例的锁状态、慢SQL以及表结构,然后调整目标库写入或者目标库表结构解决目标库写入锁以及慢SQL问题。本案例以MySQL数据库为例,介绍锁状态和慢SQL、库表结构的查询方式,以及对应解决方式。锁状态和慢SQL:使用命令 ...

PolarDB PostgreSQL版间的迁移

注意事项 说明 在库表结构同步过程中,DTS会将源数据库中的外键同步到目标数据库。在全量同步和增量同步过程中,DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作,可能会导致数据不一致。...

PolarDB PostgreSQL版(兼容Oracle)间的迁移

源库的操作限制:在库表结构迁移和全量迁移阶段,请勿执行库或表结构变更的DDL操作,否则数据迁移任务会失败。如仅执行全量数据迁移,请勿向源实例中写入新的数据,否则会导致源和目标数据不一致。为实时保持数据一致性,建议选择结构迁移...

Quick BI

数据表结构发生变化后,如何同步更新数据集 处理方法:在数据集编辑页面,单击右上角 同步表结构。如何配置关联模型 处理方法:配置关联模型类似SQL语句里的JOIN,您可以在数据集的编辑页面里配置关联模型。请参见 构建模型。不支持添加...

功能特性

结构同步 空库初始化 支持将源数据库的表结构同步至空数据库中(数据库中不存在任何表),实现快速同步数据表结构,适用部署多区域、多单元的数据库环境。空库初始化 表一致性修复 用于对比不同表之间的表结构,找出差异并在目标表执行...

无锁结构变更

DMS为解决结构变更时的锁表问题而推出的无锁结构变更功能,能较好地规避因数据库变更导致锁表以至于阻塞业务的现象、以及数据库原生Online DDL带来的主备延迟现象。前提条件 实例的管控模式为稳定变更或安全协同。更多信息,请参见 管控...

同步节点

表结构变化 当选中 开启检测 复选框后,以天为单位,进行数据源端表结构检测。若发现表结构变更,则进行异常推送。异常信息可在“运维监控-全景监控”中查看。开发资源组 测试时使用的资源组,支持选择用户自有的资源。生产资源组 正式环境...

同步节点

表结构变化 当选中 开启检测 复选框后,以天为单位,进行数据源端表结构检测。若发现表结构变更,则进行异常推送。异常信息可在“运维监控-全景监控”中查看。开发资源组 测试时使用的资源组,支持选择用户自有的资源。生产资源组 正式环境...

和字段资产详情

Dataphin数据表:为您展示表的 名称、对象类型、存储类型、逻辑表及逻辑视图的 所属板块/物理表及物理视图的 所属项目、负责人、存储量、生命周期、描述、血缘来源 信息,同时您可以进行 查看血缘、查看DDL 和 申请权限 操作。查看血缘:...

和字段资产详情

Dataphin数据表:为您展示表的 名称、对象类型、存储类型、逻辑表及逻辑视图的 所属板块/物理表及物理视图的 所属项目、负责人、存储量、生命周期(Hadoop集群的计算引擎不支持展示该信息)、描述、血缘来源 信息,同时您可以进行 查看血缘...

无锁结构变更概览

DDL无锁变更能够有效解决结构变更时锁问题,较好地规避了因锁导致业务阻塞的问题、避免了数据库原生Online DDL带来的主备延迟现象。您可在业务低峰期提交无锁变更。背景信息 在数据量大的情况下进行结构变更,需要考虑锁的风险,锁...

外部常见问题

查询外部表Tablestore数据问题现象 查询外部表Tablestore的数据慢,同样的业务数据,1个实时写入Tablestore,1个定时写入MaxCompute,两个表结构数据量一样。查询MaxCompute内部表耗时远小于查询Tablestore外部表。解决措施 这种情况...

创建元数据

在基于HBase、Elasticsearch或MongoDB数据源创建服务单元之前,需要先创建对应数据源中数据表的元数据,以实现通过元数据确定数据源中数据表结构。后续您可以通过该元数据读取到对应数据源的数据。本文为您介绍如何创建HBase、...

导出数据

本文将为您介绍如何导出表结构、SQL查询结果集、整个数据库。前提条件 数据库关联的安全规则已开启 结果集是否支持导出 规则(系统默认开启)。更多信息,请参见 SQL窗口-关系型数据库。具有目标数据库的查询、导出等权限。更多信息,请...

兼容性概览

为了帮助您更清晰地使用外部工具连接访问MaxCompute,本文将为您介绍MaxCompute支持连接...工具 连接数据库 列举数据库 创建表 查看所有表 查看表结构 查看表数据 写表 创建视图 查看视图结构 查看视图数据 DBeaver DataGrip SQL Workbench/J

新建Flink Vvr Stream类型的公共节点

数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为任意...

新建Flink Vvr Stream类型的公共节点

数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为任意...

新建Flink DataStream类型的公共节点

数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为任意...

新建Flink DataStream类型的公共节点

数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为任意...

新建同步节点并运行后上线

表结构变化 当选中 开启检测 复选框后,以天为单位,进行数据源端表结构检测。若发现表结构变更,则进行异常推送。异常信息可在“运维监控-全景监控”中查看。开发资源组 测试时使用的资源组,支持选择用户自有的资源。生产资源组 正式环境...

新建Spark Stream类型的公共节点

数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为任意...

新建Spark Stream类型的公共节点

数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为任意...

新建同步节点并运行后上线

表结构变化 当选中 开启检测 复选框后,以天为单位,进行数据源端表结构检测。若发现表结构变更,则进行异常推送。异常信息可在“运维监控-全景监控”中查看。开发资源组 测试时使用的资源组,支持选择用户自有的资源。生产资源组 正式环境...

新建Flink Vvp Stream类型的公共节点

数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为任意...

新建Flink Vvp Stream类型的公共节点

数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为任意...

新建Spark SQL类型公共节点并运行

数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为任意...

MaxCompute物理视图和字段详情

表结构:包括 字段 详情、描述、数据类型、关联标准(需购买数据标准模块)、数据分类(需购买安全模块)、数据分级(需购买安全模块)、热度 信息,同时您可以在 操作 列下单击 图标,查看指定字段的血缘关系。数据预览:若有当前表的查询...

新建Spark Batch类型的公共节点

数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为任意...

互联网服务:小打卡

PolarDB-X 专注解决海量数据存储、超高并发吞吐、大瓶颈以及复杂计算效率等数据库瓶颈问题,历经各届天猫双十一及阿里云各行业客户业务的考验,助力企业加速完成业务数字化转型。本文介绍小打卡如何通过 PolarDB-X 应对业务挑战。所属...

StarRocks物理视图和字段详情

表结构:为您展示 字段名称、描述、数据类型、关联标准(需购买数据标准模块)、数据分类(需购买安全模块)、数据分级(需购买安全模块)、热度 信息,同时您可以在 操作 列下单击 图标,查看指定字段的血缘关系。数据预览:若有当前表的...

新建RDS MySQL类型的公共节点

数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为任意...

逻辑视图和字段资产详情

表结构:包括 字段详情、描述、数据类型、关联标准(需购买数据标准模块)、数据分类(需购买安全模块)、数据分级(需购买安全模块)、热度 信息,同时您可以在 操作 列下单击 图标,查看指定字段的血缘关系。数据预览:若有当前表的查询...

新建PostgreSQL类型的公共节点

数据结构 输入表的数据格式,由数据模型定义,在下拉列表中选择输入数据的逻辑表名称,表示该计算资源中提供数据的数据表的结构。当选择数据表时,需保证输入的模型与上游节点的输出数据模型相同。当选择星号(*)时,代表数据结构为任意...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 Redis 版 云数据库 RDS 数据库备份 DBS 数据传输服务 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用