资源角色
可查询实例下所有数据库中的数据（不包含敏感字段），提交各类数据方案与库表结构的工单。对应于审批节点中 动态计算 的DBA。实例Owner 每个实例可以设置3个实例Owner。云数据库资源默认主账号为实例Owner。非云数据库默认当前录入的云账号...
通过外表导入至湖仓版
方法一：使用 INSERT INTO 语句导入数据，当主键重复时会自动忽略当前写入数据，数据不做更新，作用等同于 INSERT IGNORE INTO，更多信息，请参见 INSERT INTO。示例如下：INSERT INTO adb_demo.adb_import_test SELECT*FROM adb_external_...
管理数据树
说明 数据表名称不支持重复。数据表创建规范：长度不超过63个字符，由小写字母、数字和下划线构成，且必须由小写字母开头。等待数据导入完成后，单击 完成，系统将自动跳转至数据表详情页。查看已上传数据表详情，包括但不限于数据地图、...
表结构发布流程化
可选：前往 SQL Console 插入数据或提交 数据变更工单 对dev_database数据库进行测试。插入数据示例代码如下：insert into teacher(teacher_id,teacher_name,phonenumber)values('t001','teacher001','1380000001'),('t002','teacher002','...
数据连接管理
在配置任务时，您可以直接选择已录入的数据库，DTS将自动填入数据库信息而无需您手动输入，避免了重复输入数据库信息的繁琐步骤。本文介绍如何录入、保存、编辑或删除数据库实例。前提条件 若您需要录入其他阿里云账号的数据库，需要对登录...
主键与唯一键（DRDS模式）
重要 对于使用Local唯一键的表，如果已经存在唯一键值重复的情况，当往下游同步数据时出现唯一键冲突时，建议人工订正源端数据。常见问题 Q：创建Global主键、Global唯一键有特殊的语法吗？A：没有，使用与MySQL一样的语法创建主键、唯一键...
表引擎
在没有彻底optimize之前，可能无法达到主键去重的效果，比如部分数据已经被去重，而另外一部分数据仍旧有主键重复。optimize是后台动作，无法预测具体执行时间点。手动执行optimize在海量数据场景下需要消耗大量时间，无法满足业务即时查询...
公共规范
层次调用约定 应用层应优先调用公共层数据，必须存在中间层CDM数据，不允许应用层跨过中间层CDM从ODS层重复加工数据。中间层CDM需要积极了解应用层数据的建设需求，将公用的数据沉淀到公共层，为其他层提供数据服务。应用层需要积极配合...
发布中心概述
在数据权限管控严格的研发流程下，开发者通常会在开发项目内完成任务开发、基础属性和调度属性配置、补数据测试后，提交任务至发布中心，发布成功的任务才能在生产环境生效并调度运行，以实现开发和生产运维的数据隔离，保证资产质量。...
发布中心概述
在数据权限管控严格的研发流程下，开发者通常会在开发项目内完成任务开发、基础属性和调度属性配置、补数据测试后，提交任务至发布中心，发布成功的任务才能在生产环境生效并调度运行，以实现开发和生产运维的数据隔离，保证资产质量。...
主键与唯一键（AUTO模式）
重要 对于使用Local唯一键的表，如果已经存在唯一键值重复的情况，当往下游同步数据时出现唯一键冲突时，建议人工订正源端数据。常见问题 Q：创建Global主键、Global唯一键有特殊的语法吗？A：没有，使用与MySQL一样的语法创建主键、唯一键...
ADAM概览
异构数据库迁移ADAM（Advanced Database&Application Migration）提供数据库平滑迁云解决方案，全面评估上云可行性、成本和云存储选型，内置实施协助、数据迁移、应用迁移等工具，覆盖数据库迁移的全生命周期，帮助企业降低数据库和应用...
权限自查建议
随着项目的不断演进，人员的权限也会更新迭代，您需要及时审视人员权限合理性，提升项目数据安全。本文为您介绍权限查询要点，并提供调整建议供参考。背景信息 在项目创建初期，为了提升业务处理效率，通常在用户和权限管理上相对宽松。...
将数据写入OSS
如果 insert overwrite 作业可以重复提交，当作业运行失败时重新提交作业即可。注意事项 OSS对外提供的带宽是有限制的，若您频繁读取OSS数据，或者大量向OSS写入数据，若短时间内产生的数据流量超过了OSS实例当前的带宽限额，就会导致带宽...
新增消费组
若DTS增量数据采集模块或者客户端切换，则可能会导致数据重复。操作步骤 登录 数据传输控制台。在左侧导航栏，单击 数据订阅。在 数据订阅列表 页面上方，选择订阅通道所属地域。定位至已购买的数据订阅通道，单击订阅ID。单击左侧导航栏的...
表设计最佳实践
在写入数据前进行数据的采集和整合，整合好后，一次性提交数据（通常是每64 MB提交1次）。日志数据很少会对原来分区执行更新操作，可以用INSERT操作进行少量数据的插入，但通常需要限制插入次数。如果有大量的更新操作，需要采用INSERT ...
错误码
非法赋权 0L000 非法赋权（INVALID GRANTOR）0LP01 非法赋权操作（INVALID GRANT OPERATION）0P 类：非法角色声明 0P000 非法角色声明（INVALID ROLE SPECIFICATION）21 类：势违反 21000 势违反（CARDINALITY VIOLATION）22 类：数据异常 ...
DML无锁变更概览
DML无锁数据变更可以将单个SQL拆分成多个批次执行，能更好地满足业务方对大量数据变更的需求，例如历史数据清理、全表更新字段等，保证执行效率，减小对数据库性能、数据库空间等的影响。背景信息 当业务累积了大量数据时，需要定期清除表...
消息通知管理
事件类型 DMS支持通知的事件类型如下：模块 类别 状态 工单模块 权限申请 待审批 审批通过 审批拒绝 数据变更 预检验失败 待提交审批 待审批 审批通过 审批拒绝 执行成功 执行失败 待调度 调度超时 数据导出 预检验失败 待提交审批 待审批 ...
新增消费组
若DTS增量数据采集模块或者客户端切换，则可能会导致数据重复。操作步骤 进入 新版DTS订阅任务的列表页面。在页面左上角，选择订阅实例所属地域。定位至目标的订阅实例，并单击实例ID。单击左侧导航栏的 数据消费。在 数据消费 页面，单击...
数据追踪
若影响较大，您可提交普通数据变更工单将此回滚脚本作为附件上传至工单中，执行至目标数据库中。具体操作，请查看 普通数据变更。使用API进行数据追踪。CreateDataTrackOrder-创建数据追踪工单 GetDataTrackJobDegree-获取数据追踪任务进度...
从自建Redis迁移至MyBase Redis
对于List列表，由于DTS在调用 psync 或 sync 传输数据时，不会对目标端已有的数据执行 Flush 操作，所以可能出现重复的数据。迁移期间，如自建Redis发生扩缩容（如增加或者减少分片）、规格变配（如扩大内存），则您需重新配置任务。且为...
跨云账号迁移云数据库Redis实例
对于List列表，由于DTS在调用 psync 或 sync 传输数据时，不会对目标端已有的数据执行 Flush 操作，所以可能出现重复的数据。如果源库中的某些Key使用了过期（expire）策略，由于可能存在Key已过期但未被及时删除的情况，所以在目标库中...
质量规则参数配置
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
质量规则参数配置
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
云数据库Redis间的迁移
对于List列表，由于DTS在调用 psync 或 sync 传输数据时，不会对目标端已有的数据执行 Flush 操作，所以可能出现重复的数据。如果源库中的某些Key使用了过期（expire）策略，由于可能存在Key已过期但未被及时删除的情况，所以在目标库中...
从自建Redis迁移至阿里云Redis
对于List列表，由于DTS在调用 psync 或 sync 传输数据时，不会对目标端已有的数据执行 Flush 操作，所以可能出现重复的数据。迁移期间，如自建Redis发生扩缩容（如增加或者减少分片）、规格变配（如扩大内存），则您需重新配置任务。且为...
从自建Redis迁移至Tair实例
对于List列表，由于DTS在调用 psync 或 sync 传输数据时，不会对目标端已有的数据执行 Flush 操作，所以可能出现重复的数据。迁移期间，如自建Redis发生扩缩容（如增加或者减少分片）、规格变配（如扩大内存），则您需重新配置任务。且为...
普通数据变更
数据管理DMS的普通数据变更功能支持INSERT、UPDATE、DELETE、TRUNCATE、CREATE TABLE等SQL语句，可以对数据库中的数据进行变更操作，用于数据初始化、历史数据清理、问题修复、功能测试等场景。本文介绍在DMS中进行普通数据变更的方法。...
使用DMS数据追踪进行恢复
数据追踪功能可以快速按需找到目标时间段内的相关更新信息，并生成逆向回滚语句。...后续步骤 导出回滚脚本后，您可以提交普通数据变更工单，将此回滚脚本作为附件上传至工单中，执行至目标数据库中。更多信息，请查看 普通数据变更。
跨云账号迁移云数据库Redis实例
对于List列表，由于DTS在调用 psync 或 sync 传输数据时，不会对目标端已有的数据执行 Flush 操作，所以可能出现重复的数据。如果源库中的某些Key使用了过期（expire）策略，由于可能存在Key已过期但未被及时删除的情况，所以在目标库中...
数据订阅操作指导
您也可以通过创建多个消费组，对同一个数据源的数据进行重复消费，从而降低数据订阅的使用成本，提升数据消费速度。可选：管理消费组 对数据订阅通道的消费组进行管理（例如修改消费组密码、删除消费组）。可选：修改订阅对象 在数据订阅的...
入库审批
数据填报提交表单入库时，为了避免脏数据的录入、保障数据的准确性，可以通过入库审批功能对数据进行校验以及审批后完成录入。使用限制 仅专业版支持入库审批。1.审批前置条件 1.1 系统审批开启 1.1.1 操作入口 开启审批流，并勾选对应的 ...
概述
如果自动提交模式打开，则会立即提交每个成功的数据库更新，并且无法撤消。打开或关闭自动提交模式的方式取决于应用程序。事务在 SPL 程序中遇到第一个 SQL 命令时开始。所有后续的 SQL 命令都包含在该事务中。当发生以下任一情况时，事务...
半结构化分析
其中，JSON数据类型直接存储输入文本，会保存JSON数据中语义无关的空格，并且会保持JSON对象键的顺序，以及JSON数据中重复的键和键对应的数据。对于重复键在查询的时候会将最后一个遇到键的值当作有效值。JSONB数据类型则是以二进制格式来...
表数据管理
查看数据 进入数据页签后，ODC 以表格的形式展示表中的数据，并导航栏中提供了以下功能键查看和管理表中的数据：功能 说明 编辑 单击编辑图标进入编辑态，以修改表中的数据。提交（Oracle 模式）Oracle 模式下自动提交默认设置为关（OFF）...
审计日志
SubmitPublishStandard 提交上线数据标准。RepublishStandard 重新发布数据标准。WithdrawPublishStandard 撤销发布数据标准。UnpublishStandard 下线数据标准。DeleteStandard 删除数据标准。ImportStandards 批量导入数据标准。...
安全中心
之前在数据管理提交的权限申请，仍未通过审批，是否需要重新申请？如何设置字段的LabelSecurity？通过安全中心可以申请什么权限？您可以通过 安全中心 页面申请DataWorks工作空间内的表权限，包括开发环境和生产环境。数据管理和安全中心是...
数据治理中心概述
数据治理逻辑 数据治理问题检测包括数据开发任务提交发布前的检查项检测，及提交发布后的治理项检测，帮助您全方位管控当前数据存在的待治理问题。当触发检测项后，若校验不通过，则会生成相应事件（严重问题将阻塞开发流程），您需通过...
项目编辑器页面管理
选择地图数据集数量 单击地图右下角的数据集下拉列表，为当前地图选择显示一个合适的地图数据集数量值，可选 200条/数据集、400条/数据集600条/数据集、800条/数据集 和 1000条/数据集。重新加载 单击地图右下角的 重新加载，即可重新加载...
- 产品推荐
- 这些文档可能帮助您