跨阿里云账号备份恢复数据
数据库备份DBS 支持对阿里云云数据库（例如RDS、Redis、MongoDB、PolarDB等）及通过专线/VPN网关/智能网关接入的自建数据库进行跨账号的逻辑备份和恢复。本文以RDS MySQL为例，介绍如何使用DBS进行跨阿里云账号的数据备份和恢复。前提条件 ...
恢复Redis数据库
恢复对象 在 源数据库对象 栏中选择需要恢复的数据库或表，将其移动到 已选择数据库对象 栏中。说明 部分数据库支持单表或单库恢复粒度，减少恢复的数据量，缩短恢复时间RTO（Recovery Time Objective）。具体支持的恢复粒度，请参见 支持...
常见问题
PolarDB数据源网络联通性测试失败怎么办？MySQL数据源网络联通性测试失败怎么办？实时任务，运行报错：com.alibaba.otter.canal.parse.exception.PositionNotFoundException: can't find start position for XXX 实时任务，运行报错：...
库表级恢复
恢复对象 在 源数据库对象 栏中选择需要恢复的数据库或表，将其移动到 已选择数据库对象 栏中。本示例仅恢复 persons 与 sbtest100 表。在 预检查 对话框中显示 预检查通过 后，单击 立即启动。您可以在左侧的 恢复任务 页签中，查看数据库...
库表级恢复
恢复对象 在 源数据库对象 栏中选择需要恢复的数据库或表，将其移动到 已选择数据库对象 栏中。本示例仅恢复 persons 与 sbtest100 表。在 预检查 对话框中显示 预检查通过 后，单击 立即启动。您可以在左侧的 恢复任务 页签中，查看数据库...
Quick BI连接
您可以在Quick BI控制台的数据源配置界面，单击 复制白名单，获取Quick BI的IP地址。配置项 说明 显示名称 数据源名称。数据库地址 AnalyticDB PostgreSQL版的连接地址。端口 连接地址对应的端口号。数据库 AnalyticDB PostgreSQL版数据库...
应用身份识别
数据库审计服务提供的审计功能，只能审计访问源的IP信息，无法溯源访问应用的具体访问源信息（例如：用户名）。如果您需要在审计日志中查看具体访问源的信息，您可以使用应用身份识别功能。本文介绍如何使用应用身份识别功能。前提条件 已...
跨阿里云账号实现数据传输
数据库实例 阿里云数据库 自建数据库 源库 RDS MySQL、RDS MariaDB、RDS PostgreSQL、PolarDB-X 1.0、PolarDB-X 2.0、PolarDB PostgreSQL版、PolarDB PostgreSQL版（兼容Oracle）、PolarDB MySQL版、云数据库Redis、云原生内存数据库Tair、...
Oracle数据源
Oracle数据源为您提供读取和写入Oracle双向通道的功能，方便您后续可以通过向导模式和脚本模式配置数据同步任务。本文为您介绍DataWorks的Oracle数据同步能力支持情况。支持的版本 离线读写 版本 离线读（Oracle Reader）离线写（Oracle ...
区域热力层（v3.x版本）
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
关闭配置审计服务
重要 当您关闭配置审计服务后，配置审计中存储的资源配置数据、已创建的规则和合规结果将自动被清空且不可恢复，请您慎重操作。前提条件 如果管理账号下有账号组，则需要先删除账号组，再执行本操作。关于如何删除账号组，请参见 删除账号...
配置安全规则
将数据库添加到数据库审计系统后，您可以为数据库配置安全规则（即审计规则），当数据库的审计记录命中审计规则时，数据库审计系统会触发告警。本文介绍如何配置审计规则。背景信息 审计规则支持内置规则和自定义规则。内置规则即数据库...
创建并管理数据源
附录：数据源环境介绍 标准模式工作空间下，同一个名称的数据源存在开发环境和生产环境两套配置，两套配置可对应底层两个数据库/数据仓库，针对不同环境您可设置不同的数据源信息，使测试与生产调度操作的数据源隔离，以保护生产数据的安全...
配置源库信息
参数 说明 请输入数据源名称 DTS会自动生成一个任务名称，建议配置具有业务意义的名称（无唯一性要求），便于后续识别。区域 选择源库所在地域。说明 当前仅支持在华东1（杭州）、华东2（上海）、华北1（青岛）、华北2（北京）、华北3...
通过代理连接地址连接数据库
在读写分离、高并发读等业务场景中，建议在业务应用中将数据库连接地址配置为数据库代理连接地址，RDS PostgreSQL可以根据代理连接地址配置的读写属性和读权重进行自动分配，减少主实例负载。本文介绍如何通过数据库代理连接地址连接RDS ...
DROP DATABASE
DROP DATABASE用于移除一个数据库。简介 DROP DATABASE 移除一个数据库。它会移除该数据库的系统目录项并且删除包含数据的文件目录。它只能由数据库拥有者执行。当你已经连接到目标数据库时，它不能被执行（连接到 postgres 或者任何其他...
管理数据库资产
修改数据库 已添加到数据库审计系统中数据库配置发生变化时，您需要在数据库审计系统中更新数据库信息。登录数据库审计系统。具体操作，请参见 登录数据库审计系统。在左侧导航栏，选择 资产>资产管理。定位到要编辑的数据库，单击 修改。...
Kafka单表实时入湖OSS（HUDI）
添加数据源 新建Kafka数据源 在DataWorks 数据源管理 页面，单击 新建数据源，根据界面提示新建Kafka数据源。详情请参见：Kafka数据源。新建OSS数据源 在DataWorks 数据源管理 页面，单击 新建数据源，根据界面提示新建OSS数据源。OSS数据...
集成组件库开发说明
IBM DB2 配置IBM DB2输入组件 OceanBase 配置OceanBase输入组件 Teradata 配置Teradata输入组件 脚本模式 配置本地文件输入组件 Hologres 配置Hologres输入组件 ClickHouse 配置ClickHouse输入组件 Kafka 配置Kafka输入组件 DataHub 配置...
交叉透视表
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
DB2数据源
jdbcUrl":"jdbc:db2:/ip:port/database",/DB2数据库的JDBC连接信息。column":["id"],"batchSize":1024,/一次性批量提交的记录数大小。table":"",/表名。username":"",/用户名。preSql":[]/执行数据同步任务之前执行的SQL语句。},"name...
数据清理
背景信息 ODC 支持在源数据库中的数据归档到目标数据库后，删除源数据库中的数据，以提高数据库查询性能，降低在线存储成本。本文档旨在介绍如何通过提交数据清理工单实现归档数据。原理介绍 前提条件 清理的表中必须包含主键。注意事项 ...
集成组件库开发说明
组件名称 组件配置 限速 配置限速流程组件 条件分发 配置条件分发流程组件 自定义组件 如需使用自定义组件，请先创建 离线自定义源类型，完成后，RDBMS类型数据库可直接在默认组件中选取，非RDBMS类型数据库需自行上传自定义读写插件。
数据归档
背景信息 ODC 支持定时将源数据库中的表数据归档至其它目标数据库中，以解决因线上数据增多影响查询性能与业务运作的问题。本文档旨在介绍如何通过提交数据归档工单实现归档数据。原理介绍 前提条件 归档的表中必须包含主键。注意事项 前置...
Vertica数据源
是 无 jdbcUrl 描述的是到对端数据库的JDBC连接信息，jdbcUrl 包含在connection配置单元中：在一个数据库上只能配置一个值，不支持同一个数据库存在多个主库的情况（双主导入数据情况）。jdbcUrl 的格式和Vertica官方一致，并可以连接附加...
使用DataWorks同步数据
背景信息 您可以通过DataWorks，将支持的各种数据源数据离线同步至 云数据库ClickHouse。离线同步支持的数据源类型，具体请参见 支持的数据源与读写插件。前提条件 已创建工作空间，引擎服务选择为MaxCompute。如何创建，请参见 创建工作...
修改备份源
测试阶段结束，需要将数据库切换为生产环境，确保备份的数据源与生产环境一致，保证生产数据的备份完整性和可用性。源数据库账号密码配置错误或权限不足，需要修改账号密码或调整账号权限。源数据库的库表发生变动，例如新增、删除或修改了...
快速配置SSL加密
步骤二：下载CA证书 开启云端证书后，RDS PostgreSQL数据库提供数据库CA证书供您下载，当您通过客户端远程连接RDS PostgreSQL数据库时，使用数据库CA证书可以对数据库真伪进行校验。切换证书来源为 使用云端证书，单击 下载CA证书。解压...
湖仓一体
本章节介绍如何通过 云数据库SelectDB 提供的联邦查询技术，对数据湖、数据库、远端文件等外部数据源进行联邦分析。为您提供简单、快速的数据分析体验。概述 云数据库SelectDB 提供多源数据目录功能（Multi-Catalog或Catalog），支持对接...
离线集成管道通道配置
通过离线集成管道通道，您可定义离线集成任务运行时的容错、并发数、JVM资源、数据库配置及集成管道流量监控。本文将为您介绍如何配置离线集成管道通道。操作步骤 请参见 数据集成入口，进入数据集成页面。在数据集成页面，按照下图操作...
离线集成管道通道配置
通过离线集成管道通道，您可定义离线集成任务运行时的容错、并发数、JVM资源、数据库配置及集成管道流量监控。本文将为您介绍如何配置离线集成管道通道。操作步骤 请参见 数据集成入口，进入数据集成页面。在数据集成页面，按照下图操作...
FineBI
配置外接数据库为AnalyticDB，连接失败 处理方法：外界数据库需要配置本地MySQL，而不是 AnalyticDB MySQL版。数据准备标签下没有抽取数据和实时数据的选项 处理方法：FineBI官网提供的版本不包含直连引擎，需要联系FineBI技术支持获取对应...
离线同步并发和限流之间的关系
数据集成会尝试保障任务执行并发数符合配置并发数，常见的任务实际执行并发数小于配置并发数的场景有：关系数据库（如MySQL、Polardb、SQLServer、PostgreSQL、Oracle等等）读取，没有配置切分键splitPk（切分列支持整型数字类型，Oracle在...
ClickHouse数据源
} },"order":{"hops":[{"from":"Reader","to":"Writer"}]} } ClickHouse Writer脚本参数 参数 描述 是否必选 默认值 jdbcUrl 到对端数据库的JDBC连接信息，jdbcUrl 包含在 connection 配置单元中。在一个数据库上只能配置一个值。jdbcUrl ...
创建云ClickHouse分析实例
背景信息 云ClickHouse分析实例会自动通过MaterializedMySQL引擎将RDS MySQL实例中的数据同步到 云数据库ClickHouse 中，利用其强大的分析性能解决多维聚合实时分析问题。说明 关于MaterializeMySQL引擎，请参见 MaterializeMySQL引擎。...
自定义区域下钻层（v3.x版本）
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
恢复MongoDB数据库
已选择的恢复时间点 选择需要恢复的时间，设置的时间必须在可恢复的时间范围内 恢复目标数据库 数据库所在位置 选择恢复目标数据库所在位置，支持类型如下：有公网IP:Port的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能网关接入的...
恢复Oracle逻辑备份
支持的选项：有公网IP:Port的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能网关接入的自建数据库 PolarDB实例 无公网IP:Port的自建数据库（通过数据库网关DG接入）数据库类型 默认为Oracle数据库。实例地区 选择恢复的目标实例的...
开通配置审计服务
在您使用配置审计之前，必须先开通配置审计服务，才能获取跨地域的资源清单，并对资源进行合规审计。背景信息 开通配置审计服务仅获取您当前账号下资源配置的只读权限，不会影响云服务的正常运行。操作步骤 登录 配置审计控制台。单击 立即...
- 产品推荐
- 这些文档可能帮助您