同步时源库为MongoDB的注意事项及限制
MongoDB（副本集架构）同步至MongoDB（副本集架构、分片集群架构）如果同步的目标数据库类型为MongoDB，如自建MongoDB、云数据库MongoDB，具体注意事项及限制如下：类型 说明 源库限制 带宽要求：源库所属的服务器需具备足够出口带宽，否则...
接入数据库
数据库连接方式说明 连接类型 说明 支持的数据资产类型 一键连接 指通过控制台按钮一键连接数据库的方式。在连接过程中，数据安全中心 会针对目标数据资产添加只读账号，数据安全中心 通过该账号连接目标数据库，从而进行数据识别任务；...
配置Hive输出组件
同步其他数据源的数据至Hive数据源的场景中，完成源数据源的信息配置后，需要配置Hive输出组件写入数据的目标数据源。本文为您介绍如何配置Hive输出组件。使用限制 Hive输出组件支持写入文件格式为 orc、parquet、text、iceberg（iceberg...
配置Greenplum输出组件
配置Greenplum输出组件，可以将外部数据库中读取的数据写入到Greenplum，或从大数据平台对接的存储系统中将数据复制推送至Greenplum，进行数据整合和再加工。本文为您介绍如何配置Greenplum输出组件。前提条件 已创建Greenplum数据源。具体...
配置Greenplum输出组件
配置Greenplum输出组件，可以将外部数据库中读取的数据写入到Greenplum，或从大数据平台对接的存储系统中将数据复制推送至Greenplum，进行数据整合和再加工。本文为您介绍如何配置Greenplum输出组件。前提条件 已创建Greenplum数据源。具体...
配置TDH Inceptor输出组件
同步其他数据源的数据至TDH Inceptor数据源的场景中，完成源数据源的信息配置后，需要配置TDH Inceptor输出组件写入数据的目标数据源。本文为您介绍如何配置TDH Inceptor输出组件。使用限制 TDH Inceptor输出组件支持写入文件格式为orc、...
产品优势
云监控是阿里巴巴集团多年来监控技术研究积累的成果，结合阿里云计算平台强大的数据分析能力，为您提供云产品监控、站点监控和主机监控等功能，为您的云产品保驾护航。即开即用 云监控无需您购买和开通。当您注册阿里云账号后，自动开通云...
PolarDB PostgreSQL版（兼容Oracle）集群间的单向同步
数据库名称 填入同步的目标数据库名称。数据库账号 填入目标 PolarDB PostgreSQL版（兼容Oracle）集群的数据库账号，该账号需具备 数据库Owner 权限。重要 数据库Owner 在创建数据库时已指定。数据库密码 填入数据库账号对应的密码。单击...
基于DLF、RDS或Flink、OSS支持Delta Lake或Hudi存储...
待同步任务执行成功后，在DLF控制台中单击 元数据>元数据管理，并单击进入新生成的目标数据库，在表列表页签即可查看到已生成的数据表。步骤六：基于MaxCompute分析数据湖数据 基于已创建的MaxCompute项目、DLF元数据库、OSS存储空间，创建...
配置Oracle输出组件
同步其他数据源的数据至Oracle数据源的场景中，完成源数据的信息配置后，需要配置Oracle输出组件的目标数据源。本文为您介绍如何配置Oracle输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。按照下图指引...
配置Oracle输出组件
同步其他数据源的数据至Oracle数据源的场景中，完成源数据的信息配置后，需要配置Oracle输出组件的目标数据源。本文为您介绍如何配置Oracle输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。按照下图指引...
企业云监控的监控数据存储方案说明
日志服务不会对通过企业云监控控制台和API创建的日志项目（Project）和时序库（MetricStore），以及存储的数据进行收费。当您通过日志服务控制台或API对存储的监控数据进行相关处理和操作时，需要按照日志服务的计费标准收费。关于日志服务...
敏感数据溯源
背景信息 通过DataWorks的 数据保护伞 的 数据脱敏管理，开启目标 数据识别规则 的 数据水印 功能后，则在DataWorks中，对命中该规则的数据所执行的所有操作（例如查询、下载等）均会自动生成水印信息。水印信息用于记录用户的访问行为，...
新建数据处理任务
相关任务 任务 说明 查看任务详情 在 倾斜数据处理 页面，单击目标任务 操作 列的 详情，即可查看任务的基本信息、处理的数据、数据坐标位置、结果数据、参数设置和任务执行状态。删除任务 在 倾斜数据处理 页面，单击目标任务 操作 列的 ...
迁移时源库为MySQL的注意事项及限制
如果迁移的目标数据库类型为MySQL，如RDS MySQL、自建MySQL，具体注意事项及限制如下：类型 说明 源库限制 带宽要求：源库所属的服务器需具备足够出口带宽，否则将影响数据迁移速率。待迁移的表需具备主键或唯一约束，且字段具有唯一性，...
控制台监控
通过控制台，您可以查看和监控各实例的三个主要性能指标：每秒写入数据点、时间线数量和磁盘占用率。操作步骤 说明 三个主要性能指标的监控步骤一致。本文仅以监控每秒写入数据点为例进行说明。在 TSDB 控制台 的实例列表页面中，在需要...
同步时源库为MySQL的注意事项及限制
MySQL同步至PolarDB-X MySQL同步至Oracle MySQL同步至PostgreSQL MySQL间的同步 如果同步的目标数据库类型为MySQL，如RDS MySQL、自建MySQL，具体注意事项及限制如下：MySQL间单向同步 类型 说明 源库限制 待同步的表需具备主键或唯一约束...
迁移时源库为Oracle的注意事项及限制
自建Oracle迁移至MySQL 如果迁移的目标数据库类型为MySQL，如RDS MySQL、自建MySQL，具体注意事项及限制如下：类型 说明 源库限制 带宽要求：源库所属的服务器需具备足够出口带宽，否则将影响数据迁移速率。如果源库通过专线的方式接入，...
配置转换组件
将鼠标指针移动至已完成配置的目标数据源上，单击圆点拉出连接线，连接目标数据源和 表 Join-1。单击画布区域的 表 Join-1，根据页面信息配置转换组件。在 节点配置 页签，设置以下参数，配置节点信息。区域 参数 说明 转换名称 请输入转换...
PolarDB MySQL版迁移至RDS MySQL
支持的目标数据库 PolarDB MySQL版 除了支持迁移至 RDS MySQL 以外，还支持迁至以下类型的自建数据库。说明 本文以 RDS MySQL 实例为例介绍配置流程，其他类型的目标数据库的配置流程与本案例类似。有公网IP的自建数据库。ECS上的自建数据...
修复同步作业预检查失败的问题
数据同步作业中配置的目标数据库账号权限不足。手动在目标实例中创建满足要求的数据库或调整数据库账号。源库权限检查 数据同步作业中配置的数据库账号的权限不足，例如检查项为dts.precheck.Unexpected error时检查失败。说明 不同类型...
数据投递
数据传输服务DTS（Data Transmission Service）提供的数据投递功能，用户可以通过SDK将各种类型的数据源投递到DTS，再由DTS同步至目标数据库，从而支持更多类型的数据源。应用场景 数据投递功能适用于以下任一场景：源端为DTS同步方案暂不...
PolarDB-X 2.0同步至自建Oracle
已选择对象 右键单击 已选择对象 下方的目标数据库，在弹出的 编辑Schema 对话框中，将 Schema名称 修改为Oracle中用于接收数据的Schema名称。更多信息，请参见 库表列名单个映射。说明 Schema名称 为大写。如需设置WHERE条件过滤数据，请...
PolarDB PostgreSQL版间的迁移
目标数据库的存储空间，需大于源数据库已使用的存储空间。注意事项 说明 在库表结构同步过程中，DTS会将源数据库中的外键同步到目标数据库。在全量同步和增量同步过程中，DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行...
PolarDB-X 2.0迁移至自建Oracle
已选择对象 右键单击 已选择对象 下方的目标数据库，在弹出的 编辑Schema 对话框中，将 Schema名称 修改为Oracle中用于接收数据的Schema名称。更多信息，请参见 库表列名单个映射。说明 Schema名称 为大写。如需设置WHERE条件过滤数据，请...
配置资源组与网络连通
说明 如果在为独享资源组绑定VPC时，选择的安全组为 企业安全组，您需要在绑定专有网络后，前往安全组管理页面，为该企业安全组新增安全策略，具体如下：出方向：增加独享资源组需要访问的目标数据源IP。入方向：增加独享资源组绑定的交换...
网络监控
查看网络监控的监控数据 登录 云监控控制台。在左侧导航栏，选择 云资源监控>主机监控。在 主机监控 页面，单击目标主机的实例名称链接，或单击目标主机对应 操作 列的 监控图表。单击 网络监控 页签。您可以查看目标主机的网络监控数据。...
查看云产品监控大盘
操作步骤 登录 云监控控制台。在左侧导航栏，选择 可视化（Dashboard）>云产品大盘。在 云产品监控大盘 页签，选择目标云产品和相关参数。支持查看监控大盘的云产品与 云产品监控 菜单中支持的云产品相同，相关文档请参见 云产品监控。选择...
云盘
查看云盘的监控数据 登录 云监控控制台。在左侧导航栏，选择 云资源监控>主机监控。在 主机监控 页面，单击目标主机的实例名称链接，或单击目标主机对应 操作 列的 监控图表。单击 云盘 页签。在 云盘 页签，您可以查看目标主机下的云盘...
快速体验
在导入模板后，您可以前往目标空间，并自行完成后续的数据质量监控和数据可视化操作。仅 空间管理员 角色可导入ETL模板至目标工作空间，为账号授权空间管理员角色详情请参见 空间级模块权限管控。导入ETL工作流模板，详情请参见 导入ETL...
GPU监控
您可以查看目标主机的GPU监控数据，还可以为目标GPU监控的监控指标设置报警规则，并查看报警。具体操作，请参见 为主机创建报警规则 和 查看报警。相关文档 DescribeMetricLast-查询指定监控项的最新监控数据 DescribeMetricList-查询指定...
查看秒级监控
操作步骤 登录 云监控控制台。在左侧导航栏，选择 可视化（Dashboard）>高精度指标大盘。在 秒级监控 页签，先选择目标云产品及其相关参数，然后选择查看的时间段。说明 您只能查询最近30天内的监控数据。查看目标云产品的所有秒级监控指标...
基于多云和混合云场景下的资源监控
登录 云监控控制台。在左侧导航栏，选择 企业云监控>指标仓库。在 指标仓库 页面，单击 创建指标仓库。在 指标仓库管理 面板，输入指标仓库名称，其他参数均保持默认值。单击 确定。步骤二：将阿里云和线下IDC的监控数据汇入指标仓库 将...
基础监控
Byte InternetOut userId、instanceId Maximum、Minimum、Average 查看基础监控的监控数据 登录 云监控控制台。在左侧导航栏，选择 云资源监控>主机监控。在 主机监控 页面，单击目标主机的实例名称链接，或单击目标主机对应 操作 列的 ...
有效映射关系管理
在 全部展开 视角下，您可以聚焦于单个资产对象，并批量引用该对象对应的所有有效映射关系中包含的数据标准下监控配置生成的质量监控规则。两个视角下的监控配置方式基本一致，区别在于可引用的监控规则范围，下面配置以 资产粒度 为例。...
有效映射关系管理
在 全部展开 视角下，您可以聚焦于单个资产对象，并批量引用该对象对应的所有有效映射关系中包含的数据标准下监控配置生成的质量监控规则。两个视角下的监控配置方式基本一致，区别在于可引用的监控规则范围，下面配置以 资产粒度 为例。...
数据质量教程概述
数据质量是数据分析结论有效性和准确性的基础。本文为您介绍数据质量保障教程的业务场景以及如何衡量数据质量的高低。前提条件 在开始本教程前，请您首先完成 搭建互联网在线运行分析平台 教程，详情请参见 业务场景与开发流程。业务场景 ...
数据质量教程概述
数据质量是数据分析结论有效性和准确性的基础。本文为您介绍数据质量保障教程的业务场景以及如何衡量数据质量的高低。前提条件 在开始本教程前，请您首先完成 搭建互联网在线运行分析平台 教程，详情请参见 业务场景与开发流程。业务场景 ...
功能简介
质量评估 可自定义质量检查计划，根据用户设置的数据质量规则执行面向不同计算资源的质量检查任务，通过数据质量监控报告展现系统整体数据质量概览及多维度细分数据的质量情况。全局监控 可通过自定义监控链路和告警消息配置，可快速实现从...
基本概念
如果同步延迟为0，则源数据库与目标数据库的数据完全同步。数据更新 数据更新是指仅修改数据，未修改结构定义的操作，例如INSERT、DELETE和UPDATE操作。结构更新 结构更新是指修改结构对象定义语法的操作，例如CREATE TABLE、ALTER TABLE、...
- 产品推荐
- 这些文档可能帮助您