执行补数据并查看补数据实例（新版）
指定时间段：设置补数据任务均在指定时间段内才会触发执行，请根据需要补数据的任务量合理设置运行时间段。说明 超过该时间段且处于未运行状态的任务不会执行，超过该时间段但处于运行中状态的任务会继续执行。配置补数据任务校验策略。...
CREATE DATABASE
partition_interval BIGINT 分区时长，同一时间段的数据和索引存储在一个时间分区，单位为天。关于默认值，需注意以下内容：3.4.19及以上版本的时序引擎，partition_interval 参数默认值为30。3.4.19之前版本的时序引擎，partition_...
常见问题
支持的数据库部署位置（接入方式）阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...
风险识别管理（新版）
规则名称 规则类型 规则等级 规则配置 非工作时间查询大数据量敏感数据 数据访问风险 低 如下时间段查询数据量大于10000时命中该规则。周一至周五：22:00～24:00。周六至周日：00:00～24:00。相似SQL查询 数据访问风险 低 十分钟内查询相似...
从腾讯云MySQL迁移至阿里云
如果您的实例进行了访问限制，请先放开对应地区公网IP段的访问权限后，再配置数据迁移任务。实例地区 选择腾讯云MySQL数据库所属地域。说明 若选项中没有腾讯云MySQL数据库所属的地域，您可以选择一个该数据库距离最近的地域。主机名或IP...
文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
功能特性
数据迁移 数据迁移功能帮助您实现同构或异构数据源之间的数据迁移，适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景 功能集 功能 功能描述 参考文档 同构迁移 逻辑迁移 支持同构数据库间的数据迁移。自建MySQL...
时间轴
图表样式 时间轴支持自定义时间轴的节点标签样式、事件节点样式以及交互等配置，适用于在可视化应用中展示不同时间段的数据变化情况，比如使用时间轴组件实现数据轮播。配置面板 搜索配置：单击 配置 面板右上角的 搜索配置，可在 搜索配置...
Hologres物理表和字段详情
② 图例区 字段血缘支持的字段，包括 域内表字段、数据源表字段。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据字段名称关键字进行模糊搜索。特殊的，若存在跨周期的循环依赖，则无法继续展开，需从起始...
逻辑表和字段资产详情
② 图例区 字段血缘支持的字段，包括 域内表字段、数据源表字段。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据字段名称关键字进行模糊搜索。特殊的，若存在跨周期的循环依赖，则无法继续展开，需从起始...
MaxCompute物理表和字段详情
② 图例区 字段血缘支持的字段，包括 域内表字段、数据源表字段。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据字段名称关键字进行模糊搜索。特殊的，若存在跨周期的循环依赖，则无法继续展开，需从起始...
MaxCompute物理表和字段详情
② 图例区 字段血缘支持的字段，包括 域内表字段、数据源表字段。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据字段名称关键字进行模糊搜索。特殊的，若存在跨周期的循环依赖，则无法继续展开，需从起始...
逻辑表和字段资产详情
② 图例区 字段血缘支持的字段，包括 域内表字段、数据源表字段。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据字段名称关键字进行模糊搜索。特殊的，若存在跨周期的循环依赖，则无法继续展开，需从起始...
API概览
DescribeAvailableRecoveryTime 查询备份文件可恢复的时间段 该接口用于查询某跨地域备份文件可恢复哪个时间段的数据。DescribeCrossRegionBackupDBInstance 查询开启跨地域备份实例 该接口用于查询所选地域的哪些实例开启了跨地域备份，...
新建普通维度逻辑表
步骤二：配置普通维度逻辑表字段信息 在 表结构 配置页面配置当前普通维度逻辑表的表字段、数据类型、字段类别等结构信息。说明 单击逻辑表名称后的 图标，可查看逻辑表的基本信息。区域 描述 ① 表字段定位 单击可定位字段列表的 基本配置...
API概览
本产品（云数据库 RDS/2014-08-15）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，可...
数据上传
DataWorks的数据上传功能支持将本地文件、数据分析的电子表格、OSS文件等数据上传至MaxCompute、EMR Hive、Hologres等引擎进行分析及管理，为您提供便捷的数据传输服务，助力您快速实现数据驱动业务。本文为您介绍如何使用数据上传功能上传...
冷数据归档
本文介绍时序引擎的冷数据归档功能的使用方法。功能概要 在时序数据库持续写入的场景下，早先写入的时序数据会随着时间推移，查询频度逐渐降低。这样的数据通常被称为“冷数据”，与之相对的概念被称为“热数据”。随着冷数据体量的不断变...
数据建模
时间分区 时间分区会按照时间维度进行数据分区存储，存储底层会将不同时间分区内的数据进行分段存储，一个时间分区内的数据包含时间线索引和时序数据。时序引擎支持在数据库设置时间分区，一般情况下，如果创建周期性时间线导致了时间线...
查看数据同步项目的详情
增量同步性能 区域为您实时展示增量同步的信息，您可以在 增量同步监控 区域的右上角，过滤 近 1 小时、最近一天、最近一周 和自定义时间段的增量同步数据，分段和实时地查看同步性能的变化。参数 描述 延迟 源端增量变更被同步至目标端的...
功能特性
多可用区部署 备份恢复 Lindorm宽表引擎支持数据备份恢复功能，基于数据生态服务中的数据迁移将数据存储至OSS中，定期全量备份数据，实时增量同步数据，来满足对数据备份和数据恢复的需求。备份恢复 产品生态 功能集 功能 功能描述 参考...
补数据
周、月任务如何执行补数据操作 补数据功能说明 补数据支持补历史一段时间区间的数据或者需要补未来一段时间的数据时，可以选择补数据功能。节点使用的调度参数会根据补数据选择的业务时间自动替换为对应的值。将MySQL增量数据写入...
数据集成概述
离线（批量）的数据通道通过定义数据来源和去向的数据源和数据集，提供一套抽象化的数据抽取插件（Reader）、数据写入插件（Writer），并基于此框架设计一套简化版的中间数据传输格式，从而实现任意结构化、半结构化数据源之间数据传输。...
数据投递
数据传输服务DTS（Data Transmission Service）提供的数据投递功能，用户可以通过SDK将各种类型的数据源投递到DTS，再由DTS同步至目标数据库，从而支持更多类型的数据源。应用场景 数据投递功能适用于以下任一场景：源端为DTS同步方案暂不...
附录：ECS自建数据库的安全组配置
添加安全组 进行ECS自建数据源的数据同步时，如果同步任务运行在：独享数据集成资源组上 需要将独享数据集成资源组的EIP地址段或独享数据集成资源组绑定的交换机网段添加至ECS安全组上。通过外网同步数据时，需获取并添加独享资源组本身的...
从RDS MySQL同步至Tablestore
表格存储（Tablestore）是阿里云自研的多模型结构化数据存储，提供海量结构化数据存储以及快速的查询和分析服务。通过数据传输服务DTS（Data Transmission Service），您可以将MySQL数据库（例如自建MySQL或RDS MySQL）同步至Tablestore...
设置可维护时间段
修改可维护时间段 登录 云数据库专属集群控制台。在页面左上角，选择目标地域。在页面左侧单击 实例列表>MySQL。找到目标实例，单击 操作 列中的 详情。在 配置信息 区域，单击 可维护时间段 后面的 设置。根据您的业务规律，选择合适的可...
添加 Oracle 数据库的白名单
操作步骤 如果您创建评估模式为 Oracle>>OceanBase Oracle Mode 的在线评估任务时，选择实例类型为 VPC 内自建数据库，请添加 OceanBase 数据评估服务器的 IP 地址段至对应数据库的白名单中。因为 VPC 实例对应的 VPC 可能在 ECS 平台进行...
添加 MySQL 数据库的白名单
添加白名单到 ECS 如果您创建评估模式为 MySQL>>OceanBase MySQL Mode 的在线评估任务时，选择实例类型为 VPC 内自建数据库，请添加 OceanBase 数据评估服务器的 IP 地址段至对应数据库的白名单中。因为 VPC 实例对应的 VPC 可能在 ECS ...
敏感数据访问及导出情况
数据访问页面为您展示基于配置规则识别出的敏感数据的访问量、访问趋势、导出量和导出明细等，帮助您掌控每一次访问敏感数据的情况。该页面E-MapReduce计算...包括查询时间段内的数据导出的总量、每天导出的数据量和数据导出总量的前五名。
Quick BI如何接入TSDB
背景信息 为避免因数据源白名单限制导致数据对接访问失败，您需将Quick BI不同网络环境下的IP地址段添加至数据源的白名单中，更多对接配置详情请参见 设置网络白名单。操作步骤 验证数据源连接并创建数据源。登录Quick BI控制台，操作详情...
产品架构
云数据库SelectDB版 存储用于存放全量数据，支持通过Stage分段批量导入数据、通过S3协议导入对象文件或者通过JDBC连接集群后执行SQL dump方式导入数据。除此之外，云数据库SelectDB版 存储 还支持响应集群的低频读写请求。
数据追踪
DMS 的数据追踪功能支持按需查找目标时间段内（数据库Binlog保存时长内）的相关更新信息，并生成回滚脚本，帮助您快速将数据恢复到变更前。前提条件 数据库类型为MySQL，且MySQL为5.6及以上版本。说明 包含已接入DMS企业版统一管理的 RDS ...
迁移或同步指定时间段内的数据
如果您想要将源HBase集群或源Lindorm实例中某个时间段的历史数据迁移至新的Lindorm实例，或想要同步实时数据到新Lindorm实例，可以在创建任务时添加相关时间参数，修改任务配置。本文介绍通过LTS控制台创建任务时配置迁移或同步时间范围的...
数据库代理主机监控详情
通过自定义筛选时间查看相应时间段内的数据。可查看如下监控数据信息：监控指标项 监控指标名 指标说明 load load1 过去1分钟系统平均负载。CPU 使用率 cpu_percent CPU 使用率，单位：百分比（%）。IO 吞吐量 io_byte 平均每秒 IO 数据量...
SQL 条件过滤数据
如果您需要过滤某个时间段内的数据，请使用 and 或 or 语句。例如，您需要过滤 2021 年 12 月 31 日至 2022 年 4 月 1 日之间的数据，请输入 `init_date`>'20211231' and `init_date`。过滤条件中需要使用英文单引号（'）。例如 `address` ...
集群数据库监控详情
通过自定义筛选时间查看相应时间段内的数据。可查看如下监控数据信息：监控指标项 监控指标名 指标说明 QPS sql_all_count 租户数据库每秒处理的 SQL 语句数量，单位：times/s。查询响应时间 sql_all_rt SQL 语句平均处理耗时，单位：ms。...
集群主机监控详情
通过自定义筛选时间查看相应时间段内的数据。可查看如下监控数据信息：监控指标项 监控指标名 说明 load load1 CPU 负载统计，最近 1 分钟的 CPU load 平均值。CPU 使用率 cpu_percent CPU 使用率，单位：百分比（%）。内存 memory_used ...
功能发布记录（2024年）
所有DataWorks用户 自动化治理-物化视图 2024-03 功能名称 描述 发布时间 发布地域 使用客户 相关文档 新版补数据功能上线 周期任务开发完成并提交发布后会按照调度配置定时运行，若您希望在指定时间段运行周期任务，可使用补数据功能。...
功能特性
SQL审核 数据追踪 支持按需查找目标时间段内（数据库Binlog保存时长内）在DMS的SQL窗口中对数据库进行变更操作的相关信息，并生成回滚脚本。数据追踪 逻辑库/表 支持将多个（或单个）物理库配置成一个逻辑库、逻辑表，轻松查询与管理复杂、...
- 产品推荐
- 这些文档可能帮助您