API概览
本产品（数据库自治服务/2020-01-16）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，...
GetAsyncErrorRequestStatResult-获取指定SQL的执行...
调用GetAsyncErrorRequestStatResult接口，异步获取数据库实例SQL洞察结果中指定SQL的执行错误次数。接口说明 说明 异步调用后不会立即返回完整结果，当返回数据中 isFinish 取值为 false 时，请等待 1s 后重新发起调用，直到 isFinish ...
Hologres维表
async 是否异步读取数据。异步模式可以并发地处理多个请求和响应，从而连续的请求之间不需要阻塞等待，提高查询的吞吐。但在异步模式下，无法保证请求的绝对顺序。否 async 参数的取值如下：false（默认值）true 说明 有关异步请求的原理请...
SQL洞察
注意事项 SQL洞察功能中分析和统计数据（不包括SQL明细数据）的存储时长最长为90天：如果对应实例DAS 企业版 设置的存储时长小于等于90天，则SQL洞察功能中分析和统计数据（不包括SQL明细数据）的存储时长以DAS 企业版 设置的存储时长为准...
应用开发概览
规划数据库对象 二级目录 文档名称 规划数据对象 创建数据库 创建表 创建索引 数据写入 二级目录 文档名称 数据写入 插入数据 更新数据 删除数据 替换数据 数据读取 二级目录 文档名称 文档名称 数据读取 关于查询 单表查询 条件查询 排序...
API概览
Token API 标题 API概述 GetToken 获取加载架构图token（不推荐使用）获取读取架构图的临时授权，有效期30分钟。模板 API 标题 API概述 GetTemplate 获取模板信息 获取模板图片及架构图相关信息。ListTemplate 查询模板列表 获取模板列表，...
API概览
文档管理 API 标题 API概述 文档转换同步请求 文档转换同步请求 ConvertOfficeFormat 文档（例如OFFICE文档）格式的转换 采用同步请求方式进行文档（例如Office文档）格式的转换，执行完毕返回转换成功的页数。文档转换异步请求 文档转换...
数据源概述
DataWorks的数据源用于连接不同的数据存储服务。在配置数据集成同步任务之前，您需要首先定义好同步任务的源端和目的端数据源...相关文档 数据源配置，详情请参见 支持的数据源及同步方案。数据源的权限管理，详情请参见 RAM角色授权模式。
流式数据通道概述
MaxCompute流式数据通道服务提供了以流式的方式把数据写入MaxCompute的能力，使用与原批量数据通道服务不同的一套全新的API及后端服务。流式服务在API上极大简化了分布式服务的开发成本，同时解决了批量数据通道在高并发、高QPS（Queries-...
GenerateDISyncTaskConfigForUpdating
调用GenerateDISyncTaskConfigForUpdating接口，异步生成更新数据集成同步任务的异步线程ID。后续您需要通过该ID，调用 QueryDISyncTaskConfigProcessResult 接口获取异步生成更新数据集成同步任务需要的参数，通过该参数更新数据集成同步...
写入数据
异步非阻塞写数据的回调设置 当您使用异步写数据的方式时，若需要获取 Put 接口的响应结果，则需要设置回调接口。示例代码 final AtomicLong num=new AtomicLong();回调对象 BatchPutCallback cb=new BatchPutCallback(){@Override public ...
TSDBConfig
boolean isAsyncPut()获取是否异步写数据。boolean isHttpCompress()获取是否压缩传输数据。从类继承的方法 java.lang.Object clone,equals,finalize,getClass,hashCode,notify,notifyAll,toString,wait。构造器详细资料 TSDBConfig public...
使用数据镜像保护尚未写入完整的数据
使用场景 创建数据镜像，可确保在数据大批量写入更新期间，所有读请求从数据镜像获取数据。从而确保数据在完整写入前不会被应用程序读取到。数据镜像的读取性能与先前非镜像数据的读取性能完全保持一致。说明 数据更新完成后，可将数据正式...
数据库自治服务的审计事件
数据库自治服务已与操作审计服务集成，您可以在操作审计中查询用户操作数据库自治服务产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了...
DeleteOfficeConversionTask-删除异步文档格式转换...
调用DeleteOfficeConversionTask接口删除异步文档格式转换任务。接口说明 此接口已不再维护，建议使用 新版（2020-09-30 版本）API。关于新版与旧版 API 的对比，请参见 新旧版本使用指引 中的 新版与旧版 API 对应关系说明章节。调试 您...
后续指引
说明 相关文档 数据迁移 上传下载数据 MaxCompute提供Tunnel批量数据通道、Streaming Tunnel流式数据写入通道和DataHub实时数据通道三种数据上传下载的通道，同时还支持基于DataHub和Tunnel提供的SDK实现上传下载数据，满足多样化场景需求...
通过实时计算订阅数据
订阅DataHub数据进行实时计算，插入到RDS实例的目标表中。在RDS数据库中，按照源表结构创建相应的表。参考 数据存储配置白名单，配置RDS数据库白名单。由于本案例的RDS数据库位于华东1区，而流计算项目位于华东2区，所以需要在RDS数据库中...
RDS实例数据复制方式非异步同步
RDS实例数据复制方式非异步，视为“合规”。异步数据复制方式容易引起主备节点数据不一致，建议使用半同步或强同步方式。应用场景 异步复制的RDS实例数据性能好，但可能会出现数据不一致的情况。同步复制的RDS实例数据可以保证主实例和备...
RestAPI Reader最佳实践
数据集成RestAPI Reader插件提供了读取RESTful接口数据的能力，通过配置HTTP请求地址，可获取RestAPI类型的数据源数据（例如获取时间范围内的数据、获取分页数据、循环请求参数获取数据等），并转换为数据集成支持的数据类型，传递给下游...
产品架构
DTS使用增量数据读取模块来获取全量数据迁移过程中发生的数据更新。当全量数据迁移开始时，增量数据读取模块将被激活。在全量数据迁移阶段，增量数据会被解析、重新格式化并存储在本地DTS服务器上。增量数据迁移：当全量数据迁移完成后，...
查看数据复制方式
本文介绍如何查看RDS SQL Server主备实例之间的数据复制方式。使用限制 仅 高可用系列 和 集群系列 的实例支持查看数据复制方式。暂不支持修改数据复制方式。复制方式介绍 同步 应用发起的更新在主实例执行完成后，会将日志同步传输到备...
功能特性
Datahub数据总线 功能集 功能 功能描述 参考文档 数据接入 API接入 使用REST API方式，将数据写入Datahub API参考 SDK接入 使用SDK将数据传入Datahub Java SDK C++ SDK Go SDK Python SDK 插件接入 使用插件将数据传入Datahub LogStash插件...
修改数据复制方式
您可以根据自身业务特点，设置MyBase MySQL主备实例之间的数据复制方式，以提高数据库可用性。前提条件 实例要求如下：MySQL 8.0高可用版（本地SSD盘）MySQL 5.7高可用版（本地SSD盘）MySQL 5.6高可用版（本地SSD盘、ESSD云盘）复制方式...
云监控报警
应用实时处理延迟 主表数据当前更新延迟时间 应用实时每秒读入文档数 每秒从数据源或API读取的文档数 应用实时每秒写出文档数 实时同步时，经过数据处理后（join/插件处理），每秒写出到引擎的文档数 应用附表每秒触发主表文档数 每秒钟...
BLOB数据类型（邀测中）
} 数据读取 Lindorm支持以下两种方式读取BLOB列的数据：方式一：一次性读取一行数据中整个BLOB列的全部内容，并保存至一个字节数组中。直接读取整个BLOB列的完整内容 ResultSet resultSet=stmt.executeQuery("select*from"+tableName+...
云监控报警
应用实时处理延迟 主表数据当前更新延迟时间 应用实时每秒读入文档数 每秒从数据源或API读取的文档数 应用实时每秒写出文档数 实时同步时，经过数据处理后（join/插件处理），每秒写出到引擎的文档数 应用附表每秒触发主表文档数 每秒钟...
版本发布记录
config.xml参数修改 2020年08月 功能名称 描述 相关文档 数据均衡扩容 保证增加集群节点时数据分布均匀，避免数据倾斜问题。无 请求查询管理 请求查询管理功能，支持慢SQL定位和运行请求中断。查询管理SQL 新增4core 16G规格 新增4Core16G...
数据导入概览
从阿里云对象存储OSS导入数据至图数据库GDB实例 图数据库GDB服务端集成有数据导入模块，可以获取您提供的.csv格式的OSS数据文件，并将其解析为图中的点数据和边数据，然后将点数据和边数据导入至图数据库GDB实例。步骤 步骤说明 ① 将需要...
配置Greenplum输入组件
同步Greenplum数据源的数据至其他数据源的场景中，您需要先配置Greenplum输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置Greenplum输入组件。操作步骤 请参见 离线管道组件开发入口，进入离线管道脚本的开发页面...
GenerateDISyncTaskConfigForCreating
调用GenerateDISyncTaskConfigForCreating接口，异步生成创建数据集成同步任务的异步线程ID。后续您需要通过该ID，调用 QueryDISyncTaskConfigProcessResult 接口获取异步生成创建数据集成同步任务需要的参数，通过该参数创建数据集成同步...
配置Greenplum输入组件
同步Greenplum数据源的数据至其他数据源的场景中，您需要先配置Greenplum输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置Greenplum输入组件。操作步骤 请参见 离线管道组件开发入口，进入离线管道脚本的开发页面...
配置ArgoDB输入组件
同步ArgoDB数据源的数据至其他数据源的场景中，您需要先配置ArgoDB输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置ArgoDB输入组件。使用限制 ArgoDB输入组件支持数据格式为orc、parquet、text、holodesk、rc、seq...
设置异步通知
本文介绍如何设置异步通知功能。通过邮件推送服务器发送邮件请求后,投递结果将按照您在消息服务中设置的事件通知规则发送至消息服务的接收终端（HTTP、消息队列、主题）中，您可以使用消息服务的接收终端异步获取投递结果。重要 设置异步...
概述
分类 任务类型 描述 相关文档 数据集成 DTS数据迁移 实现跨库、全量、单表或整库的数据迁移，迁移的类型包括数据和结构。配置DTS数据迁移节点 离线数据集成 用于数据迁移、数据传输等场景，实现数据源之间的数据同步。配置离线数据集成节点...
数据集成
功能介绍 功能描述 相关文档 数据集成离线同步，通过读取插件与写入插件实现数据的读取与写入，并且支持在DataWorks新建数据源，通过数据源名称决定同步数据的来源与去向。支持的数据源与读写插件 离线同步能力说明 在DataWorks新建数据源...
通过缓存优化性能
Delta缓存通过使用快速中间数据格式在节点的本地存储中创建远程文件的副本来加速数据读取。每当需要从远程位置获取文件时，数据都会自动缓存。然后在本地的连续读取上述数据，从而显著提高读取速度。说明 详细内容可参考Databricks官网文章...
数据源读取时间超时的优化思路
DataV数据可视化产品主要用于动态、实时数据展示场景，需要对数据高频实时查询，对数据访问性能有一定要求。如果您的数据源访问经常超时，则需要从整体数据架构上做一定的优化。本文介绍导致DataV读取数据源超时的常见原因和解决方法。使用...
开发管控：管理者
功能点 说明 相关文档 数据脱敏 是否对敏感数据进行脱敏。启用该功能后，当在DataWorks中运行代码后返回的数据命中了脱敏规则，DataWorks会对显示的数据做脱敏处理。说明 DataWorks内置了数据脱敏规则，您也可以通过数据保护伞自定义脱敏...
数据源读取时间超时的优化思路
DataV数据可视化产品主要用于动态、实时数据展示场景，需要对数据高频实时查询，对数据访问性能有一定要求。如果您的数据源访问经常超时，则需要从整体数据架构上做一定的优化。本文介绍导致DataV读取数据源超时的常见原因和解决方法。使用...
使用限制
使用NimoShake将Amazon DynamoDB迁移至阿里云 使用MongoDB工具将MongoDB Atlas迁移至阿里云 使用DTS将MongoDB Atlas数据库迁移至阿里云 使用DTS将华为云文档数据库迁移至阿里云 使用DTS将腾讯云MongoDB增量迁移至阿里云 使用DTS将腾讯云...
- 产品推荐
- 这些文档可能帮助您