新建离线自定义源类型
前提条件 对于RDBMS数据库，已获取数据库驱动文件。对于其他类型数据库，获取数据源连接配置项的JSON代码和读/写插件。背景信息 RDBMS数据库即关系型数据库，如Mysql、Oracle、SqlServer等。通常，关系型数据库的链接方式一样，包括数据库...
GetDataTrackJobDegree-获取数据追踪任务进度
获取数据追踪任务进度。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 示例值 ...
开启安全访问代理
数据管理DMS的安全访问代理可以为访问数据库带来更全面的安全保障。...前提条件 支持的数据库类型：...CreateProxy-开启数据安全访问 DeleteProxy-关闭安全访问代理 ListProxies-获取安全访问代理列表 GetProxy-获取数据安全访问代理的详细信息
API概览
DescribeDataSourceParameters 获取数据源参数详情 获取数据源参数详情。DescribeDataSourceInstance 查看数据源详情 查看数据源详情。DescribeAuth 检查是否已经开通SIEM权限 检查阿里云账号是否已经给SIEM授权，已经创建了...
SDK安装与使用
获取SDK 您可以在Maven Repository中获取数据湖分析最新的SDK包，获取地址 Maven SDK地址。groupId>...
通过代理连接地址连接数据库
连接RDS MySQL实例 在获取数据库代理连接地址和端口后，支持使用数据库代理连接地址通过以下三种方式连接RDS MySQL实例：通过客户端、命令行连接RDS MySQL实例 通过DMS登录RDS数据库 通过应用程序访问数据库 相关文档 连接数据库 配置数据...
通过代理连接地址连接数据库
连接RDS PostgreSQL实例 在获取数据库代理连接地址和端口后，支持使用数据库代理连接地址连接RDS PostgreSQL实例。具体操作步骤，请参见 连接PostgreSQL实例。相关文档 连接PostgreSQL实例 配置数据库代理连接地址访问策略 相关API API ...
全量数据同步
已获取数据源的物理表，具体操作，请参见 获取物理表。RDS MySQL数据源已有ys_yhkh表作为数据同步来源表，表结构及数据获取请参见 RDS脚本。操作步骤 登录 数据资源平台控制台。在页面左上角，选择>协同。在顶部菜单栏，单击 图标，选择...
API概览
DescribeDBInstancesByExpireTime 按过期时间获取数据库实例 该接口用于通过包年包月实例的剩余可用时间查询RDS实例信息。DescribeRegions 查看可选的地域和可用区 该接口用于查询所有RDS地域的详情。CheckInstanceExist 查询实例是否存在 ...
功能特性
Flume插件 OGG插件 Canal插件 Fluentd插件 数据订阅 数据订阅 目前用户在DataHub上消费Topic数据，为了做到“断点续消费”的功能，即消费者failover重启后可以继续从failover时间点继续获取数据，需要用户自己保存当前消费的点位信息，同时...
ListDataImportSQLType-获取数据导入SQL类型
获取数据导入SQL类型。接口说明 仅支持导入模式为安全模式的数据导入工单使用此 API，不支持极速模式的数据导入使用此 API。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动...
Data API功能简介
鉴权通过则获取数据库连接，失败则直接响应失败信息。SQL参数合法性校验，验证参数类型是否合法、是否为空等。SQL参数赋值，将传入的实参赋值给对应的形参。执行SQL并获取执行结果。获取结果集并对结果集进行处理。根据用户配置，构建接口...
资源密集活动统计（pg_profile）
RDS PostgreSQL支持使用pg_profile插件来统计数据库中资源密集型活动，用于分析优化数据库。插件简介 此扩展基于PostgreSQL的统计视图（pg_stat_statements）和社区插件（pg_stat_kcache），完全使用PL/pgSQL编写，无需任何外部库或软件，...
GetDataImportSQL-获取数据导入的SQL
获取数据导入的SQL。接口说明 仅支持导入模式为安全模式的数据导入工单使用此 API，不支持极速模式的数据导入使用此 API。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动...
数据模型架构规范
良好的数据模型可以帮助我们更好地存储数据，更有效率地获取数据，保证数据间的一致性。模型设计的基本原则 高内聚和低耦合 一个逻辑和物理模型由哪些记录和字段组成，应该遵循最基本的软件设计方法论中的高内聚和低耦合原则。主要从数据...
配置ArgoDB输入组件
分区 如果所选的来源表是分区表，那么需要填写分区信息，如 state_date=‘20190101’,也支持参数的方式以便每天增量获取数据，如 state_date=${bizdate}。文件编码 根据实际数据情况，选择编码格式。支持 UTF-8 和 GBK。压缩格式 非必填项...
GetDataTrackOrderDetail-获取数据追踪工单详情
获取数据追踪工单详情。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 示例值 ...
API概览
DescribeDBInstancesByExpireTime 按过期时间获取数据库实例 该接口用于通过包年包月实例的剩余可用时间查询RDS实例信息。DescribeRegions 查看可选的地域和可用区 该接口用于查询所有RDS地域的详情。CheckInstanceExist 查询实例是否存在 ...
使用SDK示例代码消费PolarDB-X 1.0订阅数据
在DTS控制台单击目标订阅实例ID，在 基本信息 页面，您可以获取数据订阅实例的 任务实例ID。jobId 数据订阅任务ID。您可以调用 DescribeDtsJobs 接口获取数据订阅任务ID（DtsJobId）。sid 消费组ID。在DTS控制台单击目标订阅实例ID，然后...
API概览
DescribeDBInstancesByExpireTime 按过期时间获取数据库实例 该接口用于通过包年包月实例的剩余可用时间查询RDS实例信息。DescribeRegions 查看可选的地域和可用区 该接口用于查询所有RDS地域的详情。CheckInstanceExist 查询实例是否存在 ...
数据归档概述
当线上数据库中的历史数据（访问率很低的数据）越来越多，占用的存储越来越大，以至于会...相关API CreateDataArchiveOrder-创建数据归档工单 GetDataArchiveOrderDetail-获取数据归档工单详情 GetDataArchiveCount-获取数据归档工单量统计
常见问题
本文介绍购买数据安全中心前的常见...如何满足安全性要求 在获取数据库授权的情况下，数据安全中心会以数据采样的方式进行敏感数据识别，不会对数据库中的数据进行保存。数据安全中心是否支持统一管理跨阿里云账号的数据资源？目前暂不支持。
常用管理
报错类型 说明 组件数据获取失败 组件请求数据源发生错误时，产生该报错。数据源的请求可能发生在组件首次加载时、组件自动更新时和全局变量触发更新时等。过滤器执行错误 组件请求数据源成功返回数据后，经过过滤器时产生报错，将记录为...
数据字典
SELECT name,type,key,attribute.names,attribute.types,bytes_allocated,element_count,source FROM system.dictionaries 查询字典数据 使用dictGet语句结合函数获取数据字典中的数据。dictGet('dict_name','attr_name',id_expr)或 ...
同步时源库为Db2 for LUW的注意事项及限制
说明 如为增量同步任务，DTS要求源数据库的数据日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志...
分片集群实例连接说明
获取数据库连接地址 登录 MongoDB管理控制台。在左侧导航栏，单击 分片集群实例列表。在页面左上角，选择实例所在的资源组和地域。单击目标实例ID或目标实例所在行 操作 列的 管理。在目标实例页面的左侧导航栏，单击 数据库连接。获取目标...
简介
通过Web/钉钉等多个渠道，利用开发人员构建的查数Agent，以自然语言交互方式获取数据，实现0代码操作，只需提出问题即可获得所需结果。低门槛自助用数，专注业务决策。无需排队，无需等候，Agent全天提供服务。相关文档 快速入门 新建项目...
使用HBase Shell
ROW COLUMN+CELL r1 column=cf1:q1,timestamp=2022-09-14T16:06:34.339,value=v1 r2 column=cf1:q1,timestamp=2022-09-14T16:06:36.615,value=v3 2 row(s)获取数据 运行 get 命令获取单个行（row）或单元格（cell）的数据。您可以根据需求...
配置数据源
开发数据服务API时，数据服务将访问该数据源获取数据表的Schema信息，帮助您进一步设置请求和返回参数。本文为您介绍如何配置数据源。前提条件 为了保障数据源和服务资源组之间的正常数据访问，需要完成网络连通与白名单的配置，否则将无法...
需求分析
业务背景 为了更好的制定企业经营策略，现需要从用户网站行为中获取网站用户群体基本画像数据，例如，用户群体地理属性、社会属性等，实现定时定点进行画像分析，进而实现网站流量精细化运营操作。步骤一：了解已有业务数据 实际操作前，请...
需求分析
业务背景 为了更好的制定企业经营策略，现需要从用户网站行为中获取网站用户群体基本画像数据，例如，用户群体地理属性、社会属性等，实现定时定点进行画像分析，进而实现网站流量精细化运营操作。步骤一：了解已有业务数据 实际操作前，请...
配置资源组与网络连通
获取数据库需要添加的白名单详情请参见：添加白名单。步骤二：添加白名单 无论上述哪种场景，如果数据源存在白名单访问控制，您都需要将资源组绑定的交换机网段或独享资源组本身EIP添加至数据源白名单中。通过内网同步，请添加独享资源组...
添加Open API数据源
在DataV中，最常见的场景是使用Open API调用其他的云产品的API，获取数据并展示出来。前提条件 已准备好待添加的Open API数据源。添加Open API数据源操作步骤 登录 DataV控制台。在 工作台 页面，单击 数据准备>数据源，进入 数据源 页面，...
副本集实例连接说明
获取数据库连接地址 登录 MongoDB管理控制台。在左侧导航栏，单击 副本集实例列表。在页面左上角，选择实例所在的资源组和地域。单击目标实例ID或目标实例所在行 操作 列的 管理。在目标实例页面的左侧导航栏，单击 数据库连接。连接地址...
添加Open API数据源
在DataV中，最常见的场景是使用Open API调用其他的云产品的API，获取数据并展示出来。前提条件 已准备好待添加的Open API数据源。添加Open API数据源操作步骤 登录 DataV控制台。在 我的数据 页签中选择 数据源管理，单击 添加数据。从 ...
缓冲区管理
访问数据页时，会从该映射关系中获取数据页需要回放的所有LSN，依次回放对应的WAL日志，最终生成需要使用的数据页。数据页上的修改越多，其对应的LSN也越多，回放所需耗时也越长。为了尽量减少数据页需要回放的LSN数量，PolarDB 引入了一致...
F(x)
返回Excel对象<Excel>调用样例-rpa.app.microsoft.excel.open-#注意事项：使用前需确认已安装MicroSoft相关软件#代码调用样例如下：excel_file_path=r"D:\2_测试文件归档\测试Excel.xlsx"excel=rpa.app.microsoft.excel.open(excel_file_...
F(x)
dispatch使用office或wps打开 返回值说明 返回Excel对象<Excel>调用样例-rpa.app.wps.excel.open-#注意事项：使用前需确认已安装WPS相关软件#代码调用样例如下：excel_file_path=r"D:\2_测试文件归档\测试Excel.xlsx"excel=rpa.app.wps....
功能特性
自建MySQL同步至RDS MySQL 数据订阅 数据订阅功能可以帮助您获取数据库的实时增量数据，您可以根据自身业务需求自由消费增量数据，并写入目标端，实现各类业务场景，例如缓存更新、业务异步解耦、异构数据源数据实时同步及含复杂ETL的多种...
增量数据同步
已获取数据源的物理表，具体操作，请参见 获取物理表。RDS MySQL数据源已有ys_yhkh表作为数据同步来源表，表结构及数据获取请参见 RDS脚本。操作步骤 登录 数据资源平台控制台。在页面左上角，选择>协同。在顶部菜单栏，单击 图标，选择...
- 产品推荐
- 这些文档可能帮助您