数据库自治服务的审计事件
GetPartitionsHeatmap 获取数据库的分区热度信息。GetPerformanceInsightAggMetrics 查询性能洞察聚合后的结果。GetPerformanceInsightMetrics 获取性能洞察的指标数据。GetPerformanceInsightSpecMetricTrend 获取某个指标的趋势图。...
ETL工作流快速体验
GitHub十大热门编程语言 DataWorks MaxCompute 函数计算 OSS 数据集成 数据开发 基于GitHub Archive公开数据集，通过DataWorks 数据集成 模块获取过去1小时GitHub中提交次数最多的代码语言数据，在DataStudio 数据开发 模块通过函数计算...
数据表
已获取数据表资产“dws_ren_kh_demo_di（银行客户信息表）”，具体操作，请参见 数据表。操作步骤 登录 数据资源平台控制台。在顶部菜单栏，单击（我的资产）。在左侧导航栏，选择 资产明细>我已授权的＞数据表。在 我已授权 的数据表页面...
SSL连接RDS PostgreSQL数据库
端口号 默认5432，如果您修改过，通过 数据库连接 页面获取。数据库名 postgres是RDS实例默认的系统数据库，请勿在该数据库中进行任何操作。如果您需要连接RDS实例下创建的其他数据库，可从 数据库管理 页面获取。JDBC SSL连接 下载如下...
数据导入方式介绍
通过外表常规导入MaxCompute数据 通过外表常规导入HDFS数据 通过外表常规导入OSS数据 通过外表常规导入RDS MySQL数据 弹性导入 仅内核版本3.1.10.0及以上且已创建Job型资源组的 湖仓版（3.0）集群支持弹性导入数据。弹性导入可以大幅减少...
审计经典网络数据库实例
操作步骤 获取数据库审计系统所在VPC的实例ID。登录数据库审计系统。具体操作请参见 登录数据库审计系统。选择 系统管理>Agent管理。单击 Agent安装 页签，查看该数据库审计系统所在的VPC实例ID。创建经典网络中的ECS实例到数据库审计系统...
LogHub（SLS）实时ETL同步至Hologres
在 数据输出预览 窗口，您可以根据需要修改输入数据，或单击 手工构造数据 按钮自定义输入数据，再单击 预览 按钮，查看当前数据处理节点对数据的处理结果，当数据处理节点对输入数据处理异常，或产生脏数据时，也会反馈出异常信息，能够...
概述
Exec Source：通过监听命令行输出获取数据，例如 tail-f/var/log/messages。NetCat TCP Source：监听指定TCP端口获取数据，与Netcat UDP Source类似。Taildir Source：监控目录下的多个文件，记录偏移量，并且不会丢失数据，较为常用。...
添加白名单
保障资源组与数据源之间网络连通后，您还需保障资源组与数据源之间不会因为白名单的限制而无法进行数据访问，例如，部分数据源设置白名单后会不允许白名单外的IP访问，您需要将资源组的IP添加至数据源的白名单中。本文为您介绍白名单相关...
使用SDK示例代码消费PolarDB-X 1.0订阅数据
在DTS控制台单击目标订阅实例ID，在 基本信息 页面，您可以获取数据订阅实例的 任务实例ID。jobId 数据订阅任务ID。您可以调用 DescribeDtsJobs 接口获取数据订阅任务ID（DtsJobId）。sid 消费组ID。在DTS控制台单击目标订阅实例ID，然后...
DBCP 连接池连接 OceanBase 数据库示例程序
本文将介绍如何使用 DBCP 连接池、MySQL Connector/J 和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入、删除、...Main.java 代码介绍 Main.java 文件是示例程序的一部分，用于演示通过 DBCP 连接池获取数据库...
通过DMS连接MongoDB分片集群实例
通过DMS获取MongoDB数据库列表后，您可以更加方便快捷地远程访问、在线管理您的MongoDB数据库。准备工作 根据MongoDB实例的网络类型，将DMS服务器的IP地址加入至MongoDB实例的白名单中，详情请参见 设置白名单。说明 如您已经将DMS服务器的...
常见问题
网络与连接 如何获取Redis实例的连接地址和实例ID 如何通过redis-cli连接Redis 云数据库Redis版支持Jedis等通用的Redis客户端吗？连接Redis实例需要在ECS上安装Redis吗？连接云数据库Redis实例必须要密码吗？Redis连接问题排查流程 ECS实例...
API概览
DescribeDistributeTableList 获取数据库表列表。ModifyDatabaseDescription 修改数据库描述。DescribeDbList 查看实例下的数据库详情。地域 DescribeRegions 查看支持的地域和可用区。账号管理 CreateAccount 创建普通账号。...
通过DMS连接MongoDB副本集实例
通过DMS获取MongoDB数据库列表后，您可以更加方便快捷地远程访问、在线管理您的MongoDB数据库。准备工作 根据MongoDB实例的网络类型，将DMS服务器的IP地址加入至MongoDB实例的白名单中，详情请参见 设置白名单。如需连接MongoDB的只读节点...
混访混挂迁移示例
更多信息，请参加 搭建IPv4专有网络 获取RDS和OSS的专有网络访问域名。您可以通过控制台或API将RDS的网络类型切换至专有网络，并选择保留经典网络地址。更多信息，请参见 云数据库RDS版网络切换 迁移后，经典网络的访问地址不变，会新增...
使用SDK示例代码消费PolarDB-X 1.0订阅数据
在DTS控制台单击目标订阅实例ID，在 任务管理 页面，您可以获取数据订阅任务的实例ID和任务ID。jobId 数据订阅任务ID。sid 消费组ID。在DTS控制台单击目标订阅实例ID，然后单击 数据消费，您可以获取到 Sid 和消费组的 账号 信息。说明 ...
添加ClickHouse数据源
数据库 单击 获取数据列表，系统会自动获取当前所选数据库中所有的数据列表。数据库信息填写完成后，系统会自动进行测试连接，验证数据库是否能连通正常。重要 当数据库测试连接时，出现报错信息Access VPC instance fail 后，您可以在实例...
网络连通解决方案
添加数据源时需要根据数据源所在网络环境，通过对应的网络解决方案，实现Dataphin与数据源的网络连通。本文为您介绍数据源在不同网络环境中与Dataphin的网络连通方案。网络连通方案 根据数据源所在的网络环境，在下图中选择对应的网络连通...
订阅方案概览
数据订阅功能可以帮助您获取数据库的实时增量数据，您可以根据自身业务需求自由消费增量数据，并写入目标端，实现各类业务场景，例如缓存更新、业务异步解耦、异构数据源数据实时同步及含复杂ETL的多种业务场景。数据订阅方案 说明 是否...
订阅方案概览
数据订阅功能可以帮助您获取数据库的实时增量数据，您可以根据自身业务需求自由消费增量数据，并写入目标端，实现各类业务场景，例如缓存更新、业务异步解耦、异构数据源数据实时同步及含复杂ETL的多种业务场景。数据订阅方案 说明 是否...
ECS应用角色（EMR 3.32及之前版本和EMR 4.5及之前版本...
dlf:BatchGetTables 批量获取数据表列表。dlf:BatchUpdatePartitions 批量更新分区信息。dlf:BatchUpdateTables 批量更新数据表。dlf:CreateDatabase 创建数据库。dlf:CreateFunction 创建函数。dlf:CreatePartition 创建分区。dlf:...
添加实时数仓Hologres数据源
选择内网数据库的网络类型（包括 专有网络 和 经典网络）。专有网络 打开 VPC 开关，进入 专有网络 模式。填写数据库信息。参数 说明 VPC ID Hologres实例绑定的指定VPC的VPC ID。进入 Hologres管理控制台 的实例详情页，从 网络信息 的...
云数据库MongoDB版数据安全最佳实践
通过审计日志，您可以对数据库进行故障分析、行为分析、安全审计等操作，有效帮助您获取数据的执行情况。具体操作方法请参见 查询审计日志。数据加密 SSL链路加密 通过公网连接数据库时，您可以启用SSL（Secure Sockets Layer）加密功能...
ListDataImportSQLType-获取数据导入SQL类型
获取数据导入SQL类型。接口说明 仅支持导入模式为安全模式的数据导入工单使用此 API，不支持极速模式的数据导入使用此 API。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动...
GetDataImportSQL-获取数据导入的SQL
获取数据导入的SQL。接口说明 仅支持导入模式为安全模式的数据导入工单使用此 API，不支持极速模式的数据导入使用此 API。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动...
AnalyticDB MySQL 2.0数据导入
通过控制台 集群信息 页面中的 网络信息 区域获取连接地址。将 AnalyticDB for MySQL 2.0集群的数据库账号（AccessKey ID）和密码（AccessKey Secrect）更换为 数仓版（3.0）集群的数据库账号和密码。查看 数仓版（3.0）数据库账号和密码的...
DTS订阅通道
数据源参数 通过数据传输服务DTS控制台获取数据源参数。单击目标DTS任务在 任务管理 页面获取以下参数：topic：DTS订阅Topic名称（图示中①）。proxyAddr：DTS订阅地址（图示中②）。单击目标DTS任务在 数据消费 页面获取以下参数：sid：...
迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库...
项目启动成功后，PolarDB-X 1.0 数据库至 OceanBase 数据库 MySQL 租户的数据迁移项目会自动删除，数据传输会保存 PolarDB-X 1.0 数据库下挂载的数据库至 OceanBase 数据库 MySQL 租户的数据迁移项目，并自动创建相应的数据源。您可以在弹...
数据上传
DataWorks的数据上传功能支持将本地文件、数据分析的电子表格、OSS文件等数据上传至MaxCompute、EMR Hive、Hologres等引擎进行分析及管理，为您提供便捷的数据传输服务，助力您快速实现数据驱动业务。本文为您介绍如何使用数据上传功能上传...
添加DTS数据源
数据源参数 通过数据传输服务DTS控制台获取数据源参数。单击目标DTS任务在 任务管理 页面获取以下参数：topic：DTS订阅Topic名称（图示中①）。proxyAddr：DTS订阅地址（图示中②）。单击目标DTS任务在 数据消费 页面获取以下参数：sid：...
QlikView
本文介绍如何通过QlikView连接 AnalyticDB MySQL 集群并通过QlikView构建BI系统。前提条件 安装ODBC MySQL Driver，...使用QlikView 在QlikView中获取数据库数据后，您可以利用QlikView进行更多数据操作。如何使用QlikView，请参见 QlikView。
产品优势
数据库网关提供安全，可靠，低成本的数据...全生态服务 通过数据库网关，各种数据库产品将逐步接入，实现跨云和云上云下的全生态服务（如数据库迁移、容灾、跨库JOIN、数据分析、数据安全等能力），让您享受云端数据库产品带来的一致性服务。
查看连接地址
本文介绍通过 云原生多模数据库 Lindorm 控制台查看流引擎类的连接地址。前提条件 已开通 云原生多模数据库 Lindorm 的流引擎，具体操作请参见 开通流引擎。...相关文档 通过Kafka写入数据 通过开源Kafka客户端写入Lindorm流引擎数据
排查订阅任务问题
说明 如果您部署SDK客户端所属的ECS实例与数据订阅通道属于经典网络或同一专有网络，建议通过内网地址进行数据订阅，网络延迟最小。在DTS控制台单击目标订阅实例ID，在 任务管理 页面，您可以获取网络地址及端口号信息。topic 数据订阅通道...
DataV连接
因此您需要通过 DescribeDBInstanceNetInfo-查看实例的连接地址信息 接口获取DataV需要的 AnalyticDB PostgreSQL版 VPC实例ID。域名 AnalyticDB PostgreSQL版 的连接地址。根据网络类型，选择对应的连接地址。在 基本信息 页面的 数据库...
服务关联角色
AliyunServiceRoleForDDI应用场景 Databricks数据洞察集群创建及数据源绑定功能需要访问 云服务器ECS、专有网络VPC 等云服务的资源时，需要通过服务关联角色AliyunServiceRoleForDDI获取访问权限。AliyunServiceRoleForDDI权限说明 ...
如何降低云服务器ECS与RDS PostgreSQL间的网络延迟
如果您的业务是建立在云服务器ECS上，并且通过内网连接RDS PostgreSQL数据库，在正常使用中发现延迟升高异常时，请参考本文指导降低云服务器ECS与RDS PostgreSQL间的网络延迟。查看内网延迟 登录 ECS实例列表，在上方选择地域，单击目标...
Tunnel命令常见问题
解决措施 在上传的过程中，先获取数据，再调用Tunnel SDK上传数据。一个Block可以上传64 MB~100 GB的数据，最好不要超过1万条数据以免因重试导致超时。一个Session可以拥有最多2万个Block。如果您的数据在ECS上，Endpoint信息请参见 ...
通过数据订阅实现缓存更新策略
说明 如果您部署SDK客户端所属的ECS实例与数据订阅通道属于经典网络或同一专有网络，建议通过内网地址进行数据订阅，网络延迟最小。在DTS控制台单击目标订阅实例ID，在 基本信息 页面的 网络 区域，您可以获取网络地址及端口号信息。topic ...
- 产品推荐
- 这些文档可能帮助您