UNI_HASH
同一个键值分到的分库会随着分表数的变化而改变。两张逻辑表需要根据同一个拆分键进行分库分表，但分表数不同。当两张表按该拆分键进行JOIN时，不会出现跨库JOIN的情况。当两张表按该拆分键进行JOIN时，会出现跨库JOIN的情况。假设有2个...
UNI_HASH
同一个键值分到的分库会随着分表数的变化而改变。两张逻辑表需要根据同一个拆分键进行分库分表，但分表数不同。当两张表按该拆分键进行JOIN时，不会出现跨库JOIN的情况。当两张表按该拆分键进行JOIN时，会出现跨库JOIN的情况。假设有2个...
一键诊断
在数据库出现故障时，您可以利用一键诊断功能，快速诊断选定时间段内数据库性能情况，直观地查看数据库性能情况的全貌，快速定位异常原因。前提条件 实例为如下版本：RDS MySQL 8.0 高可用系列或集群系列 RDS MySQL 5.7 高可用系列或集群...
数据库代理常见问题
如果您在使用RDS MySQL数据库代理过程中存在疑问或遇到问题，可以参考本文查看解决方案。目录 什么是数据库代理？通用型代理和独享型代理有什么区别？数据库代理是否占用主实例的QPS或者TPS？数据库代理地址和常规地址是否是一个地址？开通...
自动/手动主备切换
A：在发生异常触发高可用切换时，应用端长连接可能无法感知到连接状态变化，如果没有设置socket超时时间，应用程序会一直等待数据库返回结果，通常会等到几百秒后才会断连，期间数据库的部分连接无法正常工作，SQL会出现大量执行异常。...
一键诊断
在数据库出现故障时，您可以利用一键诊断功能，快速诊断选定时间段内数据库性能情况，直观地查看数据库性能情况的全貌，快速定位异常原因。前提条件 目标数据库引擎为：RDS MySQL MyBase MySQL 自建MySQL 目标数据库实例已经接入DAS，详情...
概述
数据湖构建可以帮助用户快速构建云上数据湖，采用统一的管理视角治理数据湖。本产品目前处于公测阶段，您可以随时开通使用，目前数据湖构建所有功能均为免费使用阶段。用户使用流程 数据湖构建将帮助您快速简洁抽取源数据到统一数据湖的...
CreateDatabase-新增元数据库
在数据湖元数据中创建一个新的元数据库。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的...
强一致分布式事务
备份恢复的一致性 传统关系型数据库一般会采用数据库的全量备份来保证数据安全。在遇到数据异常、数据库被删的风险时，需要通过数据库的备份集进行快速恢复，其中数据恢复也要保证事务的一致性。另外，分布式数据库通常数据存储规模更大，...
Partition
名称 类型 描述 示例值 object Partition CreateTime integer 创建时间，Unix 时间戳秒数 1608730999 DatabaseName string 元数据库名称 database_test LastAccessTime integer 上一次访问分区的时间 1608730999 LastAnalyzedTime integer ...
DeleteFunction-删除元数据库的函数
根据名称删除数据湖元数据库的用户自定义函数。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略...
查询授权
本文档主要为您说明如何进行查询已有的数据授权信息。...资源类型：包括元数据表、元数据库、元数据列三种类型。资源名称：指定具体的资源名称，如数据库的库名。数据权限：授权的权限名称，关于权限描述可参考 权限配置。
Hive元数据基本操作
在 表管理 页面的中间区域，单击已创建的元数据库。单击右上角的 新建表。在 新建表 对话框中，配置各项参数。配置项 操作 表名 表名称。字段分隔符 从 字段分隔符 中选择分隔符或者自定义。外部表 默认不选中。需要创建外部表时，执行以下...
CreateFunction-新增元数据库的函数
新增数据湖元数据库的用户自定义函数。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 ...
管理集群
背景信息 关于 专属集群MyBase 的更多介绍，请参见 什么是云数据库专属集群MyBase。查看集群信息 登录 云数据库专属集群控制台。在页面左上角，选择目标地域。在 专属集群列表 页面，查看专属集群信息，或者将信息下载到本地。默认展示 专...
管理集群
背景信息 关于 专属集群MyBase 的更多介绍，请参见 什么是云数据库专属集群MyBase。查看集群信息 登录 云数据库专属集群控制台。在页面左上角，选择目标地域。在 专属集群列表 页面，查看专属集群信息，或者将信息下载到本地。默认展示 专...
UpdateFunction-更新元数据库的函数
根据名称，更新数据湖元数据库的用户自定义函数信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM...
主备切换
RDS在发生异常触发高可用切换时，应用端长连接可能无法感知到连接状态变化，如果没有设置socket超时时间，应用程序会一直等待数据库返回结果，通常会等到几百秒后才会断连，期间数据库的部分连接无法正常工作，SQL会出现大量执行异常。...
创建TDH Inceptor数据源
通过创建TDH Inceptor数据源能够实现Dataphin读取TDH Inceptor的业务数据或向TDH Inceptor写入数据。本文为您介绍如何创建TDH Inceptor数据源。使用限制 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源...
数据湖加速查询
基于阿里云数据湖构建（Data Lake Formation，DLF）和对象存储（Object Storage Service，OSS）推出的Hologres数据湖加速服务，提供了灵活的数据访问和分析能力以及高效的数据处理能力，显著加快了对OSS数据湖的查询和分析过程。...
EMR元数据迁移到数据湖构建（DLF）
本文为您介绍如何将Hive MetaStore存储在MySQL、RDS中的元数据迁移到DLF中，并介绍如何在EMR集群中配置使用DLF作为数据湖统一元数据。适用场景 从其他大数据集群迁移到阿里云E-MapReduce产品。从阿里云EMR老集群（MySQL做元数据），整体...
如何排查无法连接MongoDB实例的问题？
本文介绍如何排查无法连接云数据库MongoDB实例的问题。若您已收到客户端返回的错误信息，请查阅 连接失败常见报错 匹配解决方案。概览 您可以从以下几个方面排查无法连接云数据库MongoDB实例的问题：检查白名单设置 检查网络环境 检查实例...
新建ArgoDB数据源
通过创新建ArgoDB数据源能够实现Dataphin读取ArgoDB的业务数据或向ArgoDB写入数据。本文为您介绍如何新建ArgoDB数据源。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作步骤 在Dataphin...
创建集群
背景信息 关于云数据库专属集群MyBase的更多介绍，请参见 什么是云数据库专属集群MyBase。注意事项 泰国（曼谷）仅支持SQL Server引擎。专属集群的超配指标值默认值如下：MySQL、SQL Server引擎的 CPU超配比 默认值为：200%，Redis引擎的 ...
元数据库数据字典
云原生数据仓库AnalyticDB MySQL版 的元数据库为INFORMATION_SCHEMA库，兼容MySQL的元数据库。查询元数据库可以直接在JDBC连接中使用SQL语句进行查询。查询test库下的所有表，示例如下：select*from TABLES where table_schema='test' ...
创建集群
背景信息 关于 专属集群MyBase 的更多介绍，请参见 什么是云数据库专属集群MyBase。注意事项 泰国（曼谷）仅支持SQL Server引擎。专属集群的超配指标值默认值如下：MySQL、SQL Server引擎的 CPU超配比 默认值为：200%，Redis引擎的 CPU超...
负载均衡
如上图所示，假设 PolarDB 集群中只存在一个RW节点和三个RO节点，在不考虑一致性的前提下，三种场景下的请求路由和数据读取效率如下：非按需建联 用户的一个会话通过数据库代理会与四个数据库都建立连接，并且广播语句会路由到四个数据库...
Spark
Spark访问外部数据源时，为什么会出现网络连接失败问题？Spark SQL应用使用SHOW TABLES或SHOW DATABASE命令查询库表时，为什么显示的库表与实际库表不符？Spark应用为什么提示错误日志oss object 403？如何定位Spark应用运行速度变慢的原因...
快速入门
数据湖构建（Data Lake Formation，DLF）产品主要使用流程如下。...创建数据源 创建数据湖的入湖来源，当前支持阿里云RDS MySQL...创建数据湖的元数据 添加元数据库 创建元数据表，指定表中数据的存储位置和存储格式 详细操作请参见 元数据管理。
RDS PostgreSQL同步至RDS MySQL
源库、目标库出现其他问题后的重试时间 在同步任务启动后，若源库或目标库出现非连接性的其他问题（如DDL或DML执行异常），则DTS会报错并会立即进行持续的重试操作，默认持续重试时间为10分钟，您也可以在取值范围（1~1440分钟）内自定义重...
企业版产品系列
数据库的计算节点仅存储元数据，而将数据文件、Redo Log等存储在共享分布式存储（PolarStore）的数据库存储节点中。各计算节点之间仅需同步Redo Log相关的元数据信息，极大降低了主节点和只读节点间的复制延迟，而且在主节点故障时，只读...
升级内核小版本
云数据库RDS SQL Server实例支持手动升级内核小版本，内核小版本的升级涉及性能提升、新功能或问题修复等。RDS SQL Server内核小版本的更新说明，请参见 SQL Server小版本发布记录。其他引擎升级内核小版本请参见：MySQL升级内核小版本 ...
创建Impala数据源
元数据库获取方式 参数 说明 数据库类型 请根据集群中使用的元数据库类型，选择对应的数据库类型。Dataphin支持选择 MySQL。MySQL 数据库类型支持 MySQL 5.1.43、MYSQL 5.6/5.7 和 MySQL 8 版本。JDBC URL 填写目标数据库的JDBC连接地址。...
GetDatabase-获取元数据库详情
获取数据湖具体的一个元数据库的详细信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句...
使用DTS将自建PostgreSQL迁移至RDS PostgreSQL
待迁移的表需具备主键或唯一约束，且字段具有唯一性，否则可能会导致目标数据库中出现重复数据。待迁移的数据库名称中间不能包含短划线（-），例如dts-testdata。如迁移对象为表级别，且需进行编辑（如表列名映射），则单次迁移任务仅支持...
OpenMetaQuery
开启元数据管理功能后，OSS会为Bucket创建元数据索引库并为Bucket中的所有文件（Object）建立元数据索引。元数据索引库创建完成后，OSS会继续对Bucket中新增文件进行准实时的增量追踪扫描并为增量文件建立元数据索引。注意事项 权限说明 ...
新建ArgoDB计算源
数据库类型 选择ArgoDB的元数据库类型。系统目前支持ArgoDB。JDBC URL 填写对应元数据库的连接地址，格式为 jdbc:postgresql:/<host>:<port>/<database name>。用户名、密码 填写登录元数据库的用户名和密码。说明 为保证任务正常执行，请...
从统一元数据库迁出到用户自建的RDS实例
为了保证更稳定的大规模Hive元数据服务，您可以从原有的统一元数据库迁出到您自建的RDS实例。前提条件 已购买RDS，详情请参见 创建RDS MySQL实例。使用限制 建议选择 MySQL 的5.7版本；系列 选择 高可用版。RDS MySQL实例须与E-MapReduce的...
快速使用专属集群MyBase
背景信息 关于 专属集群MyBase 更多信息，详情请参见 什么是云数据库专属集群MyBase。操作步骤 步骤一：创建专属集群 登录 云数据库专属集群控制台。在页面左上角，选择目标地域。在 概览 页面，然后单击 创建集群。在 创建专属集群 面板，...
版本发布说明
修复已建AUTO数据库 SHOW CREATE DATABASE 命令在部分场景下会报NPE的问题。修复私有协议chunk传输在类型推导有误时，字符串转整型存在负号时不能识别的问题。修复数据库表数量过多时，扩缩容流程可能会失败的问题。修复BKAJoin场景下的...
- 产品推荐
- 这些文档可能帮助您