创建OSS数据源
通过创建OSS数据源能够实现Dataphin读取OSS的业务数据或向OSS写入数据。本文为您介绍如何创建OSS数据源。背景信息 OSS即阿里云对象存储OSS。...详细内容，请参见 附录：网络连通解决方案。测试成功后，单击 确定，完成OSS数据源的创建。
创建Elasticsearch数据源
通过创建Elasticsearch数据源能够实现Dataphin向Elasticsearch写入数据。本文为您介绍如何创建Elasticsearch数据源。...详细内容，请参见 附录：网络连通解决方案。测试成功后，单击 确定，完成Elasticsearch数据源的创建。
新建Amazon S3数据源
通过创建Amazon S3数据源能够实现Dataphin读取Amazon S3的业务数据或向Amazon S3写入数据。本文为您介绍如何创建Amazon S3数据源。...详细内容，请参见 网络连通解决方案。测试成功后，单击 确定，完成Amazon S3数据源的创建。
ETL工具支持概览
数据迁移及同步方案综述：数据传输服务（DTS）：阿里云提供的实时数据同步服务，可以将其他数据源（RDS MySQL，ECS自建MySQL，PolarDB等）实时同步数据到 AnalyticDB PostgreSQL版，构建实时数据仓库解决方案。阿里云的数据集成服务（Data ...
创建AnalyticDB for MySQL 2.0数据源
详细内容，请参见 网络连通解决方案。测试成功后，单击 确定，完成AnalyticDB for MySQL2.0数据源的创建。后续步骤 完成AnalyticDB for MySQL2.0数据源的创建后，即可将AnalyticDB for MySQL2.0的业务数据引入至Dataphin或将Dataphin的数据...
创建Impala数据源
详细内容，请参见 附录：网络连通解决方案 测试成功后，单击 确定，完成Impala数据源的创建。后续步骤 完成Impala数据源的创建后，即可将Impala的业务数据引入至Dataphin或将Dataphin的数据写入至Impala。详情请参见 数据集成概述。
创建GBase 8a数据源
通过创建GBase 8a数据源能够实现Dataphin读取GBase 8a的业务数据或向GBase 8a写入数据。本文为您介绍如何创建GBase 8a数据源。...详细内容，请参见 附录：网络连通解决方案。测试成功后，单击 确定，完成GBase 8a数据源的创建。
管理数据源
查看数据源 创建数据源后，您可以在数据源列表查看所有已创建数据源的基本信息、详情和网络连接等信息，也可以根据数据源类型进行筛选、根据数据源的创建时间进行排序，以及模糊搜索指定数据源。登录 OceanBase 管理控制台。在左侧导航栏，...
创建AnalyticDB for PostgreSQL数据源
详细内容，请参见 网络连通解决方案。测试成功后，单击 确定，完成AnalyticDB for PostgreSQL数据源的创建。操作步骤 完成AnalyticDB for PostgreSQL数据源的创建后，即可将AnalyticDB for PostgreSQL的业务数据引入至Dataphin或将Dataphin...
创建MongoDB数据源
通过创建MongoDB数据源能够实现Dataphin读取MongoDB的业务数据或向MongoDB写入数据。本文为您介绍如何创建MongoDB数据源。...详细内容，请参见 附录：网络连通解决方案。测试成功后，单击 确定，完成MongoDB数据源的创建。
创建Microsoft SQL Server数据源
通过创建Microsoft SQL Server数据源能够实现Dataphin读取Microsoft SQL Server的业务数据或向Microsoft SQL Server写入数据。...详细内容，请参见 网络连通解决方案。测试成功后，单击 确定，完成Microsoft SQL Server数据源的创建。
创建PolarDB-X数据源
详细内容，请参见 网络连通解决方案。测试成功后，单击 确定，完成PolarDB-X数据源的创建。后续步骤 完成PolarDB-X数据源的创建后，即可将PolarDB-X的业务数据引入至Dataphin，或将Dataphin的数据写入至PolarDB-X数据源。详情请参见 数据...
设置连接池
如果您的应用连接创建频繁（例如短连接场景）或者连接数量很大（大于MySQL数据库的连接数限制），您可以参考本文使用合适的RDS MySQL数据库代理连接池，降低应用与数据库建立连接的频率来减少MySQL数据库主线程的开销，减少数据库上的总...
互联网服务：小打卡
客户价值 客户当前圈子打卡日记业务有10亿以上数据，每年有亿级增量，基于 PolarDB-X+RDS的分布式数据库解决方案提供了海量数据存储和数据存储扩展能力，解决了10亿级数据在单机数据库的存储瓶颈。小打卡上有几百万活跃用户，业务发展较快...
创建IBM DB2数据源
详细内容，请参见 附录：网络连通解决方案。测试成功后，单击 确定，完成IBM DB2数据源的创建。后续步骤 完成IBM DB2数据源的创建后，即可将IBM DB2的业务数据引入至Dataphin或将Dataphin的数据写入至IBM DB2。详情请参见 数据集成概述。
独享数据集成资源组
在数据集成任务高并发执行且无法错峰运行的情况下，需要专有的计算资源组来保障数据快速、稳定的传输时，建议您选择使用DataWorks的独享数据集成资源组。本文为您概要介绍独享数据集成资源组。功能介绍 独享数据集成资源组的功能亮点如下：...
新零售：特步
解决方案 通过 PolarDB-X+RDS的分布式数据库解决方案支撑O2O全渠道业务中台系统上线，通过垂直拆分剥离各业务中心，使不同类型的业务数据可以存储在不同的RDS上，确保资源和访问隔离，从物理上使整个数据库架构具备了扩展性。通过这套架构...
错误码
本文为您介绍使用Dataphin过程中常见错误码、错误原因和解决方案。分类 详情 Bbox DPN.Bbox.Any DPN.Bbox.MetaCenterServiceError DPN.Bbox.ModelNotFound DPN.Bbox.ServerError DPN.Bbox.AttributeMissing DPN.Bbox.CatalogNotFound DPN....
Slowly Changing Dimension
在传统的数仓体系下，基于Hive表的实现有以下两个解决方案可以考虑，但各有弊端。解决方案 存在的问题 流式构建T+1时刻的增量数据表，和离线表的T时刻分区数据做合并，生成离线表T+1分区。存储资源浪费。保存离线的基础表，每个业务时刻的...
通过操作审计查询行为事件日志
DIDeleteSolutionV1 旧版解决方案删除解决方案 DIStartSolutionV1 旧版解决方案运行解决方案（提交执行/重跑）DICloneSolutionV1 旧版解决方案克隆 DIFullSupplementData 旧版解决方案全量补数据 DownloadSqlResult 下载数据分析的SQL查询...
新用户必读
数据导入：如果您需要将已有数据源中的数据迁移到 AnalyticDB MySQL，阿里云为此提供了完善的数据同步解决方案。数据可视化：您可以通过 AnalyticDB MySQL 兼容的BI工具，对 AnalyticDB MySQL 中的数据进行有效整合，快速准确地提供报表并...
使用流程
说明 当前DBS基于Copy Data Management（CDM）技术推出沙箱解决方案，您可以在DBS沙箱功能中快速创建独立的DBS沙箱实例（即数据库实例），让您的备份数据快速可用。更多信息，请参见 应急恢复。方式二：通过数据源创建单个或多个备份计划 ...
FineReport连接MaxCompute
说明 如果操作过程中出现“数据集配置错误”报错，解决方案请参见 注意事项。查看表数据 在FineReport界面，单击 图标，选择 数据库查询 后，选择 步骤二 中创建的数据连接，编写SQL查询语句后，您可以单击 图标查看到表数据信息。可视化...
创建达梦（DM）数据源
详细内容，请参见 附录：网络连通解决方案。测试成功后，单击 确定，完成达梦（DM）数据源的创建。后续步骤 完成达梦（DM）数据源的创建后，即可将达梦（DM）的业务数据引入至Dataphin或将Dataphin的数据写入至达梦（DM）。详情请参见 数据...
新建AnalyticDB for MySQL 3.0数据源
详细内容，请参见 附录：网络连通解决方案。测试成功后，单击 确定，完成AnalyticDB for MySQL3.0数据源的创建。后续步骤 完成AnalyticDB for MySQL3.0数据源的创建后，即可将AnalyticDB for MySQL3.0的业务数据引入至Dataphin或将Dataphin...
配置VPC数据源
重要 如果您的RDS for MySQL数据库是从经典网络切换到专有网络VPC网络的，且通过以上方法无法连通数据源，那么可以通过以下方式解决：方法一：在获取到的 VPC ID 和 实例ID 后面添加-1，再重新测试连接。如果依然无法连通，可尝试方法二。...
入仓解决方案
支持的数据库部署位置 有公网IP的自建数据库 无公网IP:Port的数据库（通过数据库网关DG接入）通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能...
操作指南
一、大数据专家服务流程指南 二、服务流程说明 用户可以根据自己实际需要，提前或者在问题发生时购买大数据专家服务，服务项包含大数据技术架构方案咨询、大数据解决方案POC、大数据搬站迁云方案咨询、跨地域迁移支持服务、大数据专家高阶...
如何处理Tair集群数据倾斜
数据倾斜的临时方案 若实例已产生数据倾斜，您可以通过如下临时方案进行过渡，但以下临时方案无法解决数据倾斜的根源问题。同时，您也可以在短时间内可降低大Key、热Key的请求量，暂缓数据倾斜问题，但大Key、热Key问题只能通过业务上的...
如何处理Redis集群数据倾斜
数据倾斜的临时方案 若实例已产生数据倾斜，您可以通过如下临时方案进行过渡，但以下临时方案无法解决数据倾斜的根源问题。同时，您也可以在短时间内可降低大Key、热Key的请求量，暂缓数据倾斜问题，但大Key、热Key问题只能通过业务上的...
管理数据树
编辑数据连接 在文件夹层级或数据源层级，单击右上角 图标下的 编辑数据连接，可以重新编辑当前数据库连接。请参见 添加数据库 进行修改，确认无误后单击 修改连接。修改连接名称 在文件夹层级或数据源层级，单击右上角 图标下的 修改连接...
RDS连接失败的排查方法
详细信息 您可以从以下五个方面排查问题：检查实例状态和实例连接信息（常见）检查白名单设置正确（常见）检查数据库性能（常见）检查客户端 ECS实例无法通过内网访问RDS实例 排查流程图 步骤一：检查实例状态和实例连接信息 登录 云数据库...
无法连接云数据库HBase
解决方案 请执行以下操作排查解决：检查客户端到云数据库HBase的网络是否畅通，详情请参见 连通性检测。注意：云数据库HBase为了保障安全性，不提供Ping的ICMP协议，请不要使用Ping来访问，判断是否连通云数据库HBase，请使用Telnet。检查...
数据容灾解决方案
为进一步满足业务场景中高可靠性和数据安全需求，云数据库MongoDB版提供了同城容灾和异地容灾两种解决方案，您可以根据业务需求来选择。同城容灾 说明 单节点实例不支持同城容灾，您可以将数据迁移至MongoDB 4.2及以下版本的副本集或分片...
配置任务时测试连接失败的排查及解决方法
概述 配置数据迁移任务时，可以进行数据库连接测试，很多时候会遇到测试连接失败。本文根据不同的实例类型介绍可能失败的原因及对应的解决方案。详细信息 当连接性预检查失败时，可能是由于如下原因：诊断内容 可能原因 解决方法 JDBC 数据...
基本概念
解决方案的优势如下：一个解决方案可以包括多个业务流程。解决方案之间可以复用相同的业务流程。组织完成的解决方案包含各类节点，提高您的使用体验。组件 您可以将SQL中的通用逻辑抽象为 组件，提高代码的复用性。SQL代码的处理过程通常是...
实时同步任务延迟解决方案
本文为您介绍实时同步任务延迟时的自助解决方案。确认造成延迟问题在同步任务的读端还是写端 如果是在DataStudio创建的实时同步任务，您需要在 运维中心>实时任务运维>实时同步任务 界面单击运行中的任务名称，弹出任务运行详情对话框。...
EMR+DLF数据湖解决方案
通过EMR+DLF数据湖方案，可以为企业提供数据湖内的统一的元数据管理，统一的权限管理，支持数据湖的多种管理如数据生命周期，湖格式自动优化，存储分析等。同时支持多源数据入湖以及一站式数据探索的能力。本文为您介绍EMR+DLF数据湖方案...
DBS沙箱功能概览
DBS基于Copy Data Management（CDM）技术，推出面向MySQL和Oracle的完整沙箱解决方案。您可以在DBS沙箱功能中快速创建DBS沙箱实例（RDS应急实例），让您的备份数据快速可用，且在沙箱中的读写不会影响到源数据库，同时还可以进行恢复演练、...
2021年
新功能 MaxCompute提供湖仓一体方案，该方案可以打破数据湖与数据仓库割裂的体系，并将数据湖的灵活性、生态丰富能力与数据仓库的企业级部署能力进行融合，助力构建数据湖和数据仓库相融合的数据管理平台。MaxCompute湖仓一体概述 2021年2...
- 产品推荐
- 这些文档可能帮助您