功能简介
数据资源平台中的数据标准、数据模型、数据加工场景、数据服务API、云计算资源配置等资产，经过验证最终可沉淀为一个特定的解决方案。支持通过不同的创建方式，灵活的选择解决方案中包含的内容。依托数据资源平台中管理的大量元数据，确保...
Delta Lake概述
很高 低 较高 事务性 支持 不支持 支持 性能 高 低 较高 扩展性 依赖于具体实现 高 高 面向人员 管理人员 管理人员、数据科学家 管理人员、数据科学家 成本 高 低 低 适用场景 Delta适用于云上数据湖数据管理解决方案。如果您存在以下场景...
如何解决Redis内存使用率突然升高
解决方案：排查是否存在连接泄漏。设置连接超时时间，自动关闭空闲连接。详情请参见 设置客户端的超时时间。排查是否突发流量导致输入和输出缓冲区积压 排查方法：查看性能监控的出入口流量使用率是否达到100%。执行 MEMORY STATS 命令，...
Slowly Changing Dimension
本文为您介绍G-SCD的具体解决方案及如何通过G-SCD处理维度的数据。背景信息 SCD简介 Slowly Changing Dimension（SCD）即缓慢变化维，是随着时间变化的维度。在数据仓库中存储和管理当前和历史的数据，就需要考虑如何处理缓慢变化维，因此...
常见问题
解决方案：开通公网详情请参见 申请和释放外网地址。常见原因2：白名单未配置。解决方案：设置白名单详情请参见 设置白名单。常见原因3：ECS安全组未放开。解决方案：开放安全组详情请参见 安全组操作指引。常见原因4：公司设置了网络防火...
登录数据库
本文主要介绍在阿里云数据管理DMS控制台登录数据库时，常见的问题及解决方案。如何正确的填写登录DMS的数据库账号与密码？数据库账号指用户账号，密码指用户账号的密码。如下以在DMS登录RDS MySQL数据库举例。获取数据库账号与密码。在 RDS...
A100售后支持相关问题
912:Rma_ConnectServer connect<审计系统IP地址>:9266 failed,Connection timed out 解决方案：检查该日志中连接超时的IP是否为控制台上查询到的数据库审计系统的IP。如不是，请将 rmagent.ini 配置文件中的IP地址修改为审计系统的IP地址。...
流利说
解决方案 流利说基于数据库自治服务DAS的 7*24异常检测、SQL诊断引擎、自动SQL限流、自动性能扩展、自动SQL优化 和 智能压测 六项核心能力构建了“基础服务自治平台”的数据库部分，通过 DAS服务接口 实现了线上故障修复自动化、数据库优化...
设置连接池
如果您的应用连接创建频繁（例如短连接场景）或者连接数量很大（大于MySQL数据库的连接数限制），您可以参考本文使用合适的RDS MySQL数据库代理连接池，降低应用与数据库建立连接的频率来减少MySQL数据库主线程的开销，减少数据库上的总...
实时同步常见问题
实时同步Oracle、PolarDB、MySQL常见问题 实时同步Oracle、PolarDB、MySQL任务重复报错 报错信息与解决方案 报错信息与解决方案 实时同步Kafka数据报错：Startup mode for the consumer set to timestampOffset,but no begin timestamp was...
云产品集成
大数据开发治理平台 DataWorks DataWorks 是一款为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台。您可以使用 DataWorks 添加 ApsaraDB For OceanBase 数据源，管理 OceanBase 数据库中的数据，通过数据集成...
常见问题
本文主要介绍在使用ossftp时可能遇到的问题及解决方案。连接FTP Server时提示无法连接到服务器 问题现象 提示：严重错误，无法连接到服务器。问题原因 输入的AccessKey ID和AccessKey Secret有误。所用的AccessKey信息为RAM用户的AccessKey...
Redis连接问题排查流程
本文介绍 云数据库Redis版 各类连接问题的排查流程。若您已收到客户端返回的错误信息，请查阅 常见报错 匹配解决方案。首次连接排查 网络环境 在开始连接 Redis 之前，您需要先确认客户端的网络环境，具体流程图如下：图 1.排查网络环境 ...
创建FTP数据源
详细内容，请参见 附录：网络连通解决方案。测试成功后，单击 确定，完成FTP数据源的创建。后续步骤 完成FTP数据源的创建后，即可将FTP的业务数据引入至Dataphin，或将Dataphin的数据写入至FTP数据源。具体操作，详情请参见 数据集成概述。
创建数据迁移任务时报获取结构连接超时
解决方案 原因一的解决方法：建议将白名单放开后重试，请参考 设置白名单。原因二的解决方法：建议将迁移账号对应的主机名调整为“%”，然后进行重试。grant all on*.*to[$User]@'%' identified by '[$Password]';说明[$User]为迁移账号。...
基本概念
本文为您介绍DataWorks中，工作空间、业务流程、解决方案、组件、任务、实例、业务日期、定时时间、提交、脚本开发、资源、函数和输出名称等基本概念。工作空间 工作空间 是DataWorks管理任务、成员，分配角色和权限的基本单元。工作空间...
IoT数据自动化同步至云端解决方案
解决方案 IoT数据自动化同步至云端解决方案主要包括存储原始数据和同步数据至分析系统两部分。IoT设备大量的数据通常以半结构化的形式存储。例如，使用OSS存储原始信息为CSV文件。但同步至大数据系统或传统数据库的数据，需要使用专业的...
RDS连接失败的排查方法
详细信息 您可以从以下五个方面排查问题：检查实例状态和实例连接信息（常见）检查白名单设置正确（常见）检查数据库性能（常见）检查客户端 ECS实例无法通过内网访问RDS实例 排查流程图 步骤一：检查实例状态和实例连接信息 登录 云数据库...
配置VPC数据源
重要 如果您的RDS for MySQL数据库是从经典网络切换到专有网络VPC网络的，且通过以上方法无法连通数据源，那么可以通过以下方式解决：方法一：在获取到的 VPC ID 和 实例ID 后面添加-1，再重新测试连接。如果依然无法连通，可尝试方法二。...
RDS MySQL慢SQL问题
解决方案 判断实例是否到达瓶颈，较好的方法是先测试出实例的性能基准值，例如用SysBench进行 基准测试，复杂场景下的QPS和TPS很少会超过基准值。确认实例到达瓶颈后，建议升级实例规格。具体操作，请参见 变更配置。版本升级 原因及现象 ...
用自然语言实时查看BI报表
本文介绍了PolarDB NL2BI解决方案的背景、应用场景以及如何体验NL2BI解决方案。背景 为了让不熟悉SQL语言的用户能方便地从数据库中取数分析，PolarDB for AI联合达摩院推出自研的自然语言到数据库查询语言转义（Nature Language To SQL，...
聚合支付方案
解决方案 阿里云通过多款云数据库产品为利楚扫呗制定以下解决方案：方案解读：使用DRDS分库分表将数据库进行水平拆分，有效解决订单的存储上限及业务高峰时的高并发压力，借助了DRDS对MySQL语法的高度兼容能力，轻松从原来单体数据库升级到...
NL2BI：用自然语言实时查看BI报表
本文介绍了PolarDB NL2BI解决方案的背景、应用场景以及如何体验NL2BI解决方案。背景 为了让不熟悉SQL语言的用户能方便地从数据库中取数分析，PolarDB for AI联合达摩院推出自研的自然语言到数据库查询语言转义（Nature Language To SQL，...
UpdateDIProjectConfig
调用UpdateDIProjectConfig修改当前工作空间中数据集成同步解决方案任务默认的全局配置。当前DataWorks仅支持为同步解决方案任务中的实时同步DDL消息处理策略设置默认的全局配置。如果您的同步解决方案任务包含实时同步任务，则配置 DDL...
RDS MySQL活跃线程数高问题
本文介绍RDS MySQL活跃线程数高的原因及解决方案。背景信息 活跃线程数或活跃连接数是衡量MySQL负载状态的关键指标，通常来说一个比较健康的实例活跃连接数应该低于10，高规格和高QPS的实例活跃连接数可能20、30，如果出现几百、上千的活跃...
连接SQL Server实例
完成初始化配置后，您可以通过多种方式连接到SQL Server实例（例如通过数据管理DMS、SSMS客户端等），实现您的业务目标。本文介绍这些连接方法的具体操作。前提条件 已创建RDS SQL Server实例。具体操作，请参见 创建RDS SQL Server实例。...
连接SQL Server实例
完成初始化配置后，您可以通过多种方式连接到SQL Server实例（例如通过数据管理DMS、SSMS客户端等），实现您的业务目标。本文介绍这些连接方法的具体操作。前提条件 已创建RDS SQL Server实例。具体操作，请参见 创建RDS SQL Server实例。...
PostgreSQL数据源
PostgreSQL实时同步任务启动后，会在数据库中自动创建slot、publications，slot名称格式为：di_slot_+解决方案ID，publication名称格式为：di_pub_+解决方案ID，当实时同步任务停止或下线后，需手动删除，否则可能会导致PostgreSQL WAL持续...
创建DataHub数据源
通过创建DataHub数据源能够实现Dataphin读取DataHub的业务数据或向DataHub写入数据。本文为您介绍如何创建DataHub数据源。背景信息 DataHub即阿里云流式数据服务DataHub，如果您使用的是阿里云流式数据服务DataHub，在对接Dataphin进行数据...
新建自定义数据源
完成自定义数据源类型后，您可将该类型的...详细内容，请参见 附录：网络连通解决方案。测试成功后，单击 确定，完成自定义数据源的创建。后续步骤 完成数据源的创建后，您可将数据源的数据引入至Dataphin。更多信息，请参见 数据集成概述。
技术发展趋势
近些年来，数据在国民经济各个领域扮演着愈发重要的作用，其使用特点较之以往也发生了诸多变化，其趋势主要有几个方面。规模爆炸性增长 随着8K、5G、...挑选DBMS 解决方案的数据和分析负责人慢慢接受这样一个事实，即云DBMS是未来的发展方向。
使用DMS和DG管理本地或他云数据库
阿里云数据库网关DG（Database Gateway）支持在不暴露公网IP的前提下，将本地自建或第三方云厂商的数据库与阿里云服务连接起来，避免使用公网IP连接的安全风险。您可以通过数据库网关将本地或第三方云数据库录入DMS进行管理。背景信息 将...
创建Hudi数据源
说明 通常情况下，生产数据源和开发数据源需配置非同一个数据源，以使开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。参数 描述 存储配置 支持HDFS或OSS存储。...
8.0.1和8.0.2版功能对比
通过列存索引，PolarDB for MySQL 版实现了一体化的实时事务处理和实时数据分析的能力，成为一站式HTAP数据库产品解决方案。通过一套数据库系统，即可满足业务的OLTP及OLAP需求。支持 支持 Hash Join 支持Hash Join，基于代价选择Hash Join...
新建Doris数据源
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
创建Redis数据源
说明 通常情况下，生产数据源和开发数据源需配置非同一个数据源，以使开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。参数 描述 host Redis的连接地址。若您...
RDS MySQL空间不足问题
解决方案 优化数据结构，减少二级索引数量。大字段导致空间不足 现象 如果表结构定义中有blob、text等大字段或很长的varchar字段，也会占用更大的表空间。解决方案 将数据压缩以后再插入。空闲表空间太多导致空间不足 现象 空闲表空间太多...
概述
免费体验 阿里云提供了数据库解决方案功能体验馆。您无需购买任何资源，即可在线体验 PolarDB MySQL版 热备无感秒切的效果。您可前往 体验PolarDB MySQL无感切换 进行体验，详情请参见 免费体验PolarDB MySQL热备无感秒切。
创建Aliyun HBase数据源
说明 通常情况下，生产数据源和开发数据源需配置非同一个数据源，以使开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。参数 描述 服务类型 根据数据源HBase选择...
创建StarRocks数据源
通过创建StarRocks数据源能够实现Dataphin读取StarRocks的业务数据或向StarRocks写入数据。本文为您介绍如何创建StarRocks数据源。背景信息 StarRocks是一款高性能分析数据库，支持实时、多维和高度并发的数据分析。StarRocks具有高度可...
- 产品推荐
- 这些文档可能帮助您