数据管理DMS解决方案系列
为了更好地指导您使用数据管理DMS（Data Management），DMS推出解决方案系列文档，旨在通过最佳实践（Step by Step）的形式向您介绍DMS研发流程、数据安全、数据开发的解决方案。研发流程解决方案 数据安全解决方案 数据开发解决方案 更多...
离线同步常见问题
解决方案：针对产生乱码的不同原因，选择相应的解决方法：如果您的原始数据乱码，需首先处理好原始数据，再进行同步任务。数据库和客户端编码格式不一致，需先修改编码格式。浏览器编码和数据库或客户端编码格式不一致，需先统一编码格式，...
如何对JSON类型进行高效分析
针对海量半结构化数据计算与分析，本文将以半结构化数据JSON为例，首先简述传统数据库与数据仓库的解决方案，然后详细描述 PolarDB IMCI列式JSON、虚拟列、秒级加减列与表列数扩展等技术点，最后给出 PolarDB IMCI列式JSON实时分析与扩展流...
到期、欠费说明
您可以选择以下任意一种解决方案：购买敏感数据保护服务后，启用被禁用的实例。重要 此操作会变更实例之前的配置。将被禁用实例的敏感数据保护功能关闭后，启用被禁用的实例。将某个或多个实例的敏感数据保护功能关闭，释放敏感数据保护...
什么是云原生数据湖分析
云原生数据湖分析（简称DLA）是新一代大数据解决方案，采取计算与存储完全分离的架构，支持数据库（RDS\PolarDB\NoSQL）与消息实时归档建仓，提供弹性的Spark与Presto，满足在线交互式查询、流处理、批处理、机器学习等诉求，也是传统...
EncDB
当您的数据库中有数据需要被保护时，可以使用RDS MySQL全密态数据库功能，该功能提供的加密解决方案能够在遵守数据保护法规的前提下保障您的数据安全，使被保护数据免受未授权访问。详情请参见 全密态数据库。
SDK重新运行后不能成功订阅数据
问题描述 SDK重新运行后不能成功订阅数据。问题原因 因为数据订阅通道中...解决方案 为了修复这个问题，在启动SDK之前，需要先修改消费位点，使消费位点在数据范围内，具体的修改方法详见文档 修改订阅通道的消费位点。适用于 数据传输服务DTS
功能优势
当您的数据库中有数据需要被保护时，可以使用RDS MySQL全密态数据库功能，该功能提供的加密解决方案能够在遵守数据保护法规的前提下保障您的数据安全，使被保护数据免受未授权访问。本文将详细介绍RDS MySQL全密态数据库功能的优势，帮助您...
常见术语
云原生数据湖分析（简称DLA）是新一代大数据解决方案，采取计算与存储完全分离的架构，支持数据库（RDS\PolarDB）与消息实时归档建仓，提供弹性的Spark与Presto，满足在线交互式查询、流处理、批处理、机器学习等诉求，也是传统Hadoop方案...
产品优势
云原生数据湖分析DLA（Data Lake Analytics）是新一代大数据解决方案，采取计算与存储完全分离的架构，支持数据库与消息实时归档建仓。DLA提供弹性的Spark与Presto，满足在线交互式查询、流处理、批处理、机器学习等诉求，也是传统Hadoop...
Spark作业异常排查及处理
本文介绍Spark作业异常的排查方法和解决方案。内存问题引起的报错 Container killed by YARN for exceeding memory limits 报错原因：提交App时申请的内存量较低，但JVM启动占用了更多的内存，超过了自身的申请量，导致被YARN NodeManager...
什么是数据库自治服务DAS
数据库是所有企业业务的基座，企业内的研发、测试、运营和运维人员每天都需要对数据库进行操作或者查询，但是使用数据库的人员对数据库的了解程度参差不齐，所以数据库的稳定性不断受到如下问题的挑战。视频简介 数据库运维和管理的挑战 ...
新用户必读
数据导入：如果您需要将已有数据源中的数据迁移到 AnalyticDB MySQL，阿里云为此提供了完善的数据同步解决方案。数据可视化：您可以通过 AnalyticDB MySQL 兼容的BI工具，对 AnalyticDB MySQL 中的数据进行有效整合，快速准确地提供报表并...
方案选择
本文主要为您介绍针对订单系统的一些传统解决方案，以及面对亿量级订单，表格存储提供的更全面的解决方案。传统方案一：MySQL分库分表 MySQL自身拥有强大的数据查询、分析功能，基于MySQL创建订单系统，可以应对订单数据多维查询和统计场景...
离线同步数据质量排查
如果写出数据和目标存储已有数据发生数据约束（主键冲突、唯一键约束、外键约束等），数据库则使用来源数据update更新目标表已有数据行，在目标表存在多个数据约束的情况下，数据替换可能会失败并产生脏数据 如果写出数据和目标存储已有...
离线同步并发和限流之间的关系
来源端读取支持最大连接数：同步解决方案的离线全量数据初始化阶段，会基于JDBC建立到数据库连接并读取全量历史数据。此连接数即用来控制数据来源端支持的最大JDBC连接数，避免大量任务同时启动打满数据库连接池，影响数据库的稳定性。请...
概述
通过列存索引，PolarDB MySQL版 实现了一体化的实时事务处理和实时数据分析的能力，成为一站式HTAP数据库产品解决方案。通过一套数据库系统，即可满足业务的OLTP及OLAP需求。如您有关于列存索引的使用问题，请进钉钉群咨询，群号：...
功能概述
当您的数据库中有数据需要被保护时，可以使用RDS MySQL全密态数据库功能，该功能提供的加密解决方案能够在遵守数据保护法规的前提下保障您的数据安全，使被保护数据免受未授权访问。本文介绍全密态数据库的概念、应用场景和安全分级。什么...
数据传输预检查
本文为您介绍数据迁移项目预检查环节的常见报错和解决方案。数据迁移项目需要通过预检查才能成功启动。请根据现场情况和具体的报错信息，选择对应的解决方法。错误信息 报错原因 解决办法 增量日志参数检查未通过，错误参数 supplemental_...
ECS自建数据库的灾备与安全
解决方案 ECS用途 解决方案 数据库服务器 DBS备份 应用服务器 ECS快照 数据库+应用服务器 DBS备份+ECS快照 说明 如何开通ECS快照，具体操作请参见 开通快照。DBS备份价值 价值 说明 备份实时性 秒级RPO，从数据库内存实时获取事务日志。...
什么是数据传输服务DTS
数据传输服务DTS（Data Transmission Service）是阿里云提供的实时数据流服务，支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助您构建...
从Oracle迁移应用至阿里云PolarDB全流程指南
概述 阿里巴巴基于多年去IOE（即IBM的大型机或小型机、Oracle的数据库、EMC的存储设备）最佳实践，总结出一套专业的迁移Oracle上云的方法论以及解决方案。并建立专业的团队和专业的工具帮助企业最小成本、最低风险、最短周期迁移Oracle上云...
我是安全管理员
解决方案 数据归档概述 数据归档功能支持定时将大表的数据归档至其他数据库，同时支持源表数据删除、表空间整理回收等。一键建仓 一键创建实时同步的数据仓库，数据在秒级的延迟下，同步至AnalyticDB MySQL版数据库中。数据库迁移 通过创建...
ODC 常见问题
解决方案 调整数据库认为客户端使用的字符集，将其与实际客户端的字符集兼容。set names utf8mb4;调整完成后，在当前 session 内再执行 SQL，查看结果集时即可避免中文乱码问题。命令行窗口中执行 SQL 结果集中包含中文字符乱码 ODC 安装...
我是DBA
解决方案 数据归档 数据归档功能支持定时将大表的数据归档至其他数据库，同时支持源表数据删除、表空间整理回收等。一键建仓 一键创建实时同步的数据仓库，数据在秒级的延迟下，同步至AnalyticDB MySQL版数据库中。数据库迁移 通过创建工单...
解决无法连接实例问题
更多信息，请参见 解决方案。ERROR 1045(HY000):#28000ip not in whitelist ERROR 2801(HY000):#RDS00ip not in whitelist,client ip is XXX ERROR 2013(HY000):Lost connection to MySQL server at‘reading authorization packet’,...
解决无法连接实例问题
更多信息，请参见 解决方案。ERROR 1045(HY000):#28000ip not in whitelist ERROR 2801(HY000):#RDS00ip not in whitelist,client ip is XXX ERROR 2013(HY000):Lost connection to MySQL server at‘reading authorization packet’,...
解决无法连接实例问题
更多信息，请参见 解决方案。ERROR 1045(HY000):#28000ip not in whitelist ERROR 2801(HY000):#RDS00ip not in whitelist,client ip is XXX ERROR 2013(HY000):Lost connection to MySQL server at‘reading authorization packet’,...
解决无法连接实例问题
更多信息，请参见 解决方案。ERROR 1045(HY000):#28000ip not in whitelist ERROR 2801(HY000):#RDS00ip not in whitelist,client ip is XXX ERROR 2013(HY000):Lost connection to MySQL server at‘reading authorization packet’,...
DataWorks On MaxCompute使用说明
类别 描述 相关文档 版本选择 DataWorks基础版服务可满足MaxCompute开发中基本的数据上云、数据开发与调度生产、简单的数据治理工作，若需获取更专业的数据治理、数据安全解决方案，可选择相应的标准版、专业版、企业版服务。DataWorks标准...
数据引入层（ODS）
数据集成提供数据同步解决方案，您可以通过配置同步规则，实现离线数据全量及增量同步、增量数据实时写入、增量数据和全量数据定时自动合并写入新的全量表分区。详情请参见 同步解决方案。ODS层的表建议以统计日期及时间分区表的方式存储，...
数据引入层（ODS）
数据集成提供数据同步解决方案，您可以通过配置同步规则，实现离线数据全量及增量同步、增量数据实时写入、增量数据和全量数据定时自动合并写入新的全量表分区。详情请参见 同步解决方案。ODS层的表建议以统计日期及时间分区表的方式存储，...
数据源配置常见问题
本文介绍在DataV中连接数据源时，遇到的常见问题及相应的解决方法。数据库连接不成功，如何解决...说明 需要长时间查询的解决方案：自建数据接口API 服务（需要支持跨域）。优化数据库查询：例如根据常用SQL查询条件，建立相关索引加速查询。
数据源配置常见问题
本文介绍在DataV中连接数据源时，遇到的常见问题及相应的解决方法。数据库连接不成功，如何解决...说明 需要长时间查询的解决方案：自建数据接口API 服务（需要支持跨域）。优化数据库查询：例如根据常用SQL查询条件，建立相关索引加速查询。
配置任务时测试连接失败的排查及解决方法
如果数据库正常存活且连接信息没有问题，那么通过下面的方法解决问题：有公网IP的自建数据库 根据以下不同的测试结果，进行相应的处理。测试结果一 问题现象 测试连接时，使用 ping 命令测试网络不通，使用 telnet 命令测试端口不通，且...
数据导入常见问题
您可以通过以下方法解决上述报错：增大单次导入的数据量，降低导入频率。在BE的配置文件 be.conf 中修改以下配置，通过调整合并策略实现加快合并的目的。cumulative_compaction_num_threads_per_disk=4 base_compaction_num_threads_per_...
常见报错
本文介绍配置任务和任务运行时系统返回的报错信息（如重试信息或错误码）以及解决方法。说明 本文以正则表达式（(.*)?的形式表示报错信息中的变量。若报错无法解决，您可以 通过钉钉（钉钉通讯客户端下载地址）进入到DTS客户交流钉钉群...
列存索引技术架构介绍
技术背景 MySQL生态HTAP数据库解决方案 MySQL是一款主要面向OLTP型场景设计的开源数据库，开源社区的研发方向侧重于加强其事务处理能力。如提升单核性能、多核扩展性和增强集群能力，以提升可用性等。在处理大数据量下复杂查询所需要的能力...
PolarDB HTAP实时数据分析技术解密
MySQL生态HTAP数据库解决方案 MySQL是一款主要面向OLTP场景设计的开源数据库。开源社区的研发方向侧重于加强其事务处理的能力，例如：提升单核性能、多核扩展性能、增强集群能力以提升可用性等。在处理大数据量下复杂查询所需要的能力方面...
如何处理Tair集群数据倾斜
数据倾斜的临时方案 若实例已产生数据倾斜，您可以通过如下临时方案进行过渡，但以下临时方案无法解决数据倾斜的根源问题。同时，您也可以在短时间内可降低大Key、热Key的请求量，暂缓数据倾斜问题，但大Key、热Key问题只能通过业务上的...
- 产品推荐
- 这些文档可能帮助您