应用场景
本文介绍EMR Serverless Spark的应用场景以及相应的解决方案。建立数据平台 得益于其开放式架构设计，EMR Serverless Spark极大地简化并提升了在数据湖环境中对结构化和非结构化数据进行高效分析处理的能力。EMR Serverless Spark不仅集成...
机器学习
轻量化程度高，面对复杂问题的解决方案选型时选择 云原生数据仓库AnalyticDB PostgreSQL版 即可，比如既要解决分类问题又要解决社交网络分析等问题时；计算有弹性，性能有保障，基于 云原生数据仓库AnalyticDB PostgreSQL版 云原生架构，...
导入解决方案
将某个工作组中下载的解决方案导入到其他工作组或项目，可实现数据治理工作环境的初始化、跨平台的资产发布及迁移，支持通过本地上传和OSS添加的方式导入解决方案。本文介绍如何导入解决方案。前提条件 已在系统设置模块中创建需要导入解决...
MySQL分库分表同步至Hologres（方案2.0）
配置区域 参数 说明 读端配置 离线任务源端最大连接数 支持您通过该参数控制当前同步方案所产生的所有离线子同步任务可占用的源端数据库连接数，即同一时间内，当前同步解决方案所产生的所有离线子同步任务读取数据库的并发数上限。...
创建解决方案
数据开发模式全面升级，包括工作空间>解决方案>业务流程三级结构，抛弃陈旧的目录组织方式。背景信息 DataWorks对数据开发模式进行全面升级，按照业务种类组织相关的不同类型的节点，让您能够更好地以业务为单元、连接多个业务流程进行开发...
东软案例
解决方案 东软集团围绕运营商、政务云和汽车等行业新一代数字信息系统IT运维场景海量监控数据存储分析痛点，将从遍布全国多地域的手机、平板等终端连接应用系统业务服务的数字足迹和客户数字体验数据、云端&数据中心网络抓包分析数据，应用...
03新建工作组并导入解决方案
创建需要导入解决方案包的工作组，并导入解决方案，本文介绍如何新建工作组并导入解决方案。前提条件 已下载解决方案，具体操作，请参见 下载解决方案。操作步骤 登录 数据资源平台控制台。在页面左上角单击 图标，选择 协同。在顶部菜单栏...
概述
简介 传统的OLTP和OLAP解决方案基于简单的读写分离或ETL模型，将在线库的数据以T+1的方式抽取到数据仓库中进行计算，这种方案存在存储成本高、实时性差、链路和维护成本高等缺陷。为应对数据爆炸式增长的挑战，PolarDB分布式版本基于对象...
网络运维场景
解决传统解决方案中数据量超过一定量级时不能使用数据库和使用CMDB周期长且不够灵活的问题。下面示例采用USAir97的机场运输的dataset对具体应用加以说明。示例示意图 航站枢纽节点连接示意图如下：示例数据模型 图数据模型抽象以每个机场...
排查Redis实例CPU使用率高的问题
原因排查和解决方案，请参见 数据节点CPU使用率不一致。某个Proxy节点的CPU使用率较高，而其他Proxy节点的CPU使用率较低。原因排查和解决方案，请参见 代理节点CPU使用率不一致。请根据不同现象，分别采取措施降低CPU使用率。CPU使用率突然...
数据倾斜调优
本文为您介绍使用MaxCompute过程中常见的数据倾斜场景以及对应的解决方案。MapReduce 在了解数据倾斜之前首先需要了解什么是MapReduce，MapReduce是一种典型的分布式计算框架，它采用分治法的思想，将一些规模较大或者难以直接求解的问题...
下载解决方案
下载解决方案，以备其他工作组或项目导入时使用。本文介绍如何下载解决方案。前提条件 已有解决方案，包括已新建解决方案或已导入解决方案。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 ...
性能调优
如果以上方案均不能解决问题，可以尝试关闭统计信息自治功能（set adb_config O_CBO_AUTONOMOUS_STATS_ENABLED=false;但是关闭自动收集统计信息后，可能会出现查询性能回退。后续如果需要统计信息，需要您手动维护。详情请参见 手动收集...
客户案例
解决方案 友盟+联合MaxCompute构建开发者数据银行，为企业提供面向分析的、实现友盟域数据与企业私域数据全面融合的自助分析服务“U-DOP数据开放”。该服务通过订阅数据包返还数据到MaxCompute，预置分析模板并结合可视化分析BI工具来快速...
解决方案
本文介绍解决方案的相关问题。...在数据资源平台中，解决方案会在首次导入模型后生成快照，而在快照生成后再进行导入模型操作时，将不会对该解决方案中的内容产生影响。因此再次导入模型时，需要重新创建解决方案再做导出。
什么是数据资源平台
阿里云数据资源平台是数据资产定义、加工、管理、服务的全流程平台，提供数据同步、数据查询、数据标准、数据建模、数据加工、质量评估、业务模型构建、资产管理、数据服务等功能，为智能数据应用持续稳定供给全量、标准、干净、智能的数据...
02下载解决方案
下载解决方案，以备其他工作组或项目导入时使用，本文介绍如何下载解决方案。前提条件 已创建解决方案，具体操作，请参见 创建解决方案。操作步骤 登录 数据资源平台控制台。在页面左上角单击 图标，选择 协同。在顶部菜单栏，单击 图标，...
步骤二：规划数仓
在开始数据开发前，需要完成数据仓库的规划，包括定义数据板块、项目、数据源、计算源和统计周期。本文将指导您完成本教程的规划数仓。背景信息 数据板块：数据板块是逻辑空间的重要组成部分，是基于业务特征划分的命名空间。本教程以 ...
步骤二：规划数仓
在开始数据开发前，需要完成数据仓库的规划，包括定义数据板块、项目、数据源、计算源和统计周期。本文将指导您完成本教程的规划数仓。背景信息 数据板块：数据板块是逻辑空间的重要组成部分，是基于业务特征划分的命名空间。本教程以 ...
企业版和标准版功能对比
通过列存索引，PolarDB MySQL版 实现了一体化的实时事务处理和实时数据分析的能力，成为一站式HTAP数据库产品解决方案。通过一套数据库系统，即可满足业务的OLTP及OLAP需求。支持 支持 弹性并行查询（ePQ）弹性并行查询（Elastic Parallel ...
8.0.1和8.0.2版功能对比
通过列存索引，PolarDB for MySQL 版实现了一体化的实时事务处理和实时数据分析的能力，成为一站式HTAP数据库产品解决方案。通过一套数据库系统，即可满足业务的OLTP及OLAP需求。支持 支持 Hash Join 支持Hash Join，基于代价选择Hash Join...
他云/自建数据库录入
目标数据库实例已购买网络解决方案。网络解决方案详情，请参见 连接本地IDC。注意事项 若需要通过数据管理DMS管理实例，请在创建实例时需根据实际需求设置数据库账号权限，具体授权语法可参考各数据库类型对应的官网文档。具体权限说明如下...
2023年
新说明 使用PyODPS DataFrame编写数据应用时，同一个脚本文件中的代码会在不同位置执行，可能导致一些无法预期的问题，本文为您介绍当出现相关问题时，如何确定代码的执行环境，以及提供部分场景下的解决方案。PyODPS DataFrame的代码运行...
应用场景
数据库网关（DatabaseGateway，简称DG）具有广泛的应用场景，用户可以使用云服务访问并管理本地IDC或其他云厂商的数据库，同时也可以与其他阿里云服务集成提供丰富的解决方案。多云数据库统一管理 数据管理 DMS 是一种集数据管理、结构管理...
功能发布记录 2022年之前
为您提供了各类可视化图表及统计数据，包括工作空间下的API总数、总调用次数等信息，帮助您从全局角度了解API的调用情况。同时，可以针对单个API分别查看监控图表，获取API网关状态码、数据服务错误码等详细信息。2021.02.16 华北2（北京）...
通过DMS连接Tair
解决方案：在DMS 数据库实例 列表中，右键单击目标实例，选择 编辑实例，然后选择 录入方式 为 连接串地址，将修改后的实例连接地址填写到 连接串地址 文本框中进行重试。相关文档 通过redis-cli连接Tair 客户端程序连接Tair
通过DMS连接Redis
解决方案：在DMS 数据库实例 列表中，右键单击目标实例，选择 编辑实例，然后选择 录入方式 为 连接串地址，将修改后的实例连接地址填写到 连接串地址 文本框中进行重试。相关文档 通过redis-cli连接Redis 客户端程序连接Redis
应用场景
数据库网关（DatabaseGateway，简称DG）具有广泛的应用场景，用户可以使用云服务访问并管理本地IDC或其他云厂商的数据库，同时也可以与其他阿里云服务集成提供丰富的解决方案。多云数据库统一管理 数据管理 DMS 是一种集数据管理、结构管理...
AnayticDB PostgreSQL版钉钉专属AI解决方案
方案概述 AnalyticDB PostgreSQL版 联合钉钉推出企业专属AI解决方案，由 AnalyticDB PostgreSQL版 提供企业私域数据的存储、向量化、向量检索及召回服务，由钉钉提供上层AI应用解决方案，可应用于自然语言生成报表、文档查找、新人培训、...
离线同步任务调优
同步任务整体速度慢可能出现在同步过程的各个阶段，本文以现象入手，为您提供各个阶段运行慢的解决方案，详情请参见：数据同步慢的场景及解决方案。在数据库性能限制的情况下，同步速度并非越快越好，考虑到速度过高可能对数据库造成过大的...
什么是DataWorks
DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎，为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台。从2009年起，DataWorks不断沉淀阿里巴巴大数据建设方法论，支撑数据中台建设，同时与...
到期、欠费说明
到期说明 包年包月的服务到期后，对实例的影响和解决方案如下：计费项 到期影响 解决方案 稳定变更模式 如果稳定变更模式的可用额度不足，稳定变更模式的实例会在DMS中被随机禁用。您可以选择以下任意一种解决方案：购买稳定变更模式服务后...
实时同步能力说明
DataWorks为您提供的实时数据同步功能，方便您使用单表或整库同步方式，将源端数据库中部分或全部表的数据变化实时同步至目标数据库中，实现目标库实时保持和源库的数据对应。使用限制 实时同步不支持在数据开发界面运行任务，您需要保存、...
操作指南
一、大数据专家服务流程指南 二、服务流程说明 用户可以根据自己实际需要，提前或者在问题发生时购买大数据专家服务，服务项包含大数据技术架构方案咨询、大数据解决方案POC、大数据搬站迁云方案咨询、跨地域迁移支持服务、大数据专家高阶...
发布为租户模板
当需要通过导入解决方案，实现对多个工作组进行批量更新时，支持您将已有解决方案发布为租户模板，通过导入租户模板，实现对多个工作组一键实例化后导入使用。本文介绍如何发布为租户模板。前提条件 已成功导入或者新建解决方案，具体操作...
功能更新动态（2024年）
创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 新建Doris数据源 创建GreenPlum数据源 新建Amazon S3数据源 离线集成 新增集成任务...
数据源测试连接报VPC_GRANT_ACCESS_API_ERROR错误的...
本文为您介绍在Dataphin中添加RDS类型数据源时，进行测试连接报VPC_GRANT_ACCESS_API_ERROR错误的解决方案。问题描述 添加RDS类型的数据源时，网络类型选择为VPC网络，单击 连接测试 时连接测试失败，报错信息为 测试连接失败，请确保填写...
应用场景
库表级恢复 全量数据备份是最普遍的备份解决方案，发生数据误删除时，传统方案需要将整个实例数据全部恢复，然后从中找出误删除表，其他数据都丢弃掉，大部分时间花费在无效工作上，这种方案会大大延长故障恢复时间。为了降低数据库故障...
产品简介
主要包括：大数据技术架构方案咨询、大数据解决方案POC、大数据搬站迁云方案咨询、跨地域迁移支持服务、大数据专家高阶培训、专家运维保障综合服务、AI算法建模咨询、AI算法方案POC、AI标注人力服务等。阿里云大数据专家服务在金融、电商、...
方案选择
本文主要为您介绍针对订单系统的一些传统解决方案，以及面对亿量级订单，表格存储提供的更全面的解决方案。传统方案一：MySQL分库分表 MySQL自身拥有强大的数据查询、分析功能，基于MySQL创建订单系统，可以应对订单数据多维查询和统计场景...
- 产品推荐
- 这些文档可能帮助您