文档更新动态（2022年）
新增说明 Dataphin出网IP地址 2022年02月18日 新增数据源测试连接报VPC_GRANT_ACCESS_API_ERROR错误的解决方案 在Dataphin中添加RDS类型数据源时，进行测试连接报VPC_GRANT_ACCESS_API_ERROR错误的解决方案。新增说明 数据源测试连接报VPC_...
Slowly Changing Dimension
本文为您介绍G-SCD的具体解决方案及如何通过G-SCD处理维度的数据。背景信息 SCD简介 Slowly Changing Dimension（SCD）即缓慢变化维，是随着时间变化的维度。在数据仓库中存储和管理当前和历史的数据，就需要考虑如何处理缓慢变化维，因此...
数据管理DMS解决方案系列
为了更好地指导您使用数据管理DMS（Data Management），DMS推出解决方案系列文档，旨在通过最佳实践（Step by Step）的形式向您介绍DMS研发流程、数据安全、数据开发的解决方案。研发流程解决方案 数据安全解决方案 数据开发解决方案 更多...
什么是数据安全中心
数据安全中心（Data Security Center，简称DSC），在满足等保2.0“安全审计”及“个人信息保护”的合规要求的基础上，为您提供敏感数据识别、数据安全审计、数据脱敏、智能异常检测 等数据安全能力，形成一体化的数据安全解决方案。...
某历史养成类游戏开发公司实时计算和数据仓库方案
解决方案 客户选择云数据库Lindorm SQL（Phoenix）服务+数据湖Spark服务构建实时计算和数据仓库解决方案。Lindorm SQL提供在线查询能力、Spark提供流式处理、复杂分析等能力来满足业务需求；梳理业务数据，对数据进行分层存储在Lindorm SQL...
敏感数据溯源
解决方案：使用 数据水印 功能生成的水印信息需要提供充足的数据量，才能保证通过溯源任务还原出可靠的水印信息，进而定位出可能的数据泄露责任人。建议您使用数据量大于500条，并且不包含重复数据的文件进行溯源。原因二：被泄漏的数据非...
操作流程
流程图及说明 任务项 说明 创建解决方案 通过创建解决方案，将工作组内已加工完成的数据标准、数据模型、数据加工场景、数据服务API配置等信息，进行版本化解决方案封装。以整体解决方案为例，具体操作，请参见 新建解决方案。创建类型：...
04解决方案实例化
实例化是指将解决方案包中的数据写入到当前工作组对应模块中，以便当前工作组复用解决方案包中的数据。本文介绍如何进行解决方案实例化操作。前提条件 已成功导入解决方案，具体操作，请参见 新建工作组并导入解决方案。操作步骤 登录 数据...
任务运行失败
解决方案重新选择使用连接串模式创建的数据源。您可以参考 配置MySQL数据源 进入 数据源管理 页面，单击目标数据源 操作 列的 编辑，在 数据源编辑 页面查看创建数据源时所使用的模式。For-each，do-while、pai等节点如何在运维中心查看...
实例化解决方案
实例化是指将解决方案包中的数据写入到当前工作组对应模块中，以便当前工作组复用解决方案包中的数据。本文介绍如何实例化解决方案。前提条件 已成功导入解决方案，具体操作，请参见 导入解决方案。操作步骤 登录 数据资源平台控制台。在...
如何排查无法连接MongoDB实例的问题？
建议您先通过Mongo Shell工具连接实例的高可用连接串（ConnectionstringURI地址）做测试，测试结果及对应的解决方案如下：连接成功：第三方工具的设置不正确。请根据您实际使用的工具，具体排查工具的各种设置。连接失败：实例的设置不正确...
离线同步并发和限流之间的关系
问题二：为什么数据同步解决方案中的离线全量任务跑的慢，长时间任务处于Submit状态？数据源连接数限制功能，是指：目标端写入并发数：在实时数据同步任务内，向目标端写入数据的最大线程数。需要根据资源组大小和目标端实际规模合理设置。...
客户案例
解决方案 天弘基金基于阿里云MaxCompute构建了企业级一站式大数据解决方案。MaxCompute对于海量数据的存储、运维、计算能力强大且安全稳定。MaxCompute服务将原本需要清算8小时的用户交易数据缩短至1.5小时，同时减少了本地服务器部署压力...
常见问题
解决方案：开通公网详情请参见 申请和释放外网地址。常见原因2：白名单未配置。解决方案：设置白名单详情请参见 设置白名单。常见原因3：ECS安全组未放开。解决方案：开放安全组详情请参见 安全组操作指引。常见原因4：公司设置了网络防火...
数据湖管理FAQ
解决方案：您需要修改成“定时执行”模式，新增的数据才能被感知增加进来。OSS数据源配置数仓模式和自由模式的差异以及适用场景是什么？OSS数据源配置 使用场景 OSS路径格式要求 识别精度 性能 数仓模式 用户直接上传数据到OSS，并期望构建...
Presto FAQ
分析型的查询往往只会获取一个表里面少数几列的数据，这样执行引擎比如Presto在实际扫描底层数据的时候只需要扫描需要的列的数据。而这种节省扫描量的效果只有当底层的数据是以列存的形式存储才能达到。示例代码如下。SELECT col1 FROM tbl...
MySQL节点
解决方案 重新选择使用连接串模式创建的数据源。您可以参考 配置MySQL数据源 进入 数据源管理 页面，单击目标数据源 操作 列的 编辑，在数据源编辑页面查看创建数据源时所使用的模式。常见问题：测试连通性通过但任务执行报错 可能原因1：...
解决方案
数据资源平台中的数据标准、数据模型、数据加工场景、数据服务API、云计算资源配置等资产，经过验证最终可沉淀为一个特定的解决方案。支持通过不同的创建方式，灵活的选择解决方案中包含的内容。依托数据资源平台中管理的大量元数据，确保...
功能简介
数据资源平台中的数据标准、数据模型、数据加工场景、数据服务API、云计算资源配置等资产，经过验证最终可沉淀为一个特定的解决方案。支持通过不同的创建方式，灵活的选择解决方案中包含的内容。依托数据资源平台中管理的大量元数据，确保...
离线同步常见问题
具体原因及解决方案详情请参见：为什么数据集成任务一直显示wait？说明 由于离线同步任务通过调度资源组下发到数据集成执行资源组上执行，所以一个离线同步任务将同时耗费一个调度资源，若离线同步任务长时间运行未释放资源，除了阻塞其他...
数据库常见问题
问题现象：连接云虚拟主机的数据库时，提示云虚拟主机数据库存在故障，无法正常连接，并出现类似如下报错信息 User bdm2569*already has more than 'max_user_connections' active connections，表示数据库连接数已满。可能原因：网站程序...
数据库安全解决方案
本文介绍云数据库、DTS（数据迁移上云）、DMS（数据安全管理）、DBS（数据备份）几个产品实现企业数据资产的安全管理解决方案，避免数据泄露、删库跑路等恶性事件的出现。详情参考：数据库安全解决方案。
RDS术语
M MaxCompute 大数据计算服务MaxCompute（原名ODPS）是一种快速、完全托管的TB/PB级数据仓库解决方案，提供了完善的数据导入方案以及多种经典的分布式计算模型，能够快速地解决海量数据计算问题。通过数据集成服务，可将RDS数据导入...
RDS术语
M MaxCompute 大数据计算服务MaxCompute（原名ODPS）是一种快速、完全托管的TB/PB级数据仓库解决方案，提供了完善的数据导入方案以及多种经典的分布式计算模型，能够快速地解决海量数据计算问题。通过数据集成服务，可将RDS数据导入...
RDS术语
M MaxCompute 大数据计算服务MaxCompute（原名ODPS）是一种快速、完全托管的TB/PB级数据仓库解决方案，提供了完善的数据导入方案以及多种经典的分布式计算模型，能够快速地解决海量数据计算问题。通过数据集成服务，可将RDS数据导入...
数据源配置常见问题
请根据数据库的网络类型和所在地域，将相应的DataV服务器IP地址加入到您的数据库白名单或ECS的安全组设置中，或者使用代理工具来连接您的数据库，具体请参见 如何使用DataV Proxy。如何配置CSV数据来源？保留CSV的首行作为表头，并且每一个...
数据源配置常见问题
请根据数据库的网络类型和所在地域，将相应的DataV服务器IP地址加入到您的数据库白名单或ECS的安全组设置中，或者使用代理工具来连接您的数据库，具体请参见 如何使用DataV Proxy。如何配置CSV数据来源？保留CSV的首行作为表头，并且每一个...
RDS术语
M MaxCompute 大数据计算服务MaxCompute（原名ODPS）是一种快速、完全托管的TB/PB级数据仓库解决方案，提供了完善的数据导入方案以及多种经典的分布式计算模型，能够快速地解决海量数据计算问题。通过数据集成服务，可将RDS数据导入...
RDS术语
M MaxCompute 大数据计算服务MaxCompute（原名ODPS）是一种快速、完全托管的TB/PB级数据仓库解决方案，提供了完善的数据导入方案以及多种经典的分布式计算模型，能够快速地解决海量数据计算问题。通过数据集成服务，可将RDS数据导入...
数据倾斜调优
本文为您介绍使用MaxCompute过程中常见的数据倾斜场景以及对应的解决方案。MapReduce 在了解数据倾斜之前首先需要了解什么是MapReduce，MapReduce是一种典型的分布式计算框架，它采用分治法的思想，将一些规模较大或者难以直接求解的问题...
自媒体：易撰
自媒体 网站地址：易撰 客户介绍 长沙营智信息技术有限公司是专业的新媒体大数据服务商，其旗下知名品牌易撰，基于新媒体大数据挖掘技术及NLP算法分析，为各内容创客、广告主提供全面、科学、精准的大数据分析服务以及大数据架构解决方案。...
解决无法连接实例问题
您可以在 RDS控制台 的 数据库连接 页面查看RDS的外网地址。确保已将正确的本地设备公网IP地址添加到RDS的IP白名单。请在数据库的白名单中临时添加 0.0.0.0/0，如果设置后可以正常访问，说明是白名单设置存在问题。您可以通过以下方法获取...
解决无法连接实例问题
您可以在 RDS控制台 的 数据库连接 页面查看RDS的外网地址。确保已将正确的本地设备公网IP地址添加到RDS的IP白名单。请在数据库的白名单中临时添加 0.0.0.0/0，如果设置后可以正常访问，说明是白名单设置存在问题。您可以通过以下方法获取...
解决无法连接实例问题
您可以在 RDS控制台 的 数据库连接 页面查看RDS的外网地址。确保已将正确的本地设备公网IP地址添加到RDS的IP白名单。请在数据库的白名单中临时添加 0.0.0.0/0，如果设置后可以正常访问，说明是白名单设置存在问题。您可以通过以下方法获取...
解决无法连接实例问题
您可以在 RDS控制台 的 数据库连接 页面查看RDS的外网地址。确保已将正确的本地设备公网IP地址添加到RDS的IP白名单。请在数据库的白名单中临时添加 0.0.0.0/0，如果设置后可以正常访问，说明是白名单设置存在问题。您可以通过以下方法获取...
解决无法连接实例问题
您可以在 RDS控制台 的 数据库连接 页面查看RDS的外网地址。确保已将正确的本地设备公网IP地址添加到RDS的IP白名单。请在数据库的白名单中临时添加 0.0.0.0/0，如果设置后可以正常访问，说明是白名单设置存在问题。您可以通过以下方法获取...
互联网服务：小打卡
解决方案 通过 PolarDB-X+RDS MySQL的分布式数据库解决方案支持客户核心业务圈子打卡日记；通过 PolarDB-X 水平拆分功能为客户提供海量数据存储能力；通过平滑扩容功能实现计算和存储的平滑扩展来支持百亿级数据存储和读写。通过 PolarDB-X...
数据集成：全领域数据汇聚
DataWorks的数据集成功能模块是稳定高效、弹性伸缩的数据同步平台，致力于提供复杂网络环境下、丰富的异构数据源之间高速稳定的数据移动及同步能力。功能概述 DataWorks数据集成支持离线同步、实时同步，以及离线和实时一体化的全增量同步...
概览
研发流程解决方案 DMS为在线流程化系统，可统一管理企业内所有的数据库资源，所有人员跟数据库交互的操作都可在此完成。您可以根据不同的业务为对应的实例配置不同的研发规范、研发流程、审批流程的设计与实施，轻松实现个性化、灵活、安全...
应用场景
数据库网关（DatabaseGateway，简称DG）具有广泛的应用场景，用户可以使用云服务访问并管理本地IDC或其他云厂商的数据库，同时也可以与其他阿里云服务集成提供丰富的解决方案。多云数据库统一管理 数据管理 DMS 是一种集数据管理、结构管理...
- 产品推荐
- 这些文档可能帮助您