普通数据变更
执行结果区域显示由于安全规则导致执行失败，您可单击 申请数据变更，通过提交工单执行 DELETE 语句。说明 在该生产库中执行 DELETE 语句属于高风险操作，需要提交工单且需要指定审批模板中的审批人通过后才可执行。设置生产库禁止执行...
我的申请
前提条件 已提交申请单，包括对API、数据表资产进行使用，具体操作，请参见：申请表资产 申请API资产 背景信息 申请单来源主要有：数据资产中心模块中对公开的API、数据表资产进行授权申请。研发工作台的统一服务模块中对上线API进行上架、...
常见问题
数据安全中心DSC根据为不同行业预先定义的敏感数据关键字段，扫描MaxCompute、OSS、阿里云数据库服务（RDS、PolarDB-X、PolarDB、OceanBase、表格存储等）和自建数据库中的数据，通过敏感数据规则，判断和打标敏感数据，为数据安全审计、...
冷数据归档常见问题
为什么PolarDB控制台导航栏中没有冷数据归档这个菜单？申请开启冷数据归档功能成功后，会有一定的延迟，等待几分钟刷新页面后即可出现冷数据归档菜单。冷数据文件的格式是什么？目前支持CSV、IBD 和ORC格式。如何判断当前表或分区是否归档...
权限管理与规范化数据开发
本实践将基于DataWorks标准模式空间完成从“数据建模”到“数据生产”的基本流程，帮助您快速掌握规范化的数据体系建设流程，提升在数据开发过程中的规范性、安全性、稳定性。背景信息 DataWorks采取RBAC权限模型供用户管理DataWorks所有...
逻辑库
若需要申请数据源权限，可直接申请逻辑库权限，即可开通其关联的所有物理库的权限。配置说明 说明 数据Owner或DBA有权限配置。在 数据管理DMS 控制台首页顶部导航栏中，单击 图标，在数据库列表搜索目标数据库，单击 操作 列下的 更多>配置...
使用限制
为保障实例的稳定及安全，云数据库RDS MySQL有部分使用上的约束。说明 在本文使用限制的描述中，如果未提到版本信息，则默认为对所有版本的使用限制。其他引擎的使用限制请参见：SQL Server使用限制 PostgreSQL使用限制 MariaDB使用限制 ...
数据导入
当您需要将大批量数据导入至数据库时，可以使用数据管理DMS提供的数据导入功能，导入SQL、CSV、Excel类型的文件。前提条件 数据库类型如下：关系型数据库 MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB分布式版、AnalyticDB ...
普通数据变更
数据管理DMS的普通数据变更功能支持INSERT、UPDATE、DELETE、TRUNCATE、CREATE TABLE等SQL语句，可以对数据库中的数据进行变更操作，用于数据初始化、历史数据清理、问题修复、功能测试等场景。本文介绍在DMS中进行普通数据变更的方法。...
通过函数计算节点实现GitHub实时数据分析与结果发送
步骤四：配置案例 在 DataWorks控制台 左侧导航栏选择 大数据体验>ETL工作流模板，单击 Github十大热门编程语言 模板，单击 载入模板，配置模板参数。参数 说明 模板名称 显示当前模板名称，即“Github十大热门编程语言”。工作空间 选择 ...
管理Dataphin数据源权限
区域 参数 描述 权限字段 选择需要申请Dataphin数据源中字段。权限配置 权限类型 系统支持选择 查询权限 和 写入权限：如果需要写入数据，则选择 写入权限。如果需要查看字段的数据，则选择 查询权限。权限账号 系统默认选择为 应用。权限...
查看表资产详情
申请表资产前，了解表资产详情，有利于判断需申请的资产是否符合自己的期望。本文介绍如何查看公开的表资产详情。前提条件 已在运营模块中公开表资产。已在数据开发模块中创建公共节点和场景，并部署运行。已在数据标准模块中创建质量校验...
实例状态与影响
大版本升级中，可正常访问 MajorVersionUpgrading 升级大版本 在申请资源、升级备库或同步数据阶段，对Redis的服务无影响。在实例切换或主备切换阶段，实例将存在60秒以内的只读状态（等待数据完全同步），同时会发生秒级的连接闪断，请在...
什么是MaxCompute
MaxCompute是适用于数据分析场景的企业级SaaS（Software as a Service）模式云数据仓库，以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，使您可以经济并高效...
新建 Kafka 数据源
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 Kafka 数据源。使用限制 数据传输仅支持 Kafka 数据源作为数据同步的目标端。背景信息 数据传输的安全问题，贯穿服务连通性验证、链路创建和数据传输...
无锁数据变更
当业务累积了大量数据时，需要对在线数据与历史数据进行分隔管理，或定期清除表中数据。DMS的无锁数据变更功能将结合表中的主键或非空唯一键，分批对表中的目标数据进行操作，在保证执行效率的同时，尽可能地减小了对数据库性能、空间的...
新功能试用申请
本文介绍MaxCompute产品正在试用中的新功能，包括新功能的详细信息和申请方法。注意事项 试用功能开通后将无法关闭，请根据您的业务需求进行评估。新功能试用申请方法 访问 试用申请表单，填写申请试用功能的信息。说明 您可以 登录 ...
查看与减少数据备份
本文介绍如何在DBS中查看备份数据大小，同时提供减少备份的方法。查看备份大小 备份大小=全量数据备份的大小+增量数据备份的大小 登录 DBS控制台。单击左侧导航栏中的 备份计划，然后在上方选择目标地域。单击目标备份计划名称，进入 备份...
申请API资产
操作步骤 登录 数据资源平台控制台。在顶部菜单栏，单击 图标，选择 发现。在顶部菜单栏，单击 资产目录。在 资产目录 页面，单击 API，可选择下面任意一种方式查找API资产。在关键词搜索框，输入资产名称搜索API资产。或通过数据表表名...
我的申请
前提条件 已提交申请单，包括对API、数据表资产进行使用，具体操作，请参见：申请表资产 申请API资产 背景信息 申请单来源主要有：数据资产中心模块中对公开的API、数据表资产进行授权申请。研发工作台的统一服务模块中对上线API进行上架、...
文档修订记录
QueryPublicModelEngine 2023.10.20 新增功能 上传与下载 DataWorks的上传与下载模块，提供了便捷的数据上传功能，支持将多种来源（例如，本地文件、OSS文件）的数据上传至MaxCompute大数据引擎中进行分析处理及相关管理操作，致力于为您...
数据库迁移
说明 如果存在不一致数据，可单击 查看详情 查看不一致的概览信息，在概览信息对话框中单击 详情 查看不一致的具体数据：如果数据量比较少，可以通过手动修改的方式同步数据，如果数据量比较大，查明数据不一致的原因，清理目标数据库后...
集群实例工作台
在云数据库 OceanBase 控制台中创建集群实例之后，您可以查看名下的所有集群实例的详细信息。查看集群实例基础信息 在实例列表页面单击集群实例名称，可以进入集群实例工作台页面，您可查看指定集群实例的 付费类型、到期时间 等基本信息，...
SQL查询
申请数据源访问权限，详情请参见 安全中心。工作空间模式介绍，详情请参见 必读：简单模式和标准模式的区别。数据源查询 在数据分析查询引擎绑定时自动创建的MaxCompute数据源，默认使用个人账号执行任务，如果要访问生产表，您需在SQL命令...
发布API
登录 DataWorks控制台，单击左侧导航栏的 数据服务，在下拉框中选择对应工作空间后单击 进入数据服务。在 服务开发 页面的API列表中，双击相应的API名称，进入API编辑页面后单击右上方的 提交。说明 仅完成测试的API可进行提交操作，如果还...
Grafana数据可视化
本文介绍如何在Grafana中添加并使用 云数据库 SelectDB 版 数据源。前提条件 已为 云数据库 SelectDB 版 实例 申请公网地址。具体操作，请参见 申请和释放公网地址。已将Grafana的公网IP地址加入 云数据库 SelectDB 版 实例到白名单中。...
新功能发布记录
概述 名词解释 访问数据分析功能 管理数据集 仪表盘 08月 功能名称 变更类型 功能描述 相关文档 极简模式 新增 极简模式的控制台界面简洁、易上手、操作空间大，可以随时查找目标数据库实例，无需反复切换到控制台首页标签页。极简模式控制...
连接PostgreSQL实例
Smartbi RDS PostgreSQL支持接入 Smartbi，在Smartbi中对数据进行分析处理，满足您在企业级报表、数据可视化分析、自助探索分析、数据挖掘建模、AI 智能分析等大数据分析需求。下文以 Smartbi V10.5 版本为例，介绍如何连接RDS PostgreSQL...
OpenEvent概述
安全中心 审批中心事件 描述：在数据治理模块中，创建申请单 和 完成申请单 以及 表权限申请 触发的事件。类型：属于 扩展点事件，您可以订阅此类事件消息，获知事件状态的实时变化情况。事件示例如下。创建申请单事件：例如在数据地图中，...
计算节点变配
Serverless Serverless支持分钟级别的在线弹性扩缩容，扩缩容过程中无需进行数据搬迁，因此扩缩容速度取决于资源申请的速度，与数据规模无关。实验室测试扩缩容性能如下：16个节点及以内的扩缩容耗时不超过60秒。16个节点以上的扩缩容耗时...
快速实现数据分类分级
数据安全中心DSC（Data Security Center）是一款数据安全中心产品，可以通过收集和分析数据库的信息，提供云上数据的分类分级（包括敏感数据识别）能力。本文介绍如何快速在DSC控制台实现数据分类分级。前提条件 已规划好要接入数据安全...
SQL结果集导出
数据管理DMS 支持导出SQL结果集，您可以在DMS中按需编写查询的SQL语句，提取并导出相关数据。前提条件 数据库类型如下：数据库类型 关系型数据库：MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB分布式版、其他来源MySQL SQL ...
购买流程
目前跨境同步链路默认不开放购买，若您需要购买跨境同步任务，请先申请开通跨境数据同步的权限，详情请参见 申请跨境数据同步权限。进入同步任务的列表页面。登录 DMS数据管理服务。在顶部菜单栏中，单击 集成与开发（DTS）。在左侧导航栏...
常见问题概览
连接访问 打开SQLConsole页面时提示“未获取到数据库相关信息”的报错 MySQL中出现“Too many connections”报错 新增ECS自建数据库提示“因白名单问题无法连接数据库”账号或权限 如何在DMS控制台中查看数据库对应的DBA 在DMS控制台添加...
MaxCompute表数据
进入数据地图 登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据治理>数据地图，在右侧页面中单击 进入数据地图。查找表 在左侧菜单栏，单击。进入查找表的页面。支持您在搜索框中输入表名、表描述等查找该数据源中包含关键...
功能特性
通过Kafka导入数据 通过Flink导入数据 云数据库 SelectDB 版支持通过SelectDB提供的Flink连接器（SelectDB Connector for Apache Flink），将Kafka中的非结构化数据以及MySQL等上游业务数据库中的变更数据，实时同步到云数据库 SelectDB 版...
他云/自建数据库录入
本文介绍如何将他云/自建数据库录入至数据管理DMS中。前提条件 支持录入的他云/自建数据库类型，请参见 支持的他云/自建数据库。已在他云/自建数据库的白名单中添加DMS的服务器访问地址。详细信息，请参见 设置IP白名单。目标数据库实例的...
数据湖集群
E-MapReduce（简称EMR）新版控制台提供了数据湖集群，一个更灵活、可靠，以及高效的大数据计算集群。同时，您可以基于该集群轻松构建一个可扩展的数据管道。本文为您介绍数据湖集群支持的特性，以及与旧版Hadoop集群之间的差异。数据湖集群...
创建安全规则
安全规则针对不同功能模块提供了不同的检测点，具体信息请参见：SQL窗口-关系型数据库 SQL窗口-MongoDB数据库 SQL窗口-Redis数据库 SQL变更 权限申请 数据导出 结构设计 库表同步 数据追踪 敏感列变更 测试数据构建 数据库克隆 应用安全...
一键建仓
数据管理DMS一键建仓功能可以实现一键创建实时同步的数据仓库，数据可在秒级的延迟下，同步至AnalyticDB MySQL版数据库中，帮助您更实时、准确地掌握业务情况，以便更好地进行业务分析和决策，提升业务效果。本文介绍如何在数据管理DMS中...
- 产品推荐
- 这些文档可能帮助您