什么是DataWorks
DataWorks发展之路 阿里巴巴集团内发展历程 从2009年产品立项开始，DataWorks与阿里巴巴业务共同发展，结合MaxCompute、Hologres等大数据计算引擎的能力，跨越多个技术阶段，支撑阿里巴巴数据中台与数据治理建设。目前阿里巴巴集团内...
功能简介
为了将业务人员从重复、无效的分析工作释放出来，并通过智能化的能力帮助业务管理者、运营、业务分析师等人员高效的从数据中发现规律和异常，实现知识的提取，需要提供智能、全面、精准的数据诊断和分析能力，自动洞察数据中的有效知识，...
常见问题概览
连接访问 打开SQLConsole页面时提示“未获取到数据库相关信息”的报错 MySQL中出现“Too many connections”报错 新增ECS自建数据库提示“因白名单问题无法连接数据库”账号或权限 如何在DMS控制台中查看数据库对应的DBA 在DMS控制台添加...
什么是Dataphin
Dataphin是阿里巴巴集团OneData数据治理方法论内部实践的云化输出，一站式提供数据采、建、管、用全生命周期的大数据能力，以助力企业显著提升数据治理水平，构建质量可靠、消费便捷、生产安全经济的企业级数据中台。Dataphin兼容多种计算...
查询报错问题
若SQL自身无法进行优化，但依旧触发该错误，可联系分析型数据库MySQL版技术支持对单个分析型数据库MySQL版的系统默认值进行调整，此操作可能会造成数据库性能下降。查询提示错误 META_COLUMN_NOT_EXIST 在分析型数据库MySQL版表新增字段后...
数据建模：智能数据建模
智能数据建模是阿里云DataWorks自主研发的智能数据建模产品，沉淀了阿里巴巴十多年来数仓建模方法论的最佳实践，包含数仓规划、数据标准、维度建模及数据指标四大模块，帮助企业在搭建数据中台、数据集市建设过程中提升建模及逆向建模的...
结束数据迁移任务
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据迁移。在 迁移任务列表 页面顶部，选择迁移的目标集群所属地域。根据选择的迁移类型，选择执行下述步骤：...
集群实例工作台
在云数据库 OceanBase 控制台中创建集群实例之后，您可以查看名下的所有集群实例的详细信息。查看集群实例基础信息 在实例列表页面单击集群实例名称，可以进入集群实例工作台页面，您可查看指定集群实例的 付费类型、到期时间 等基本信息，...
用自然语言实时查看BI报表
应用场景 临时性数据分析：帮助非数据技术相关人员（如管理岗、决策人员等，特指不直接参与数据库表结构、数据分布和特征设计和感知等人员）快速获取所需的统计数据。通过简单的问题或指令来获取并分析需要的数据，如“我需要最近一周的...
NL2BI：用自然语言实时查看BI报表
应用场景 临时性数据分析：帮助非数据技术相关人员（如管理岗、决策人员等，特指不直接参与数据库表结构、数据分布和特征设计和感知等人员）快速获取所需的统计数据。通过简单的问题或指令来获取并分析需要的数据，如“我需要最近一周的...
修改数据库密码
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。根据实例类型，在左侧导航栏单击 数据迁移、数据同步 或 数据订阅。在页面顶部选择实例所属地域。找到目标实例，单击实例ID。根据...
C100售后支持相关问题
说明 如果服务器与数据库审计系统之间的网络无法连通，则一个数据库审计实例只能对一台服务器中的数据库进行审计。示例三，您在阿里云账号A下有5台服务器，阿里云账号B下也有5台服务器。您只需连通每台服务器与数据库审计系统之间的网络，...
UpdateFile
该参数与 DataWorks控制台 中，数据开发任务的“调度配置>时间属性>出错自动重跑”的”重跑间隔“配置对应。控制台中“重跑间隔”的时间单位为分钟，请在调用时注意转换时间。RerunMode String 否 ALL_ALLOWED 重跑属性。取值如下：ALL_...
产品更新动态
创建作品 2022年12月 发布时间 2022-12-01 功能名称 功能描述 相关文档 自动数据探查 自动探查上传或接入数据，无需专业技术背景即可快速了解数据内容、统计分布：包括高频数据分布占比，数值类内容的最值、平均值、空值占比等信息。...
CreateFile
该参数与 DataWorks控制台 中，数据开发任务的“调度配置>时间属性>出错自动重跑”的”重跑间隔“配置对应。控制台中“重跑间隔”的时间单位为分钟，请在调用时注意转换时间。RerunMode String 否 ALL_ALLOWED 重跑属性。取值如下：ALL_...
使用流程
同时支持接入不同引擎的云数据库、自建数据库等，均可以在DBS控制台的 数据源 中进行管理。备份完成后，您可以按需恢复数据库。说明 DBS支持接入的数据源，请参见 数据源。大型企业级备份 操作简单 管理方便 批量创建多个备份计划 方式一：...
查看数据迁移进度
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据迁移。在 迁移任务列表 页面顶部，选择迁移任务所属的地域。在 数据迁移列表 页面，单击目标实例ID。根据...
功能特性
此外，OceanBase 数据库支持超大规模集群（节点超过 1500 台，最大单集群数据量超过 3 PB，单表数量达到万亿行级别）动态扩展，在 TPC-C 场景中，系统扩展比可以达到 1:0.9，使用户投资的硬件成本被最大化的利用。高可用 OceanBase 数据库...
调整全量迁移速率
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据迁移。在 迁移任务列表 页面顶部，选择迁移任务所属的地域。在 数据迁移列表 页面，单击目标实例ID。在...
依赖服务计费说明
社区兼容版集群 依赖服务 支持功能 计费说明 ARMS 监控告警 监控：依赖于Prometheus监控，开通Prometheus监控服务后，您可以在 云数据库ClickHouse 控制台中免费查看15天的监控数据，超过15天自动清除。告警：依赖于ARMS告警管理服务，ARMS...
升级实例配置
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据迁移 或 数据同步。在目标实例处单击 升级。选择链路规格并勾选 数据传输服务协议。说明 关于链路的规格...
分析实例简介
RDS MySQL提供分析实例功能，可以将RDS MySQL主实例中的数据自动同步到分析实例中，解决RDS MySQL复杂分析与查询时卡顿的问题，实现毫秒级针对万亿级数据进行即时的多维分析透视和业务探索。使用场景 随着企业业务发展，精细化实时运营诉求...
自建MySQL应急恢复
背景信息 DBS沙箱功能，尝试引入数据重删技术（重复数据删除技术）和虚拟化存储技术，来解决传统数据库备份服务中的存储成本和使用成本问题。通过重删和增量合并技术，使得备份数据在服务端持续保持可用的全量状态。通过虚拟化存储技术，...
通过数据同步功能同步Kafka至湖仓版（推荐）
取值说明：最早位点（begin_cursor）：自动从Kafka数据中最开始的时间点消费数据。最近位点（end_cursor）：自动从Kafka数据中最近的时间点消费数据。自定义点位：您可以选择任意一个时间点，系统则会从Kafka中第一条大于等于该时间点的...
安全审计
数据库自治服务DAS 提供安全审计功能，可以自动识别高危操作、SQL注入、新增访问等风险。本文介绍如何在SQL洞察和审计功能中进行安全审计。前提条件 数据库实例为：RDS MySQL PolarDB MySQL版 已在DAS中接入对应的数据库实例，并且接入状态...
从自建Db2迁移至RDS MySQL
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据迁移。在 迁移任务列表 页面顶部，选择迁移的目标实例所属地域。单击页面右上角的 创建迁移任务。配置...
从自建Db2迁移至RDS MySQL
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据迁移。在 迁移任务列表 页面顶部，选择迁移的目标实例所属地域。单击页面右上角的 创建迁移任务。配置...
创建单节点实例
云数据库MongoDB的单节点实例是阿里云为用户提供的一种高性价比实例，适用于存储企业非核心数据的场景，例如开发、测试、学习、培训等。本文介绍如何创建单节点实例。前提条件 已注册阿里云账号，注册流程请参见 注册阿里云账号。注意事项 ...
创建单节点实例
云数据库MongoDB的单节点实例是阿里云为用户提供的一种高性价比实例，适用于存储企业非核心数据的场景，例如开发、测试、学习、培训等。本文介绍如何创建单节点实例。前提条件 已注册阿里云账号，注册流程请参见 注册阿里云账号。注意事项 ...
从Amazon RDS for PostgreSQL增量迁移至阿里云
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将Amazon RDS for PostgreSQL迁移至阿里云RDS PostgreSQL。DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这...说明 若数据传输控制台自动跳转至数据管理DMS控制台...
PolarDB的高级脱敏
功能介绍 为进一步提高 PolarDB MySQL版 引擎的数据安全、数据脱敏等方面的安全能力，阿里云将 PolarDB MySQL版 集群代理（Proxy）的脱敏功能与 DMS 的敏感数据保护功能集成，当 DMS 识别到敏感数据后，会根据脱敏规则自动对数据进行脱敏，...
从Amazon RDS for PostgreSQL全量迁移至阿里云
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据迁移。在 迁移任务列表 页面顶部，选择迁移的目标集群所属地域。单击页面右上角的 创建迁移任务。配置...
ETL工作流快速体验
该案例将通过数据分析技术，解析用户访问日志，结合用户信息，获取用户画像，并自动更新用户画像，实现网站的精细化运营。案例配套文档：简单用户画像分析（MaxCompute版）。零售电商GMV分析 DataWorks MaxCompute 数据集成 数据开发 基础...
从Amazon Aurora PostgreSQL迁移至阿里云
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据迁移。在 迁移任务列表 页面顶部，选择迁移的目标集群所属地域。单击页面右上角的 创建迁移任务。配置...
通过整库迁移配置集成任务
字段分隔符处理：如数据中存在默认或自行配置的字段分隔符，可选择处理策略，防止数据写入错误。包括 保留、去除、替换为。行分隔符处理：如数据中存在换行符(\r、)，可选择处理策略，防止数据写入错误。包括 保留、去除、替换为。开发数据...
配置VPC数据源
本文介绍在DataV中配置专有网络VPC（Virtual Private Cloud）内数据源的方法。通过专有网络VPC数据源的配置，您可以将专有网络VPC内的数据库接入到DataV中，并作为组件的数据源进行大屏展示。背景信息 了解专有网络VPC，详情请参见 什么是...
从Amazon RDS MySQL迁移至阿里云
DTS会自动地在阿里云RDS MySQL中创建数据库，如果待迁移的数据库名称不符合阿里云RDS的定义规范，您需要在配置迁移任务之前在阿里云RDS MySQL中创建数据库。说明 关于阿里云RDS的定义规范和创建数据库的操作方法，请参见 创建数据库。对于...
从Amazon Aurora MySQL迁移至PolarDB MySQL版
如果源数据库没有主键或唯一约束，且所有字段没有唯一性，可能会导致目标数据库中出现重复数据。对于数据类型为FLOAT或DOUBLE的列，DTS会通过 ROUND(COLUMN,PRECISION)来读取该列的值。如果没有明确定义其精度，DTS对FLOAT的迁移精度为38位...
从Amazon RDS MySQL迁移至阿里云
DTS会自动地在阿里云RDS MySQL中创建数据库，如果待迁移的数据库名称不符合阿里云RDS的定义规范，您需要在配置迁移任务之前在阿里云RDS MySQL中创建数据库。说明 关于阿里云RDS的定义规范和创建数据库的操作方法，请参见 创建数据库。对于...
从Amazon Aurora MySQL迁移至阿里云
DTS会自动地在阿里云RDS MySQL中创建数据库，如果待迁移的数据库名称不符合阿里云RDS的定义规范，您需要在配置迁移任务之前在阿里云RDS MySQL中创建数据库。说明 关于阿里云RDS的定义规范和创建数据库的操作方法，请参见 创建数据库。对于...
- 产品推荐
- 这些文档可能帮助您