数据质量风险监控
数据质量风险监控主要针对数据的准确性、一致性和完整性。本教程使用DataWorks数据质量（DQC）功能，完成数仓各层次的数据质量监控。前提条件 首先您需要完成教程 搭建互联网在线运营分析平台，并保证您的DataWorks工作空间创建区域为华东2...
什么是边缘网络加速
产品优势 安全性 通信数据通过为企业搭建专用通道传输，不经公网，不担心私密数据被窃取。高速互通 多个分支直接进行内网通信，延迟低。快速接入 快速搭建连接企业自有网络与阿里云POP接入网关的专用通道，施工周期对比传统端到端接入方式...
系统账号说明
该账号具有 sysadmin 高级权限，以确保DTS服务能够获取到足够的权限来拉取源数据库的所有数据（例如Binlog等），保证数据迁移或同步的完整性和一致性。相关操作，请参见 数据迁移与同步。账号位置与用途：该账号仅在源端RDS SQL Server实例...
可视分析创作间和传统BI软件差异比较
预定义的报告 需要行业数据经验专家，搭建数据报表 分析过程需要理解：维度、度量、数据类型等统计知识 可视化数据的图表配置也需要专业数据分析人员支持 支持二次分析 不支持二次分析 数据分析结果 数据集产生的所有见解，提炼在数据...
开通DataV服务
本文为您介绍开通DataV服务的方法。操作步骤 登录 DataV控制台。阅读相关协议，并选中 同意使用协议，单击 立即开通。...后续步骤 购买成功后，可进入DataV数据可视化控制台，使用 模板搭建数据看板 或者 空白画布搭建数据看板。
功能特性
SSL加密 在传输层对网络连接进行加密，提升通信数据安全性的同时，保证数据的完整性，详情请参见 设置SSL加密。透明数据加密TDE 对数据文件执行实时I/O加密和解密，数据在写入磁盘之前进行加密，从磁盘读入内存时进行解密。TDE不会增加数据...
产品概述
阿里云流数据处理平台数据总线DataHub是流式数据（Streaming Data）的处理平台，提供对流式数据的发布(Publish)，订阅（Subscribe）和分发功能，让您可以轻松构建基于流式数据的分析和应用。数据总线 DataHub服务可以对各种移动设备，应用...
从Amazon RDS for PostgreSQL全量迁移至阿里云
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将Amazon RDS for ...说明 请勿手动结束迁移任务，否则可能会导致数据不完整。您只需等待迁移任务完成即可，迁移任务会自动结束。将业务切换至阿里云RDS PostgreSQL。
迁移MongoDB实例至其他地域
本文介绍如何使用数据传输服务DTS（Data Transmission Service），实现全量数据迁移和增量数据迁移MongoDB副本集实例至其他地域，全量数据迁移MongoDB单节点实例至其他地域。前提条件 源实例类型为单节点实例或副本集实例。如果源实例为分...
迁移MongoDB实例至其他地域
本文介绍如何使用数据传输服务DTS（Data Transmission Service），实现全量数据迁移和增量数据迁移MongoDB副本集实例至其他地域，全量数据迁移MongoDB单节点实例至其他地域。前提条件 源实例类型为单节点实例或副本集实例。如果源实例为分...
跨阿里云账号迁移MongoDB实例
全量数据迁移 请勿手动结束迁移任务，否则可能会导致数据不完整。您只需等待迁移任务完成即可，迁移任务会自动结束。增量数据迁移 迁移任务不会自动结束，需要手动结束迁移任务。观察迁移任务的进度变更为 增量迁移，并显示为 无延迟 状态...
跨阿里云账号迁移MongoDB实例
全量数据迁移 请勿手动结束迁移任务，否则可能会导致数据不完整。您只需等待迁移任务完成即可，迁移任务会自动结束。增量数据迁移 迁移任务不会自动结束，需要手动结束迁移任务。观察迁移任务的进度变更为 增量迁移，并显示为 无延迟 状态...
查看并管理运行记录
运行记录为您保存近15天的即席查询、运行计算任务、逻辑数据表预览、派生指标冒烟测试、资产数据预览、OpenAPI数据查询的记录。本文为您介绍如何查看运行记录。查看运行记录 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，...
查看并管理运行记录
运行记录为您保存近15天的即席查询、运行计算任务、逻辑数据表预览、派生指标冒烟测试、资产数据预览、OpenAPI数据查询的记录。本文为您介绍如何查看运行记录。查看运行记录 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，...
数据导入方式介绍
为满足多样化的数据导入需求，云原生数据仓库AnalyticDB MySQL版 提供了多种数据导入方式，包括：通过外表导入数据、使用DataWorks导入数据和利用JDBC通过程序导入数据等。本文介绍各导入方式的特性及适用场景，帮助您选择正确的数据导入...
从这里开始
DataV旨在让更多的人看到数据可视化的魅力，帮助非专业的工程师通过图形化的界面轻松搭建专业水准的数据看板，满足您会议展览、业务监控、风险预警和地理信息分析等多种业务的展示需求...开通DataV服务 模板搭建数据看板 空白画布搭建数据看板
从Amazon RDS for PostgreSQL全量迁移至阿里云
即需要在执行数据迁移前，停止Amazon RDS for PostgreSQL的相关业务，同时为了保障数据一致性，迁移期间请勿在Amazon RDS for PostgreSQL中写入新的数据。一个数据迁移任务只能迁移一个数据库，如果有多个数据库需要迁移，则需要为每个数据...
从自建Db2迁移至RDS MySQL
全量数据迁移 请勿手动结束迁移任务，否则可能导致数据不完整。您只需等待迁移任务完成即可，迁移任务会自动结束。增量数据迁移 迁移任务不会自动结束，您需要手动结束迁移任务。说明 请选择合适的时间手动结束迁移任务，例如业务低峰期或...
从自建Db2迁移至RDS MySQL
全量数据迁移 请勿手动结束迁移任务，否则可能导致数据不完整。您只需等待迁移任务完成即可，迁移任务会自动结束。增量数据迁移 迁移任务不会自动结束，您需要手动结束迁移任务。说明 请选择合适的时间手动结束迁移任务，例如业务低峰期或...
从自建MySQL迁移至PolarDB MySQL版
结构迁移+全量数据迁移 请勿手动结束迁移任务，否则可能会导致数据不完整。您只需等待迁移任务完成即可，迁移任务会自动结束。结构迁移+全量数据迁移+增量数据迁移 迁移任务不会自动结束，您需要手动结束迁移任务。重要 请选择合适的时间...
从Amazon RDS SQL Server全量迁移至阿里云
为保障数据一致性，数据迁移期间请勿在Amazon RDS SQL Server中写入新的数据。目标已存在表的处理模式 预检查并报错拦截：检查目标数据库中是否有同名的表。如果目标数据库中没有同名的表，则通过该检查项目；如果目标数据库中有同名的表，...
使用DTS将华为云文档数据库迁移至阿里云
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将华为云文档数据库迁移至阿里云MongoDB实例。DTS支持全量数据迁移及增量数据迁移，同时使用这两种迁移类型可以实现在本地应用不停服的情况下，平滑地完成数据库迁移。前提...
RDS MySQL修改字符集（平滑方案）
全量数据迁移 请勿手动结束迁移任务，否则可能导致数据不完整。您只需等待迁移任务完成即可，迁移任务会自动结束。增量数据迁移 迁移任务不会自动结束，您需要手动结束迁移任务。观察迁移任务的进度变更为 增量迁移，并显示为 无延迟 状态...
使用DTS将MongoDB Atlas数据库迁移至阿里云
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将MongoDB Atlas数据库增量迁移至阿里云。DTS支持全量数据迁移和增量数据迁移，同时选择这两种迁移类型可以实现在不停服的情况下，平滑地完成MongoDB Atlas数据库的迁移。...
使用DTS将MongoDB Atlas数据库迁移至阿里云
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将MongoDB Atlas数据库增量迁移至阿里云。DTS支持全量数据迁移和增量数据迁移，同时选择这两种迁移类型可以实现在不停服的情况下，平滑地完成MongoDB Atlas数据库的迁移。...
功能特性
数据迁移 数据迁移功能帮助您实现同构或异构数据源之间的数据迁移，适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景 功能集 功能 功能描述 参考文档 同构迁移 逻辑迁移 支持同构数据库间的数据迁移。自建MySQL...
配置自定义区域右上角组件数据
cityName":"昌平区","value":19 },{"area_id":110112,"provinceName":"北京","cityName":"通州区","value":17 },{"area_id":110111,"provinceName":"北京","cityName":"房山区","value":14 }/示例数据不完整，需要自己配置完整数据]注意 ...
质量规则参数配置
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
质量规则参数配置
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
准备工作
本文为您介绍在使用空白画布搭建数据看板前，需要完成的准备工作。准备内容 已开通DataV服务。已确定最终效果图样式。已根据效果图计算出需要添加的组件名称和数量。开通DataV服务 请参见 开通DataV服务。数据看板-最终效果图 数据看板-...
新功能发布记录
OceanBase 数据库之间的数据迁移 支持 TiDB 数据库至 OceanBase 数据库 MySQL 租户的结构迁移、全量迁移、增量同步、全量校验和反向增量 迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户 支持 PolarDB-X 1.0 数据库至 OceanBase ...
服务形态
单流形态，即单流Binlog日志变更（Global Binlog）能力，将所有DN的Binlog归并到同一个全局队列，提供了保证事务完整性和有序性的日志流，可以提供更高强度的数据一致性保证。例如，在转账场景下，基于Global Binlog，接入 PolarDB-X 的...
开启简单恢复模式
RDS SQL Server支持完整恢复（实例默认恢复模式）和简单恢复两种恢复模式，相较于实例默认的完整恢复模式，开启简单恢复模式后，实例将不再保留事务日志以及不再进行日志备份，但数据备份不受影响，能够有效减少实例存储空间和备份空间，...
添加数据集
DataV数据集支持多种数据源的接入，如数据库、excel表格文件等，通过对数据的结构化存储和元数据的汇集整理，提供高效实用的数据建模能力，可用的算子包括常见的数据聚合函数、按不同时间粒度划分、地理信息处理等。本文为您介绍如何在...
实验介绍
数据采集 数据加工 配置数据质量监控 数据可视化展现 目标人群 开发工程师、数据分析师、产品运营等存在数仓数据获取与数据分析洞察人员。涉及产品 本案例涉及以下产品：一站式大数据开发治理DataWorks 本案例通过DataWorks实现数据采集，...
元数据采集
支持的数据源及元数据采集方式 数据源类型 元数据采集方式 是否能在数据地图中看到采集器 元数据更新时效性 数据表/字段 分区 数据血缘 MaxCompute 数据开发-绑定数据源 自动启动采集 否 普通项目：实时 外部项目：T+1 国内地域：实时 海外...
快速体验
步骤 操作内容 阶段性目标 数据采集 通过 DataWorks数据集成 模块，将存储在MySQL中的用户信息数据及存储在OSS中采集的用户访问日志数据同步至MaxCompute，并提交调度系统，结合DataWorks调度参数实现周期性增量同步。学习如下内容：如何将...
产品优势
Compaction等等 建表语句 建表语句托管，用户透明 需要运维人员静态建表语句 监控报警体系 完整的自监控链路 依赖外部搭建 功能 数据模型 同时支持多值模型和单值模型 仅支持单值模型 SDK Java SDK 开源SDK不支持查询 数据类型多样性 ...
数据建模：智能数据建模
智能数据建模是阿里云DataWorks自主研发的智能数据建模产品，沉淀了阿里巴巴十多年来数仓建模方法论的最佳实践，包含数仓规划、数据标准、维度建模及数据指标四大模块，帮助企业在搭建数据中台、数据集市建设过程中提升建模及逆向建模的...
自建数据库与RDS性能对比的注意事项
您可以自行搭建数据库，或者购买阿里云RDS实例。推荐您购买RDS实例，因为它完全由阿里云托管，而且有完备的安全、备份、恢复、扩容、性能优化等机制，您无需执行各种安全措施（如搭建备库）和维护工作，只需专注于业务的发展和创新。关于自...
- 产品推荐
- 这些文档可能帮助您