什么是ETL
实时计算场景：对业务侧产生的流数据实时清洗处理，形成特征值、标签支持在线业务计算模型（画像、风控、推荐等）或实时大屏等流计算场景。优惠活动 目前ETL功能处于灰度公测阶段，仅部分用户可以使用。每个账号可以免费创建两个ETL实例，...
数据集成概述
复杂网络环境下的数据源同步 数据集成支持复杂网络环境下的数据源进行异构数据源间的数据同步，包括但不限于以下环境：数据源与DataWorks工作空间在同一个阿里云主账号，并且同一个Region。数据源与DataWorks工作空间不在同一个阿里云主...
阶段三：数据安全持续运营
不同企业对下载行为风控规则的定义存在差异，本文将以“实时阻断或审批超过1000条数据的下载行为”为例进行展示。实现原理 DataWorks的OpenEvent为您提供消息推送订阅的能力，同时，您可将服务程序注册为DataWorks的扩展程序，通过扩展程序...
DataWorks On Hologres使用说明
二、数据建模与开发 模块 描述 相关文档 数据建模 数据建模是全链路数据治理的第一步，沉淀阿里巴巴数据中台建模方法论，从数仓规划、数据标准、维度建模、数据指标四个方面，以业务视角对业务的数据进行诠释，让企业内部实现“数同文”的...
DataWorks On CDP/CDH使用说明
DataWorks 支持使用非阿里云ECS环境部署的CDP或CDH，但需确保部署CDP或CDH的环境和阿里云专有网络可连通。通常您可使用高速通道、VPN等网络连通方案来保障网络的连通性。详情请参见 注册CDH或CDP集群至DataWorks。已购买DataWorks独享调度...
开通Dataphin
在阿里云官网，鼠标悬停至 产品 后，再将鼠标悬停至左侧导航栏的 大数据计算 上，单击 数据开发与服务 列下的 智能数据建设与治理Dataphin。在Dataphin产品详情页，单击 特惠购买，进入Dataphin购买页面。在购买页面，选择 地域、版本、...
PolarDB-X适用场景
产品能力 PolarDB-X 是阿里云自研的云原生分布式数据库，具备国产化、自主可控的能力。另外，具有公有云、专有云、DBStack和软件版多种部署形态、完善的交付和服务团队，已经帮助百余家企业完成商业数据库替换、核心数据库系统分布式改造、...
安全白皮书
数据恢复 从备份集恢复至新实例：支持根据指定的RDB备份文件创建新实例，新实例中的数据将和该备份文件中的数据一致，可用于数据恢复、快速部署业务或数据验证等场景。通过数据闪回按时间点恢复数据：Tair（企业版）除支持通过RDB快照执行...
持久内存型
适用于兼容Redis、大容量、服务抖动稳定可控，数据持久化要求高的热温数据存储场景。优势项 说明 超高性价比 相同容量下对比阿里云 Redis社区版，价格降低30%左右。性能可达到原生Redis的90%。数据结构模块集成 支持 exString（包含 Redis ...
冷数据归档
本文介绍时序引擎的冷数据归档功能的使用方法。功能概要 在时序数据库持续写入的场景下，早先写入的时序数据会随着时间推移，查询频度逐渐降低。这样的数据通常被称为“冷数据”，与之相对的概念被称为“热数据”。随着冷数据体量的不断变...
持久内存型
适用于兼容Redis、大容量、服务抖动稳定可控，数据持久化要求高的热温数据存储场景。优势项 说明 超高性价比 相同容量下对比阿里云 Redis社区版，价格降低30%左右。性能可达到原生Redis的90%。数据结构模块集成 支持 exString（包含 Redis ...
安全基线检查
数据安全中心通过动态检测数据资产配置的方式，以数据为落脚点检测阿里云上数据库资产是否存在配置风险，例如身份验证、访问控制、加密、备份和恢复等方面的配置是否安全，这些检查策略和检查项统称为安全基线检查。安全基线检查功能可以帮...
元数据采集
DataWorks数据地图为您提供 元数据采集 功能，方便您将不同系统中的元数据进行统一汇总管理，您可以在数据地图查看从各数据源汇集而来的元数据信息。本文为您介绍如何创建采集器，将各数据源的元数据信息汇集至DataWorks。前提条件 您需要...
冷热分层
海量结构化数据Delta Lake架构 针对结构化冷热分层的数据场景，阿里巴巴集团推出了海量结构化数据的Delta Lake架构。基于Tablestore的通道服务，原始数据可以利用变更数据捕获CDC（Change Data Capture）技术写入多种存储组件中。示例 本...
新功能发布记录
专属存储中的数据转存至阿里云对象存储OSS 退订服务 新增 DMS 支持手动退订 数据管理-新版 包年包月的服务，您可通过DMS的订单释放入口，或直接在用户中心进行退订。退款说明 07月 功能名称 变更类型 功能描述 相关文档 设置审批流程 新增 ...
项目编辑器页面管理
选择地图数据集数量 单击地图右下角的数据集下拉列表，为当前地图选择显示一个合适的地图数据集数量值，可选 200条/数据集、400条/数据集600条/数据集、800条/数据集 和 1000条/数据集。重新加载 单击地图右下角的 重新加载，即可重新加载...
基本散点图
图表样式 基本散点图是使用散点来展示数据的一种图表，适用于展示不同时间下离散数据的差异。基本散点图支持自定义x轴、y轴以及散点的样式，支持多系列数据配置，支持提示框交互和动画效果展示。样式面板 搜索配置：单击 样式 面板右上角的...
项目编辑器页面管理
选择地图数据集数量 单击地图右下角的数据集下拉列表，为当前地图选择显示一个合适的地图数据集数量值，可选 200条/数据集、400条/数据集 600条/数据集、800条/数据集 和 1000条/数据集。重新加载 单击地图右下角的 重新加载，即可重新加载...
数据服务集群
DataServing是阿里云E-MapReduce提供的基于Apache HBase的数据服务集群类型。本文为您介绍数据服务集群支持的特性，适用场景以及技术架构。特性介绍 Apache HBase是具有高可靠性、高性能、列存储、可伸缩、实时读写的开源NoSQL分布式系统。...
使用ETL分析实时订单
实时计算场景：对业务侧产生的流数据实时清洗处理，形成特征值、标签支持在线业务计算模型（画像、风控、推荐等）或实时大屏等流计算场景。案例背景 本案例将为您演示如何使用流式ETL功能，将实时交易数据（订单号、客户ID、产品/商品编码...
DataWorks产品安全能力介绍
允许您将风险识别程序部署在本地，通过自研或第三方安全厂商的风控能力对云上相关操作进行实时识别、阻断、警告、审批，打破“云”与“本地”在进行数据安全治理时的边界。详情请参见 实时风险规则。说明 仅DataWorks企业版支持配置实时...
数据压缩与编码
压缩算法 目前阿里云平台支持压缩算法有：LZO、ZSTD、GZ、LZ4、SNAPPY NONE，其中NONE就代表不开启压缩。不同压缩算法在不同场景的压缩比，及解压速度对比如下，都是来自线上真实场景。业务类型 无压缩表大小 LZO（压缩率/解压速度MB/s）...
整体架构
云原生数据仓库AnalyticDB MySQL版 是阿里巴巴自主研发、经过超大规模以及核心业务验证的PB级实时数据仓库。概述 自2012年第一次在集团发布上线以来，AnalyticDB MySQL版 至今已累计迭代发布近百个版本，支撑起集团内的电商、广告、物流、...
访问控制
IP白名单 云数据库MongoDB提供了IP白名单来实现网络安全访问控制，支持为每个云数据库MongoDB实例单独设置IP白名单。默认情况下，MongoDB实例被设置为不允许任何IP访问，即127.0.0.1。您可以使用以下任意一种方法添加IP白名单。通过控制台...
访问控制
访问控制是指DMS中可以对查看与访问数据库、实例权限进行控制的功能，进一步保障企业的数据安全。背景信息 DMS作为企业内数据库统一管理入口，已为不同用户提供了访问不同数据的管控权限。DMS新推出的元数据访问控制功能将进一步加强企业的...
管理问题数据
数据质量支持您保留数据质量监控过程中从数据表中发现的非预期数据，帮助您快速排查、定位问题，提升数据质量。本文为您介绍如何管理数据质量监控过程中从数据表中发现的非预期数据。背景信息 问题数据表 数据质量支持在部分规则校验不通过...
用户价值
数据资源平台为用户提供了一站式数据资产定义、生产、管理与服务平台，提供企业级数据资产构建能力和一致性使用体验，助力客户快速构建数据智能平台，实现数据资源统一管理，挖掘潜在规律，优化业务决策，让大数据真正的驱动客户业务。...
功能优势
当您的数据库中有数据需要被保护时，可以使用RDS MySQL全密态数据库功能，该功能提供的加密解决方案能够在遵守数据保护法规的前提下保障您的数据安全，使被保护数据免受未授权访问。本文将详细介绍RDS MySQL全密态数据库功能的优势，帮助您...
受众与核心能力
产品受众 从事数据开发、算法开发等岗位的技术人员 从事销售运营、商业智能分析等岗位的业务人员 从事数据安全与合规工作的管理人员 从事数据应用开发的开发人员 把控公司核心数据资产的管理人员 核心能力 基于DataWorks，您可以获得如下...
创建MaxCompute数据源
若选择的MaxCompute项目与DataWorks工作空间不在同一个阿里云主账号下，则将MaxCompute项目添加为数据源后，该数据源不支持绑定为工作空间的计算引擎，即不支持在数据开发（DataStudio）、运维中心使用，仅用于数据集成模块进行数据同步。...
创建并管理数据源
若您想在DataWorks操作您的数据库或数据仓库（例如，MaxCompute项目数据），需先在DataWorks的数据源管理页面，将数据库或数据仓库创建为DataWorks的数据源，并将该数据源绑定至DataWorks相应的功能模块使用。例如，同步MaxCompute数据前，...
A100使用指南
为了给您提供更优质的数据库审计服务，阿里云已不支持新购数据库审计A100实例。如果您需要购买数据库审计实例，建议您购买C100或D100实例。如果您正在使用A100实例，请参考本文为您提供的A100产品介绍、产品计费、快速入门、用户指南访问...
核心能力
数据资源平台提供了一站式数据资产定义、生产、管理与服务平台，提供企业级数据资产构建能力和一致性使用体验，助力客户快速构建数据智能平台，实现数据资源统一管理，挖掘潜在规律，优化业务决策，让大数据真正的驱动客户业务。...
申请、续期和交还表权限
已生效数据表权限 您可以在数据表 已生效 页签查看数据表基本信息及对数据表执行续期及交还操作。区域 描述 ① 筛选及搜索区 支持按照 到期日期、表类型、表环境、数据板块、表所在项目、账号类型 进行筛选。支持按照数据表的名称、表所在...
申请、续期和交还表权限
已生效数据表权限 您可以在数据表 已生效 页签查看数据表基本信息及对数据表执行续期及交还操作。区域 描述 ① 筛选及搜索区 支持按照 到期日期、表类型、表环境、数据板块、表所在项目、账号类型 进行筛选。支持按照数据表的名称、表所在...
使用场景
包含但不限于如下场景：数据迁移与同步 使用DMS任务编排配置和管理数据迁移或数据同步任务，将数据从一个数据源迁移到另一个数据源，或实现同数据源、不同数据源之间的数据实时同步。数据清洗与加工 DMS任务编排可以用于数据清洗和加工任务...
访问控制
RDS通过多维度进行访问控制，保证数据安全。RDS提供如下两种方式创建数据库账号：通过RDS控制台或者API来 创建普通数据库账号，并设置数据库级别的只读、读写、DDL、DML权限。如果您需要更细粒度的权限控制，例如表、视图、字段级别的权限...
访问控制
RDS通过多维度进行访问控制，保证数据安全。RDS提供如下两种方式创建数据库账号：通过RDS控制台或者API来 创建普通数据库账号，并设置数据库级别的只读、读写、DDL、DML权限。如果您需要更细粒度的权限控制，例如表、视图、字段级别的权限...
访问控制
RDS通过多维度进行访问控制，保证数据安全。RDS提供如下两种方式创建数据库账号：通过RDS控制台或者API来 创建普通数据库账号，并设置数据库级别的只读、读写、DDL、DML权限。如果您需要更细粒度的权限控制，例如表、视图、字段级别的权限...
访问控制
RDS通过多维度进行访问控制，保证数据安全。RDS提供如下两种方式创建数据库账号：通过RDS控制台或者API来 创建普通数据库账号，并设置数据库级别的只读、读写、DDL、DML权限。如果您需要更细粒度的权限控制，例如表、视图、字段级别的权限...
- 产品推荐
- 这些文档可能帮助您