产品架构
数据管理DMS的产品架构分为三层：数据源、数据运营与管理和商业应用。数据源 关系型数据库：MySQL、SQL Server、PostgreSQL、PolarDB MySQL版、PolarDB PostgreSQL版（兼容Oracle）、PolarDB分布式版、OceanBase、Oracle、达梦DamengDB等。...
用户价值
数据运营更高效：遵循应用先行、以用带存、由存而通、因通促用的理念，实现城市数据运营，驱动客户业务创新。用户角色 功能 能力 详述 数据生产方 数据开发 设计数据模型 开发数据加工逻辑 设计标准、稳定的数据模型：通过数据标准和数据...
作业开发入门概述
ODS：数据运营层，对源数据进行ETL处理。在实际业务中，ODS层会从数据源抽取数据。为了确保新用户能够轻松完成入门教程，本教程中将向ODS层写入测试数据。DWD：数据明细层，对ODS层数据进行清洗、过滤等处理。本教程以过滤为例。ADS：数据...
国产化支持
PolarDB PostgreSQL版（兼容Oracle）的国产化能力主要体现在国产化芯片及操作系统支持情况。随着国际环境日益复杂，很多线下客户都提出了国产...国产化数据库已经有比较长的发展历史，但目前整体的产品成熟度比较低、商业化市场规模也比较小。
应用场景
本章节将为您介绍CDP产品的应用场景。现代数据仓库 运营数据库 准实时分析 流式处理和分析
运营数据
运营数据报表支持您查看已上线游戏的运营总览数据、运营日报表、运营周报表和运营月报表，帮助您更准确地了解游戏运营情况。1.点击【数据报表-运营数据】，点击【项目名称】下拉框选择您需要查看的项目报表。根据您的需要，对平台类型/日期...
保险行业解决方案与案例
对原生产数据库的高兼容性，帮助客户实现业务平滑迁移到PolarDB国产数据库，用户的使用习惯基本不变，数据库平台非常方便的对接用户内部各类系统和监控告警平台。DTS迁移工具同时提供数据回写原生产库，确保支持回切并同步至流处理平台进行...
简介
数据工作站可以结合大语言模型给业务开发、数据开发、分析师和数据运营同学赋能，提升数据交付效率和数据自助分析的效率。当您需要将查询的数据、测试的数据、以及数据变化趋势等信息，以文档的形式进行交付，并在交付后，希望有可以替您...
客户案例
客户简介 DeNA是优秀的网络服务公司，随着游戏项目的生命周期越来越短，项目的各个阶段走向实时、精准的把控，需要构建经济、高效的精细化数据运营体系。客户需求 存在Hadoop1.0、2.0两个集群，技术架构复杂，平台的稳定性和安全性、资源的...
应用场景
例如：运营数据看板、地理数据看板、城市交通看板、指挥中心看板等。您可以 开通DataV服务，体验DataV数据可视化内各类优质可视化应用模板，快速搭建属于自己的可视化应用。运营数据看板 地理数据看板 城市交通看板 指挥中心看板
应用场景
例如：运营数据看板、地理数据看板、城市交通看板、指挥中心看板等。您可以 开通DataV服务，体验DataV数据可视化内各类优质可视化应用模板，快速搭建属于自己的可视化应用。运营数据看板 地理数据看板 城市交通看板 指挥中心看板
调试实时任务
手动输入数据 适用于采集的数据比较少，或者需要修改已采集到的数据的场景。自动抽样数据 自动抽样到的数据是随机的，所以适用于对采集到的数据没有限制的场景。针对HBase、MySQL、MaxCompute、DataHub、Kafka数据源支持自动抽样数据，您可...
数据投递
应用场景 数据投递功能适用于以下任一场景：源端为DTS同步方案暂不支持的数据库类型，例如国产数据库。源端为日志数据、特殊数据类型等。出于安全等原因，源端不能直接连接DTS，例如源库账号密码不能暴露。前提条件 已创建用于接收数据的...
调试实时任务
Session集群调试方式：即通过Session集群进行调试，调试的数据为 线上的真实数据 且为 流式数据（即来源表中写入数据时，将直接输出该条数据的计算结果，与真实线上运行任务的结果一致）。该方式下，Session集群提供Flink任务状态、日志和...
表设计规范
数据集市的数据比较容易生成，所以无需保留久远的历史数据。按数据变更规划数据的保存方式：记录客户属性、产品属性的历史变化情况，以便追溯某个时点的值。在事实表里冗余维表的字段，即把事件发生时的各种维度属性值与该事件绑定起来。...
什么是数据资源平台
阿里云数据资源平台是数据资产定义、加工、管理、服务的全流程平台，提供数据同步、数据查询、数据标准、数据建模、数据加工、质量评估、业务模型构建、资产管理、数据服务等功能，为智能数据应用持续稳定供给全量、标准、干净、智能的数据...
公告
加大国产化支持程度，新增支持南大通用Gbase 8a数据源、TiDB数据源、人大金仓KingBase数据源、GoldenDB数据源以及新增支持奇安信浏览器。数据标准体验优化，支持审批模板及公共属性配置，新增落标明细；安全识别规则升级，可查看任务执行...
水印使用限制
尽量选取数据取值比较多样的列嵌入水印，如果该列的值是可枚举穷尽的，则有可能因为特征不够导致提取失败。常见的适合嵌入水印的列如地址、姓名、UUID、金额、总数等，不适合嵌入水印的列如性别、状态等。嵌入水印后的数据会与原始值有差异...
应用场景
但数据体系复杂、数据不统一，数据分析速度和数据准确一致性难保障，战略决策与数据化运营受阻。解决方案：数据融合：通过数据引入功能，将业务系统数据集成、融合一体，统一基础数据。数据建模：通过规范建模功能，结合业务发展需求，自顶...
数据库迁移
说明 如果存在不一致数据，可单击 查看详情 查看不一致的概览信息，在概览信息对话框中单击 详情 查看不一致的具体数据：如果数据量比较少，可以通过手动修改的方式同步数据，如果数据量比较大，查明数据不一致的原因，清理目标数据库后...
数据加密
可信执行环境依赖Intel SGX 安全增强型规格提供对密文数据进行比较和其它常见计算，具体规格清单请参见 RDS PostgreSQL主实例规格列表。其它规格（非Intel SGX 安全增强型规格）：全密态功能可以利用密码学方法提供数据安全保护，此时其...
数据加密
可信执行环境依赖Intel SGX 安全增强型规格提供对密文数据进行比较和其它常见计算，具体规格清单请参见 RDS PostgreSQL主实例规格列表。其它规格（非Intel SGX 安全增强型规格）：全密态功能可以利用密码学方法提供数据安全保护，此时其...
数据加密
可信执行环境依赖Intel SGX 安全增强型规格提供对密文数据进行比较和其它常见计算，具体规格清单请参见 RDS PostgreSQL主实例规格列表。其它规格（非Intel SGX 安全增强型规格）：全密态功能可以利用密码学方法提供数据安全保护，此时其...
数据加密
可信执行环境依赖Intel SGX 安全增强型规格提供对密文数据进行比较和其它常见计算，具体规格清单请参见 RDS PostgreSQL主实例规格列表。其它规格（非Intel SGX 安全增强型规格）：全密态功能可以利用密码学方法提供数据安全保护，此时其...
应用场景
系统运维和业务实时监控 通过对大规模应用集群和机房设备的监控，实时关注设备运行状态、资源利用率和业务趋势，实现数据化运营和自动化开发运维。通过日志或者其他方式对原始指标数据进行采集和实时计算，最后将实时计算的结果数据存储到 ...
功能简介
运营主要面向租户资产管理员，为用户提供数据资产编目、上线、下线等能力。运营获取资产元数据信息，同步到数据资产目录完成数据资产注册。数据资产管理涉及三种用户角色，包括资产使用方、租户资产管理员、工作组管理员。资产使用方：主要...
数据安全治理的常见思路
数据安全治理通常分为资产梳理及分类分级、风险评估、建设能力等三个阶段，您可参考本文了解各阶段的具体目标。数据安全治理通常会经历如下阶段。阶段一：摸清家底 梳理资产摸清家底，产出《数据资产清单》。例如：本企业有哪些数据？服务...
功能简介
运营主要面向租户资产管理员，为用户提供数据资产编目、上线、下线等能力。运营获取资产元数据信息，同步到数据资产目录完成数据资产注册。数据资产管理涉及三种用户角色，包括资产使用方、租户资产管理员、工作组管理员。资产使用方：主要...
离线同步并发和限流之间的关系
在一些数据同步场景，脏数据的出现会导致任务同步效率下降，以关系数据库写出为例，默认是执行batch批量写出模式，在遇到脏数据时会退化为单条写出模式（以找出batch批次数据具体哪一条是脏数据，保障正常数据正常写出），但单条写出效率会...
数据保护伞概述
数据保护伞是一款数据安全管理产品，为您提供数据发现、数据脱敏、数据水印、访问控制、风险识别、数据溯源等多种功能，帮助您快速梳理敏感数据并进行安全管控，保障数据安全。本文为您介绍数据保护伞的使用流程、使用限制等内容。使用流程...
亿海蓝-航运大数据的可视化案例
——亿海蓝CTO 客户简介 亿海蓝是中国的航运大数据公司，做为中国最大的AIS数据服务运营商，发展目标是通过大数据技术推动全球航运物流与互联网的融合，加速航运产业转型升级。亿海蓝目前已为全球上百万行业用户提供数据服务，客户涵盖港口...
全球数据库市场发展与机遇
在国产云数据库中，阿里云通过持续的技术研发创新。在Gartner 2020年全球数据库魔力象限评选中，阿里云成功进入“领导者”象限。知名市场研究机构Forrester在最新发布的数据库评估报告《The Forrester Wave™:Database-As-A-Service,Q2 ...
什么是DataWorks
产品架构 DataWorks十多年沉淀数百项核心能力，通过 智能数据建模、全域数据集成、高效数据生产、主动数据治理、全面数据安全、数据分析服务六大全链路数据治理的能力，帮助企业治理内部不断上涨的“数据悬河”，释放企业的数据生产力。...
Quick BI连接MaxCompute
MaxCompute支持您将MaxCompute项目数据接入阿里云Quick BI，对海量数据进行实时在线分析服务，同时支持拖拽式操作和丰富的可视化效果，帮助您轻松自如地完成数据分析、业务数据探查、报表制作等工作。本文为您介绍如何使用Quick BI连接...
Redis实例间的单向数据同步
数据传输服务DTS（Data Transmission Service）支持Redis数据库的单向同步，适用于异地多活、数据异地容灾等多种应用场景。本文以Redis实例间的单向数据同步为例，介绍数据同步作业的配置流程。警告 完成数据同步作业的配置后，请勿变更源...
Redis实例间的单向数据同步
数据传输服务DTS（Data Transmission Service）支持Redis数据库的单向同步，适用于异地多活、数据异地容灾等多种应用场景。本文以Redis实例间的单向数据同步为例，介绍数据同步作业的配置流程。警告 完成数据同步作业的配置后，请勿变更源...
离线同步数据质量排查
如果写出数据和目标存储已有数据发生数据约束（主键冲突、唯一键约束、外键约束等），数据库则使用来源数据update更新目标表已有数据行，在目标表存在多个数据约束的情况下，数据替换可能会失败并产生脏数据 如果写出数据和目标存储已有...
从自建Redis迁移至阿里云Redis
若源数据库数据量比较大，可以适当增大 repl-timeout 参数的值。注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的资源，可能会导致数据库服务器负载上升。如果数据库业务量较大或服务器规格较低，可能会加重数据库压力，甚至导致...
支持的云服务
移动数据分析Quick A+Digital Analytics 移动数据分析Quick A+Digital Analytics是阿里云推出的一款移动App数据统计分析产品，为开发者提供一站式数据化运营服务。当移动数据分析自带的基础分析报表不能满足App开发者的个性化需求时，App...
区域下钻热力层（v2.x版本）
由于获取的JSON数据量比较大，不支持静态数据等配置，只能通过 URL 链接来访问。可下载上图中的完整 示例JSON文件。发布area_json数据文件，并获取URL。通过在线静态数据服务，将area_json发布成相应的文件，并获取URL，推荐您使用阿里云的...
- 产品推荐
- 这些文档可能帮助您