确定需求
建议您思考下列问题，对后续的数据建模将有巨大的帮助：业务数据是根据什么（维度、粒度）汇总的，衡量标准是什么？例如，成交量是维度，订单数是成交量的度量。明细数据层和汇总数据层应该如何设计？公共维度层该如何设计？是否有公共的...
数据保护伞入门
数据保护伞 是一款数据安全管理产品，提供数据发现、数据脱敏、数据水印、访问控制、风险识别、数据溯源等功能，帮助您快速梳理敏感数据并进行安全管控，保障数据安全。本文示例使用内置规则对 xc_dpe_e2_dev 项目的 phone 数据脱敏，并...
数据库管理
以Database为粒度的时序数据管理功能 Database是时序表的集合，用户可以根据业务需求将拥有相同业务背景的时序表保存在一起，从而实现数据隔离。另一方面，Lindorm时序引擎的一系列功能也都是以Database为粒度提供给用户使用的。包括以下...
数据风险点监控
在线数据风险点监控 在线业务系统的数据生成过程中必须确保数据质量，根据业务规则对数据进行监控。说明 MaxCompute本身未提供相应的监控工具，您可以借助DataWorks进行监控。详情请参见 概述。您可以对数据库表的记录进行规则校验，制定...
创建MaxCompute数据源
背景信息 MaxCompute即阿里云大数据计算服务，适用于数据分析场景的企业级SaaS（Software as a Service）模式云数据仓库，以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化...
创建MaxCompute数据源
背景信息 MaxCompute即阿里云大数据计算服务，适用于数据分析场景的企业级SaaS（Software as a Service）模式云数据仓库，以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化...
LTS（原BDS）服务介绍
可以通过LTS将RDS数据实时同步到Lindorm宽表实现冷热数据分离，Lindorm宽表提供自动水平扩展、高并发查询、多维索引、轻量分析，Lindorm Streams提供变更数据有序订阅，LTS还支持将Lindorm 宽表数据同步到其它分析系统进行复杂数据分析。
版本发布记录
从SLS同步 2020年05月 功能名称 描述 相关文档 接入数据管理服务DMS 云数据库ClickHouse 接入数据管理服务DMS，支持在线库、表管理，在线数据查询，在线SQL任务编排调度。无 2020年02月 功能名称 描述 相关文档 增加新规格 在此前发布的C8...
添加Dataphin成员
用户角色 该用户角色为全局角色，包括系统管理员、数据源管理员、安全管理员、质量管理员、跨租户发布使用人、数据标准管理员和标签业务员。添加的成员需要授予全局角色，则 此处选择相应的角色，单个用户支持配置多个角色，详细说明如下：...
什么是数据传输服务DTS
数据传输服务DTS（Data Transmission Service）是阿里云提供的实时数据流服务，支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助您构建...
东软案例
解决方案 东软集团围绕运营商、政务云和汽车等行业新一代数字信息系统IT运维场景海量监控数据存储分析痛点，将从遍布全国多地域的手机、平板等终端连接应用系统业务服务的数字足迹和客户数字体验数据、云端&数据中心网络抓包分析数据，应用...
划分数据域
通常，您需要阅读各源系统的设计文档、数据字典和数据模型，研究逆向导出的物理数据模型。进而，可以进行跨源的主题域合并，跨源梳理出整个企业的数据域。数据域是指面向业务分析，将业务过程或者维度进行抽象的集合。为保障整个体系的生命...
Catalog概述
本文为您介绍什么是Catalog（数据目录），以及如何使用Catalog管理和查询内外部数据。基本概念 内部数据：保存在StarRocks中的数据。外部数据：保存在外部数据源（例如Apache Hive、Apache Iceberg和Apache Hudi）中的数据。Catalog ...
手动添加数据源
您可以通过 数据库备份DBS 的手动添加数据源功能，将不同环境的数据库添加至 数据库备份DBS 中，便于后续对数据源进行管理与备份。费用说明 添加数据源操作不会产生费用，只有在添加数据源后开启备份才会产生费用。如何开启备份，请参见 ...
MongoDB 4.0
因此，无论选择什么时间切换，变更配置都会立即执行并生效，不会造成连接中断。变配过程中，可能会出现1~2次闪断现象，每次约30秒。您可以设置 时间切换 来指定变更配置的时间，避免变更配置影响业务运行。变配操作不会引起数据丢失。如果...
数据表
在左侧导航栏，选择 系统资产 管理>数据表管理。单击 MaxCompute 页签，在 关键字 文本框中输入“dws_ren_kh_demo_di”，单击 查询。预期结果 在数据表资产管理中，可查看到已物理化的数据表“dws_ren_kh_demo_di。说明 除了上述通过物理化...
概览
集群管理系统的概览页面提供了 云原生多模数据库 Lindorm 实例宽表引擎中所有表的详细信息，包括表的大小、分片情况、数据预览、表结构、限流信息等。本文介绍如何通过集群管理系统管理宽表。前提条件 已登录目标实例的集群管理系统，具体...
创建AnalyticDB for MySQL 2.0数据源
更多云原生数仓AnalyticDB MySQL信息，请参见 云原生数据仓库AnalyticDB MySQL版-什么是云原生数据仓库AnalyticDB MySQL版。使用限制 Dataphin仅支持超级管理员、数据源管理员、板块架构师、项目管理员角色创建数据源。超级管理员、数据源...
发布包总览概述
更多信息，请参见 管理数据架构待发布对象。研发：您可以对研发对象执行发布、查看版本详情、下载建表文件操作。更多信息，请参见 管理编码研发待发布对象。标签架构：您可以对标签架构对象执行发布、查看详情操作。更多信息，请参见 管理...
安全托管
如果实例开启了敏感数据保护，可以结合安全托管的敏感列权限对字段进行管控，系统将自动对敏感数据进行分类分级，且只允许有对应权限的用户查看敏感字段。更多信息，请参见 敏感数据保护概览。域账号可以实现细粒度权限管控吗？可以，首先...
发布包总览概述
更多信息，请参见 管理数据架构待发布对象。研发：您可以对研发对象执行发布、查看版本详情、下载建表文件操作。更多信息，请参见 管理编码研发待发布对象。标签架构：您可以对标签架构对象执行发布、查看详情操作。更多信息，请参见 管理...
DataWorks on EMR Serverless StarRocks最佳实践
更多关于StarRocks、EMR Serverless StarRocks的介绍请参见 什么是EMR Serverless StarRocks。也可查找钉钉群号：24010016636，加入EMR Serverless StarRocks交流钉钉群。了解DataWorks on EMR Serverless StarRocks DataWorks作为阿里云一...
添加Dataphin成员
用户角色 该用户角色为全局角色，包括系统管理员、数据源管理员、安全管理员、质量管理员、跨租户发布使用人、数据标准管理员和标签业务员。添加的成员需要授予全局角色，则 此处选择相应的角色，单个用户支持配置多个角色，详细说明如下：...
Catalog概述
本文为您介绍什么是Catalog（数据目录），以及如何使用Catalog查询内外部数据。基本概念 内部数据：保存在StarRocks中的数据。外部数据：保存在外部数据源（例如，Apache Hive、Apache Iceberg和Apache Hudi）中的数据。Catalog StarRocks ...
文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
创建Log Service数据源
说明 通常情况下，生产数据源和开发数据源需配置非同一个数据源，以使开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。参数 描述 LogHub Endpoint Log Service的...
数据资产管理
公开资产 在左侧导航栏，选择 系统资产管理>数据表管理。在 数据表资产管理 页面，找到目标表 dws_ren_kh_demo_di，单击 操作 列的 修改目录。重要 没有修改目录的数据表或者API资产不能被公开。在 修改目录 面板，单击 添加所属目录，选择...
常见问题概览
连接失败常见报错 连接实例常用方法概览 如何通过公网连接MongoDB实例 本地客户端通过SSL-VPN隧道连接MongoDB实例 MongoDB跨可用区内网访问实例 通过DMS管理MongoDB数据库 不同网络类型的ECS实例与MongoDB实例如何连接 ECS实例与MongoDB...
MongoDB 4.2
密钥管理服务KMS的更多信息，请参见 什么是密钥管理服务。云盘加密 云盘加密只能在创建实例时开启，且云盘加密功能开启后无法关闭。开启云盘加密后，实例生成的快照以及通过这些快照创建的云盘版实例将自动延续加密属性。密钥管理服务KMS ...
等值面层（v3.x版本）
详情请参见 管理数据过滤器。数据响应结果 实时展示了组件所使用的数据。当组件数据源发生变化时，数据响应结果会对应展示最新的数据。如果系统反应延迟，您可以单击右侧的 图标，查看数据响应结果，也可以单击右侧的 图标，获取组件的最新...
流式ETL
数据传输服务DTS提供的流式数据ETL（Extract Transform Load）功能是一种高效的实时数据加工工具。ETL支持通过可视化拖拉拽操作、Flink SQL语句配置任务，并结合DTS的高效流数据复制能力，可以实现流式数据的抽取、数据转换和加工、数据...
文档更新动态（2022年）
新增说明 新建和管理标准集、新建和管理数据标准、新建和管理落标映射规则、新建和管理标准代码（码表）、新建和管理词根、新建和管理标准集目录 2022年10月25日 资产安全脱敏算法、密钥管理、生产安全模式优化 支持底层脱敏和仅展示脱敏...
新功能发布记录
通过标签管理数据迁移项目 通过标签管理数据同步项目 支持在预检查步骤提供移除不符合条件的对象能力，方便用户轻松创建项目，提升产品易用性 数据迁移模块文档 支持在选择增量同步（不包含全量迁移的场景）下选择增量同步位点 2023 年 5 ...
数据表
在左侧导航栏，选择 系统资产管理＞数据表管理。在资产对象管理页面，选择表资产“dws_ren_kh_demo_di（银行客户信息）”，单击 操作 列的 修改目录。说明 没有编目的数据表资产不能被公开。在修改目录页面，单击+添加所属目录，选择“主题...
文档更新动态（2022年之前）
新功能 网络连通解决方案 2021年08月24日 数据服务：支持数据服务模块的数据查询加速、支持的数据源类型和版本拓展 为了满足对数据查询速度有要求的业务场景，Dataphin支持为项目添加加速计算源，且完成Dataphin数据源开发后，您可以手动...
API概览
本产品（数据库文件存储/2020-04-18）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，...
新建AnalyticDB for MySQL 3.0数据源
更多信息，请参见 云原生数据仓库AnalyticDB MySQL版-什么是云原生数据仓库AnalyticDB MySQL版。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作步骤 在Dataphin首页，单击顶部菜单栏的 ...
公开与隐藏数据表资产
在左侧菜单栏，选择 系统资产管理>数据表管理，进入数据表资产管理页面。可选：可通过多种方式筛选资产，以便快速定位目标资产。关键字：在 关键字 输入框，输入数据表名称或数据表描述的关键字，单击 查询，展示符合该条件的资产。所属...
公开与隐藏数据表资产
在左侧菜单栏，选择 系统资产管理>数据表管理，进入数据表资产管理页面。可选：可通过多种方式筛选资产，以便快速定位目标资产。关键字：在 关键字 输入框，输入数据表名称或数据表描述的关键字，单击 查询，展示符合该条件的资产。所属...
等值面层（v1.x版本）
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
- 产品推荐
- 这些文档可能帮助您