创建Tablestore数据源
依次单击 数据源管理->数据源->新建数据源。在 新建数据源 对话框的 NoSQL 区域，选择 Tablestore。如果您最近使用过Tablestore，也可以在 最近使用 区域选择Tablestore。同时，您也可以在搜索框中，输入Tablestore的关键词，快速搜索。在 ...
SQL Console初体验
当您成功在DMS上登录数据库后，可在SQL Console中进行创建数据库、创建表、查询表数据、变更表数据等操作。本文以在RDS MySQL数据库中进行操作举例。创建数据库 在RDS控制台创建数据库 访问 RDS实例列表，在上方选择地域，然后单击目标实例...
通过DMS管理MongoDB数据库
数据管理DMS是一种集数据管理、结构管理、研发流程、用户管理、权限管理、访问安全于一体的数据管理服务。其支持管理MySQL、SQL Server等关系型数据库，及MongoDB、Redis等NoSQL数据库。通过DMS连接MongoDB实例，可以更安全便捷地管理...
功能简介
同时，全景监控提供统一的监控接入标准，全方位对接各种应用系统监控信息，实现覆盖所有系统、全流程的监控管理。数据全链路保障是指通过采集数据汇聚、数据融合、数据分析挖掘等阶段的各项任务状态信息，对异常状态进行预警和处置，实现对...
全景监控
同时，全景监控提供统一的监控接入标准，全方位对接各种应用系统监控信息，实现覆盖所有系统、全流程的监控管理。数据全链路保障是指通过采集数据汇聚、数据融合、数据分析挖掘等阶段的各项任务状态信息，对异常状态进行预警和处置，实现对...
功能简介
同时，全景监控提供统一的监控接入标准，全方位对接各种应用系统监控信息，实现覆盖所有系统、全流程的监控管理。数据全链路保障是指通过采集数据汇聚、数据融合、数据分析挖掘等阶段的各项任务状态信息，对异常状态进行预警和处置，实现对...
什么是Dataphin
管理中心 全局规划 基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前，需要完成数据仓库的规划，包括定义业务板块、数据域、项目、数据源、计算源和统计周期。数仓规划 数据引入 基于...
应用场景
解决方案：数据融合：通过数据引入功能，将业务系统数据集成、融合一体，统一基础数据。数据建模：通过规范建模功能，结合业务发展需求，自顶向下设计标准的数据模型，统一公共数据。数据生产：基于建模后系统代码自动化托管生产功能，快速...
使用限制
使用限制 为保障软件系统稳定，Dataphin有部分使用上的限制或建议，详情如下表所示。功能项 操作项 使用限制/建议 管理中心 成员管理 超级管理员（即超管）是您购买Dataphin后，由系统初始化自动生成的角色。您的阿里云主账号即为超级管理...
创建PolarDB数据源
依次单击 数据源管理->数据源->新建数据源。在 新建数据源 对话框的 关系型数据库 区域，选择 PolarDB。如果您最近使用过PolarDB，也可以在 最近使用 区域选择PolarDB。同时，您也可以在搜索框中，输入PolarDB的关键词，快速筛选。在 新建...
确定需求
业务调研 充分的业务调研和需求分析是数据仓库建设的基石，直接决定数据仓库能否建设成功。在数仓建设项目启动前，您需要请相关的业务人员介绍具体的业务，以便明确各个团队的分析员和运营人员的需求，沉淀出相关文档。您可以通过调查表和...
数据模型架构规范
按数据域划分：命名时按照CDM层的数据进行数据域划分，以便有效地对数据进行管理，以及指导数据表的命名。例如，“交易”数据的英文缩写可定义为“trd”。按业务过程划分：当一个数据域由多个业务过程组成时，命名时可以按业务流程划分。...
确定需求
业务调研 充分的业务调研和需求分析是数据仓库建设的基石，直接决定数据仓库能否建设成功。在数仓建设项目启动前，您需要请相关的业务人员介绍具体的业务，以便明确各个团队的分析员和运营人员的需求，沉淀出相关文档。您可以通过调查表和...
数据保护伞入门
数据保护伞 是一款数据安全管理产品，提供数据发现、数据脱敏、数据水印、访问控制、风险识别、数据溯源等功能，帮助您快速梳理敏感数据并进行安全管控，保障数据安全。本文示例使用内置规则对 xc_dpe_e2_dev 项目的 phone 数据脱敏，并...
数据库管理
以Database为粒度的时序数据管理功能 Database是时序表的集合，用户可以根据业务需求将拥有相同业务背景的时序表保存在一起，从而实现数据隔离。另一方面，Lindorm时序引擎的一系列功能也都是以Database为粒度提供给用户使用的。包括以下...
数据风险点监控
离线数据风险点监控 数据准确性 数据准确性是数据质量的关键，也是所有离线系统加工时的第一保障要素，详情请参见 概述。下面为您介绍使用DataWorks的数据质量（DQC）保障MaxCompute离线数据的准确性。说明 执行数据质量需使用DataWorks...
创建MaxCompute数据源
背景信息 MaxCompute即阿里云大数据计算服务，适用于数据分析场景的企业级SaaS（Software as a Service）模式云数据仓库，以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化...
创建MaxCompute数据源
背景信息 MaxCompute即阿里云大数据计算服务，适用于数据分析场景的企业级SaaS（Software as a Service）模式云数据仓库，以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化...
产品概述
产品描述 Dataphin是集产品、技术、方法论于一体的智能大数据平台建设引擎，为您提供数据引入、规范定义、建模研发、资产管理、数据服务等全链路智能数据建设及治理服务。功能 描述 Dataphin全托管 全托管又称公共云多租户模式，只需购买...
LTS（原BDS）服务介绍
可以通过LTS将RDS数据实时同步到Lindorm宽表实现冷热数据分离，Lindorm宽表提供自动水平扩展、高并发查询、多维索引、轻量分析，Lindorm Streams提供变更数据有序订阅，LTS还支持将Lindorm 宽表数据同步到其它分析系统进行复杂数据分析。
版本发布记录
从SLS同步 2020年05月 功能名称 描述 相关文档 接入数据管理服务DMS 云数据库ClickHouse 接入数据管理服务DMS，支持在线库、表管理，在线数据查询，在线SQL任务编排调度。无 2020年02月 功能名称 描述 相关文档 增加新规格 在此前发布的C8...
添加Dataphin成员
用户角色 该用户角色为全局角色，包括系统管理员、数据源管理员、安全管理员、质量管理员、跨租户发布使用人、数据标准管理员和标签业务员。添加的成员需要授予全局角色，则 此处选择相应的角色，单个用户支持配置多个角色，详细说明如下：...
什么是数据传输服务DTS
数据传输服务DTS（Data Transmission Service）是阿里云提供的实时数据流服务，支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助您构建...
划分数据域
通常，您需要阅读各源系统的设计文档、数据字典和数据模型，研究逆向导出的物理数据模型。进而，可以进行跨源的主题域合并，跨源梳理出整个企业的数据域。数据域是指面向业务分析，将业务过程或者维度进行抽象的集合。为保障整个体系的生命...
Catalog概述
本文为您介绍什么是Catalog（数据目录），以及如何使用Catalog管理和查询内外部数据。基本概念 内部数据：保存在StarRocks中的数据。外部数据：保存在外部数据源（例如Apache Hive、Apache Iceberg和Apache Hudi）中的数据。Catalog ...
手动添加数据源
您可以通过 数据库备份DBS 的手动添加数据源功能，将不同环境的数据库添加至 数据库备份DBS 中，便于后续对数据源进行管理与备份。费用说明 添加数据源操作不会产生费用，只有在添加数据源后开启备份才会产生费用。如何开启备份，请参见 ...
MongoDB 4.0
如果应用连接的是数据库的虚拟IP，则与数据库的连接会断开。说明 建议使用ConnectionstringURI地址来连接实例以保障高可用性，副本集实例请参见 副本集实例连接说明，分片集群实例请参见 分片集群实例连接说明。副本集实例设置主备切换 ...
数据表
在左侧导航栏，选择 系统资产 管理>数据表管理。单击 MaxCompute 页签，在 关键字 文本框中输入“dws_ren_kh_demo_di”，单击 查询。预期结果 在数据表资产管理中，可查看到已物理化的数据表“dws_ren_kh_demo_di。说明 除了上述通过物理化...
连接方式概述
ODC 支持连接 OceanBase 数据库的 MySQL 租户和 Oracle 租户，同时为数据库开发者提供了数据库日常开发操作、WebSQL、SQL 诊断、会话管理和数据导入导出等功能。使用 OceanBase 开发者中心连接 OceanBase 租户的具体操作示例请参见 通过 ...
概览
集群管理系统的概览页面提供了 云原生多模数据库 Lindorm 实例宽表引擎中所有表的详细信息，包括表的大小、分片情况、数据预览、表结构、限流信息等。本文介绍如何通过集群管理系统管理宽表。前提条件 已登录目标实例的集群管理系统，具体...
创建AnalyticDB for MySQL 2.0数据源
更多云原生数仓AnalyticDB MySQL信息，请参见 云原生数据仓库AnalyticDB MySQL版-什么是云原生数据仓库AnalyticDB MySQL版。使用限制 Dataphin仅支持超级管理员、数据源管理员、板块架构师、项目管理员角色创建数据源。超级管理员、数据源...
术语表
一般都是一些被软件工程师用于为特定的软件包、软件实例、软件框架、硬件平台、操作系统、文档包等建立应用软件的开发工具的集合。MaxCompute支持 Java SDK 和 Python SDK。授权 项目管理员或者项目Owner可以授予其他角色对MaxCompute中的...
发布包总览概述
更多信息，请参见 管理数据架构待发布对象。研发：您可以对研发对象执行发布、查看版本详情、下载建表文件操作。更多信息，请参见 管理编码研发待发布对象。标签架构：您可以对标签架构对象执行发布、查看详情操作。更多信息，请参见 管理...
安全托管
如果实例开启了敏感数据保护，可以结合安全托管的敏感列权限对字段进行管控，系统将自动对敏感数据进行分类分级，且只允许有对应权限的用户查看敏感字段。更多信息，请参见 敏感数据保护概览。域账号可以实现细粒度权限管控吗？可以，首先...
DataWorks on EMR Serverless StarRocks最佳实践
更多关于StarRocks、EMR Serverless StarRocks的介绍请参见 什么是EMR Serverless StarRocks。也可查找钉钉群号：24010016636，加入EMR Serverless StarRocks交流钉钉群。了解DataWorks on EMR Serverless StarRocks DataWorks作为阿里云一...
发布包总览概述
更多信息，请参见 管理数据架构待发布对象。研发：您可以对研发对象执行发布、查看版本详情、下载建表文件操作。更多信息，请参见 管理编码研发待发布对象。标签架构：您可以对标签架构对象执行发布、查看详情操作。更多信息，请参见 管理...
添加Dataphin成员
用户角色 该用户角色为全局角色，包括系统管理员、数据源管理员、安全管理员、质量管理员、跨租户发布使用人、数据标准管理员和标签业务员。添加的成员需要授予全局角色，则 此处选择相应的角色，单个用户支持配置多个角色，详细说明如下：...
文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
创建Log Service数据源
说明 通常情况下，生产数据源和开发数据源需配置非同一个数据源，以使开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。参数 描述 LogHub Endpoint Log Service的...
数据资产管理
公开资产 在左侧导航栏，选择 系统资产管理>数据表管理。在 数据表资产管理 页面，找到目标表 dws_ren_kh_demo_di，单击 操作 列的 修改目录。重要 没有修改目录的数据表或者API资产不能被公开。在 修改目录 面板，单击 添加所属目录，选择...
- 产品推荐
- 这些文档可能帮助您