数据源管理
查看数据引用图层 选择任一数据，单击 图标，查看当前数据的引用图层，并支持跳转。查看数据表 选择任一数据，单击 图标，查看当前数据的数据表。重命名数据 选择任一数据，单击 图标下的 重命名，重命名当前数据。创建图层 选择任一数据，...
插入数据
注意：必须使用单引号将数据引用起来，数据的维数与 定义向量列 时指定的维度相同。明文：'[1,2,3,4]' 或者 '{1.0,2.0,3.0,4.0}' Base64编码：'MTIzNA=' 以下使用Base64解码完成byte[]数据类型和float[]数据类型的解码。public static ...
互联网、电商行业离线大数据分析
应用场景 电商网站数据看板。全国、全球业务的态势分析。互联网、金融行业的风险数据监控。方案介绍 实现互联网、电商行业离线大数据分析的流程如下：同步用户订单等数据至MaxCompute。通过DataWorks对原始数据进行处理，并形成开放API。以...
概述
每次保存时，一级备份并没有真正复制数据，当数据块有修改时系统会将其中一个历史版本的数据块保留给快照，同时生成新的数据块被原数据引用（Redirect）。因此无论数据库容量多少，都可以做到秒级备份。PolarDB 集群备份和恢复功能均采用多...
概述
每次保存时，一级备份并没有真正复制数据，当数据块有修改时系统会将其中一个历史版本的数据块保留给快照，同时生成新的数据块被原数据引用（Redirect）。因此无论数据库容量多少，都可以做到秒级备份。PolarDB 集群备份和恢复功能均采用多...
功能简介
通过数据标准的管理功能，模型设计者可通过设计标准数据元素，定义关键业务对象、业务对象属性及值域，规范标准数据字典，制定并管理平台遵循的统一数据标准，帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量。模型标准设计 ...
功能简介
通过数据标准的管理功能，模型设计者可通过设计标准数据元素，定义关键业务对象、业务对象属性及值域，规范标准数据字典，制定并管理平台遵循的统一数据标准，帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量。模型标准设计 ...
数据标准
数据字典管理：支持创建并维护逻辑表中使用的数据字典，方便用户在定义数据元或维度属性时进行数据字典引用，支持数据字典物理化、数据字典导入、导出，方便数据字典使用与跨项目复制。质量校验函数：支持质量检测函数自定义，方便用户在...
03创建数据元
通过配置数据元的类型、长度、质量校验函数和引用数据字典，为模型标准化设计及数据治理过程中的质量监控提供规则依据，本章节为您介绍如何新建数据元。前提条件 已新建工作组“信息中心(xxzx)”，具体操作，请参见 新建工作组。已在工作组...
TPC-DS数据
reducenum tab_reducenum_100 time_dim warehouse web_page web_returns web_sales web_site 100 GB BIGDATA_PUBLIC_DATASET TPCDS_100G 1 TB BIGDATA_PUBLIC_DATASET TPCDS_1T 10 TB BIGDATA_PUBLIC_DATASET TPCDS_10T 说明 表数据引用自...
概述
每次保存时，一级备份并没有真正复制数据，当数据块有修改时系统会将其中一个历史版本的数据块保留给快照，同时生成新的数据块被原数据引用（Redirect）。因此无论数据库容量多少，都可以做到秒级备份。PolarDB 集群备份和恢复功能均采用多...
新建数据字典
数据字典管理支持创建并维护数据模型中使用的数据字典，制定并管理平台遵循的统一数据标准，为数据元、指标、维度的值域设置中引用数据字典提供数据基础，帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量。本文为您介绍如何...
新建数据字典
数据字典管理支持创建并维护数据模型中使用的数据字典，制定并管理平台遵循的统一数据标准，为数据元、指标、维度的值域设置中引用数据字典提供数据基础，帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量。本文为您介绍如何...
功能简介
数据同步为用户提供批量、实时多源异构数据的便捷同步或接入能力，系统提供完善的数据接入配置、任务运行监控等功能，有效保障数据接入的稳定性和可控性，满足各类平台、数据源及应用系统间的数据汇聚需求。通过数据同步的自定义同步任务...
数据同步
数据同步提供批量、实时多源异构数据的便捷同步或接入能力，系统提供完善的数据接入配置、任务运行监控等功能，有效保障数据接入的稳定性和可控性，满足各类平台、数据源及应用系统间的数据汇聚需求。同时支持对存储在基于ArcGIS、超图等...
功能简介
数据同步为用户提供批量、实时多源异构数据的便捷同步或接入能力，系统提供完善的数据接入配置、任务运行监控等功能，有效保障数据接入的稳定性和可控性，满足各类平台、数据源及应用系统间的数据汇聚需求。同时支持对存储在基于ArcGIS、...
入门实践
设置后，您在引用数据标准时，数据类型、字段名称会沿用定义数据标准时定义的数据类型和字段名称。在左侧的数据模型下，右键单击 表>customer，选择 跳到当前主题。在右侧的数据视图页面，右键单击 customer 主题，选择 编辑字段。在 字段...
操作流程
新建数据字典并物理化 通过新建并维护数据模型中使用的数据字典，制定并管理平台遵循的统一数据标准，为数据元、指标、维度引用数据字典提供数据基础，帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量。具体操作，请参见 新建...
操作流程
新建数据字典并物理化 通过新建并维护数据模型中使用的数据字典，制定并管理平台遵循的统一数据标准，为数据元、指标、维度引用数据字典提供数据基础，帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量。具体操作，请参见 新建...
管理数据源权限
例如，多人修改数据源信息，可能导致数据源报错，以致于引用该数据源的任务运行失败。因此数据集成提供更加严格的权限管控功能，仅支持数据源的创建者对数据源进行权限管理，指定某个工作空间或者某个人对数据源的权限。数据源权限管理相关...
新建数据元
数据元管理通过分析业务流程，抽象关键业务对象和业务对象属性，并把关键业务对象新建为数据元，并配置数据元的类型、长度、质量校验函数和引用数据字典，为模型标准化设计及数据治理过程中的质量监控提供规则依据。本文介绍如何新建数据元...
新建数据元
数据元管理通过分析业务流程，抽象关键业务对象和业务对象属性，并把关键业务对象新建为数据元，并配置数据元的类型、长度、质量校验函数和引用数据字典，为模型标准化设计及数据治理过程中的质量监控提供规则依据。本文介绍如何新建数据元...
导入数据字典
为了创建完整的字段标准，需要先完善数据字典的管理，创建好数据字典后，可以用来规范数据标准字段的值域范围，...后续步骤 创建完数据字典后，需要物理化数据字典方便数据元、指标、维度的引用数据字典，具体操作，请参见 物理化数据字典。
创建数据表质量规则
质量规则配置说明 质量规则支持 自定义配置 和 引用数据标准监控（引用数据标准监控需开通数据标准模块）两种方式。自定义配置 是基于系统内置/自定义质量规则模板快速创建，也支持自定义SQL，满足灵活的监控诉求。引用数据标准监控 是引用...
导入数据字典
为了创建完整的字段标准，需要先完善数据字典的管理，创建好数据字典后，可以用来规范数据标准字段的值域范围，...后续步骤 创建完数据字典后，需要物理化数据字典方便数据元、指标、维度的引用数据字典，具体操作，请参见 物理化数据字典。
管理数据分类层级
数据分类层级用于从业务或组织架构视角出发，对数据分类进行分层管理。...删除：将删除当前所选分类层级及归属该层级下的所有数据分类，并删除数据分类对应的识别规则引用关系、识别结果、脱敏规则和脱敏白名单，请谨慎操作。
管理数据分类层级
数据分类层级用于从业务或组织架构视角出发，对数据分类进行分层管理。...删除：将删除当前所选分类层级及归属该层级下的所有数据分类，并删除数据分类对应的识别规则引用关系、识别结果、脱敏规则和脱敏白名单，请谨慎操作。
创建数据表质量规则
质量规则配置说明 质量规则支持 自定义配置 和 引用数据标准监控（引用数据标准监控需开通数据标准模块）两种方式。自定义配置 是基于系统内置/自定义质量规则模板快速创建，也支持自定义SQL，满足灵活的监控诉求。引用数据标准监控 是引用...
通过实时计算订阅数据
依次双击 DataHub 数据存储>项目名称（datahub_test_datav）>表名（mytable），选择右侧的 作为输入表引用，在开发作业中引用数据源。依次双击 RDS 数据存储>数据库名称（datav_test）>表名（target_table），选择右侧的 作为结果表引用，...
添加维度属性
通过添加维度属性，配置维度属性的字段类型、长度、质量校验函数和引用数据字典，为数据模型标准化设计及数据治理过程中的质量检测提供依据。本文介绍如何添加维度属性。前提条件 已新建维度，具体操作，请参见 新建维度。背景信息 在模型...
查看数据分类预置模型
Dataphin系统内置了数据分类的模型，以便用于识别规则的快速创建。本文为您介绍如何查看数据分类的预置模型。预置模型入口 在Dataphin首页，单击顶部菜单栏的 ...后续步骤 您可在识别规则中引用数据分类模型。详情请参见 新建及管理识别规则。
查看数据分类预置模型
Dataphin系统内置了数据分类的模型，以便用于识别规则的快速创建。本文为您介绍如何查看数据分类的预置模型。预置模型入口 在Dataphin首页，单击顶部菜单栏的 ...后续步骤 您可在识别规则中引用数据分类模型。详情请参见 新建及管理识别规则。
创建Redis数据源
表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema.table 的变量格式访问。更多信息，请参见 Dataphin数据源表开发方式。重要 目前仅支持 MySQL、Hologres...
创建OpenGauss数据源
表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema.table 的变量格式访问。更多信息，请参见 Dataphin数据源表开发方式。重要 目前仅支持 MySQL、Hologres...
创建OpenGauss数据源
表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema.table 的变量格式访问。更多信息，请参见 Flink_SQL任务开发方式。重要 目前仅支持 MySQL、Hologres、...
创建Lindorm数据源
表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema.table 的变量格式访问。更多信息，请参见 Dataphin数据源表开发方式。重要 目前仅支持 MySQL、Hologres...
创建Lindorm数据源
表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema.table 的变量格式访问。更多信息，请参见 Flink_SQL任务开发方式。重要 目前仅支持 MySQL、Hologres、...
创建Aliyun HBase数据源
表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema.table 的变量格式访问。更多信息，请参见 Dataphin数据源表开发方式。重要 数据源编码配置成功后不支持...
创建Teradata数据源
表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema.table 的变量格式访问。更多信息，请参见 Dataphin数据源表开发方式。重要 目前仅支持 MySQL、Hologres...
新建TDengine数据源
表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema.table 的变量格式访问。更多信息，请参见 Dataphin数据源表开发方式。重要 数据源编码配置成功后不支持...
- 产品推荐
- 这些文档可能帮助您