查看识别规则运行记录
识别规则和基于血缘的继承任务每运行一次就会生成一条运行记录。...若有多个数据分级相同但数据分类不同，则扫描规则按照从高到低为：数据分类优先级>识别记录的更新时间>分类修改时间。识别规则扫描，不满足阈值条件的，则不会进入仲裁判断。
分析平台概述
Dataphin提供了简单、快速、高效的数据分析平台，您可通过数据分析对数据仓库中的数据进行洞察、在线查询及可视化分析，提取出有效信息而形成结论，辅助决策。前提条件 需开通智能研发版。分析平台简介 在分析平台上，您可选择您有权限的...
分析平台概述
Dataphin提供了简单、快速、高效的数据分析平台，您可通过数据分析对数据仓库中的数据进行洞察、在线查询及可视化分析，提取出有效信息而形成结论，辅助决策。前提条件 需开通智能研发版。分析平台简介 在分析平台上，您可选择您有权限的...
数仓规划概述
数仓规划是基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前，需要完成数据仓库的规划，包括定义数据板块、项目、数据源、计算源和统计周期。功能介绍 数仓规划包括逻辑空间与物理空间...
数据权限配置
数据权限策略可根据不同的数据等级指定不同的审批规则，能使审批人员着重于高敏感数据，对于公开的数据，可免除审批，从而降低权限审批的负担，本文为您介绍如何配置数据权限策略。权限说明 仅支持安全管理员对数据权限策略执行添加、编辑...
数据权限配置
数据权限策略可根据不同的数据等级指定不同的审批规则，能使审批人员着重于高敏感数据，对于公开的数据，可免除审批，从而降低权限审批的负担，本文为您介绍如何配置数据权限策略。权限说明 仅支持安全管理员对数据权限策略执行添加、编辑...
管理控制台介绍
数据安全支持定义数据的业务分类和安全等级，并构建敏感数据识别规则，同时支持设置敏感数据脱敏规则，以保障数据资产的安全性。如果您选择了 资产治理，下方展示 治理项管理 和 治理工作台 增值功能。更多信息请参见 资源治理概述。资产...
管理控制台介绍
数据安全支持定义数据的业务分类和安全等级，并构建敏感数据识别规则，同时支持设置敏感数据脱敏规则，以保障数据资产的安全性。如果您选择了 资产治理，下方展示 治理项管理 和 治理工作台 增值功能。更多信息请参见 资源治理概述。资产...
智能问答
仪表板的智能问答功能支持通过简单的自然语言，从指定的数据集中快速生成分析图表，并保存到仪表板中。本文为您介绍智能问答的使用方法。重要 仪表板内的智能问答_公测期结束，后续不再支持使用及订购；自24年4月1日起，新客户不再支持该...
数仓规划概述
数仓规划是基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前，需要完成数据仓库的规划，包括定义数据板块、项目、数据源、计算源和统计周期。功能介绍 数仓规划包括逻辑空间与物理空间...
通知设置
资源用量：用于数据处理单元、数据标准、智能运维等资源统计用量情况的通知。租户管理：用于租户设置变更的通知。系统消息：用于元数据获取异常等系统异常的通知。操作步骤 在Dataphin首页，按照下图操作指引，进入 通知中心。单击左侧导航...
租户设置
通过创建多个租户，可以对不同租户分配不同的数据单元以及功能模块，并能够保证租户间数据隔离，满足不同租户的不同要求。本文为您介绍如何新建、编辑、删除以及恢复租户。权限说明 仅元仓租户的超级管理员与系统管理员支持新建及管理租户...
通知设置
资源用量：用于数据处理单元、数据标准、智能运维等资源统计用量情况的通知。租户管理：用于租户设置变更的通知。系统消息：用于元数据获取异常等系统异常的通知。操作步骤 在Dataphin首页，按照下图操作指引，进入 通知中心。单击左侧导航...
资产质量概述
资产质量基于Dataphin平台，为数据的开发及使用提供全套的数据质量解决方案。数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。前提条件 已购买资产质量增值服务，详情请参见 开通Dataphin。背景信息 面对各行...
资产质量概述
资产质量基于Dataphin平台，为数据的开发及使用提供全套的数据质量解决方案。数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。前提条件 已购买资产质量增值服务并且当前租户已开通资产质量模块。背景信息 面对...
管理中心概述
智能引擎 智能引擎 配置计算和存储资源的参数规则，优化逻辑表任务、SQL查询任务及设置查询引擎，以提高数据构建效率。变更管控 创建变更策略 变更策略是根据您已经创建好的变更规则，设置其生效范围和管控方式。支持在单个变更策略中配置...
数据源管理
可以单击 添加时段，添加多个时段，最多添加10个。参数 描述 生效时段 设置限速生效时段。最大并行规则数 设置最大并行规则数。不能超过1000。操作 时段超过两个时，单击 图标可删除时段。设置完成后，即可在 数据源管理 页面，查看限速...
数据源管理
可以单击 添加时段，添加多个时段，最多添加10个。参数 描述 生效时段 设置限速生效时段。最大并行规则数 设置最大并行规则数。不能超过1000。操作 时段超过两个时，单击 图标可删除时段。设置完成后，即可在 数据源管理 页面，查看限速...
数据服务系统配置
运维监控统计数据可帮助您查看最近...例如当天日期为2023-04-30，配置了统计数据存储周期最近为30天，且单次查询跨度小于等于7天，即可选择的日期为2023-03-31至2023-04-30且单次最多查询7天的数据，即开始时间和结束时间的长度不能大于7天。
变更管控
变更管控功能是指在变更环节（如提交、发布、运维操作等），通过配置管控规则及生效范围，在执行变更前进行相应的校验，并根据规则校验结果决定是否可以通过该环节的约束，从而避免非预期的数据变更或者误删除等高危操作，影响下游业务使用...
变更管控
变更管控功能是指在变更环节（如提交、发布、运维操作等），通过配置管控规则及生效范围，在执行变更前进行相应的校验，并根据规则校验结果决定是否可以通过该环节的约束，从而避免非预期的数据变更或者误删除等高危操作，影响下游业务使用...
变更管控概述
适用场景 发布管控常用但不限于以下几种场景：时间节点管控：在某些特殊时间节点，禁止发布新的任务或更新历史任务，防止数据计算口径变更带来的影响，如财年末封账、财务审计、双11大促管控、集群切换保障等场景。研发规范管控：根据某些...
变更管控概述
适用场景 发布管控常用但不限于以下几种场景：时间节点管控：在某些特殊时间节点，禁止发布新的任务或更新历史任务，防止数据计算口径变更带来的影响，如财年末封账、财务审计、双11大促管控、集群切换保障等场景。研发规范管控：根据某些...
创建FTP数据源
通过创建FTP数据源能够实现Dataphin读取FTP的业务数据或向FTP写入数据。本文为您介绍如何创建FTP数据源。背景信息 FTP即文件传输协议。如果您使用的是FTP，在对接Dataphin进行数据开发或将Dataphin的数据写入至FTP的场景中，您需要先完成...
创建FTP数据源
通过创建FTP数据源能够实现Dataphin读取FTP的业务数据或向FTP写入数据。本文为您介绍如何创建FTP数据源。背景信息 FTP即文件传输协议。如果您使用的是FTP，在对接Dataphin进行数据开发或将Dataphin的数据写入至FTP的场景中，您需要先完成...
运行配置
说明 配置参数支持 0.01（小数点末尾最多2位小数）～168小时。重跑配置 修改完成后单击 确定。在弹出的 确认修改系统配置 提醒对话框中，单击 确定。重要 修改后，运行属性设置为系统配置的任务对应的实例（包括修改后新生成的、以及已生成...
运行配置
说明 配置参数支持 0.01（小数点末尾最多2位小数）～168小时。重跑配置 修改完成后单击 确定。在弹出的 确认修改系统配置 提醒对话框中，单击 确定。重要 修改后，运行属性设置为系统配置的任务对应的实例（包括修改后新生成的、以及已生成...
配置Oracle输出组件
同步其他数据源的数据至Oracle数据源的场景中，完成源数据的信息配置后，需要配置Oracle输出组件的目标数据源。本文为您介绍如何配置Oracle输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。按照下图指引...
配置Oracle输出组件
同步其他数据源的数据至Oracle数据源的场景中，完成源数据的信息配置后，需要配置Oracle输出组件的目标数据源。本文为您介绍如何配置Oracle输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。按照下图指引...
逻辑表运行配置
最多2位小数。失败自动重跑 该任务实例、补数据实例运行失败，会按照配置决定是否自动重跑。默认选项：系统默认选择。根据系统运维板块租户级的运行配置所配置的重跑配置参数为默认值。配置租户级运行配置请参见：运行配置。自定义：重跑...
逻辑表运行配置
最多2位小数。失败自动重跑 该任务实例、补数据实例运行失败，会按照配置决定是否自动重跑。默认选项：系统默认选择。根据系统运维板块租户级的运行配置所配置的重跑配置参数为默认值。配置租户级运行配置请参见：运行配置。自定义：重跑...
计算任务运行配置
最多2位小数。失败自动重跑 该任务实例、补数据实例运行失败，会按照配置决定是否自动重跑。默认选项：系统配置根据系统运维板块租户级的运行配置所配置的 失败自动重跑 参数为默认选项。详情可参见：运行配置。自定义：重跑次数支持输入0...
计算任务运行配置
最多2位小数。失败自动重跑 该任务实例、补数据实例运行失败，会按照配置决定是否自动重跑。默认选项：系统配置根据系统运维板块租户级的运行配置所配置的 失败自动重跑 参数为默认选项。详情可参见：运行配置。自定义：重跑次数支持输入0...
新建补数据任务
补数据任务能够支持您以不同的调度方式对历史数据进行回刷。对于需要定期进行补数据的场景，您可以通过补数据的定时调度功能进行定期补数据；对于经常补数据的节点，但补数据时间及补数据业务日期不确定的场景，您可以通过创建手动运行的补...
新建补数据任务
补数据任务能够支持您以不同的调度方式对历史数据进行回刷。对于需要定期进行补数据的场景，您可以通过补数据的定时调度功能进行定期补数据；对于经常补数据的节点，但补数据时间及补数据业务日期不确定的场景，您可以通过创建手动运行的补...
查询数据代码说明
使用限制 Dataphin最多返回10000条查询结果的记录。您可以在查询语句后增加 limit 返回条数，自定义返回记录的条数，例如 select*from ht5_out limit 20;即返回20条记录。注意事项 查询数据过程中，如果任务执行超过2小时仍然没有结束，则...
查询数据代码说明
使用限制 Dataphin最多返回10000条查询结果的记录。您可以在查询语句后增加 limit 返回条数，自定义返回记录的条数，例如 select*from ht5_out limit 20;即返回20条记录。注意事项 查询数据过程中，如果任务执行超过2小时仍然没有结束，则...
配置Amazon S3输入组件
配置Amazon S3输入组件后，可以读取Amazon S3数据源中的数据至Dataphin，进行数据集成与数据开发。本文为您介绍如何配置Amazon S3输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建Amazon S3数据源。具体操作，请参见 ...
配置Kudu输入组件
配置Kudu输入组件后，可以读取Kudu数据源中的数据至Dataphin，进行数据集成与数据开发。本文为您介绍如何配置Kudu输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建Kudu数据源。具体操作，请参见 创建Kudu数据源。进行...
配置Log Service输入组件
批量条数 一次读取的数据条数，系统默认为256，最多为1000条。输出字段 为您展示输出的字段，您也可以通过以下两种方式添加字段：单击右侧的 新建输出字段，填写 来源序号、字段 及选择字段的 类型，单击非该字段显示的区域。单击右侧的 ...
- 产品推荐
- 这些文档可能帮助您