新建事实逻辑表
发布时，解析生产环境的表和字段血缘关系。单个任务提交或发布时支持解析不超过 10万条 血缘关系，超过则不予记录，在资产目录中无法展示。后续步骤 如果项目的模式为Dev-Prod，则您需要发布逻辑表至生产环境。具体操作，请参见 管理发布...
DataWorks On MaxCompute使用说明
扩展程序概述 附录：DataWorks与MaxCompute的关系 说明 简单模式工作空间仅一个生产环境，并且仅对应MaxCompute一个项目，本文以标准模式工作空间进行说明。DataWorks为MaxCompute提供任务调度、元数据管理、数据治理、数据安全管控等能力...
识别规则及识别方式
识别规则创建完成后，您可根据业务情况进行调整识别规则的扫描方式，支持定时扫描、手动扫描、实时扫描，此外，您也可配置基于血缘关系自动继承上游的分类分级，通过继承任务生成识别结果。本文为您介绍如何配置识别规则及识别结果的生成...
消费进度管理
背景信息 云消息队列 RocketMQ 版 的生产者和消费者在进行消息收发时，必然会涉及以下场景，消息先生产后订阅或先订阅后生产。这两种场景下，消费者客户端启动后从哪里开始消费？如何标记已消费的消息？这些都是由 云消息队列 RocketMQ 版 ...
识别规则及识别方式
识别规则创建完成后，您可根据业务情况进行调整识别规则的扫描方式，支持定时扫描、手动扫描、实时扫描，此外，您也可配置基于血缘关系自动继承上游的分类分级，通过继承任务生成识别结果。本文为您介绍如何配置识别规则及识别结果的生成...
资产全景及目录概述
支持表级及字段级血缘展示，通过数据血缘关系，获取数据生产的全链路信息，为您解决找数难、理解数据难的问题。支持在个人数据中心快捷查看自己所负责的资产。名词解释 元数据：是描述数据的数据（Data About Data），主要是描述数据属性的...
资产全景及目录概述
支持表级及字段级血缘展示，通过数据血缘关系，获取数据生产的全链路信息，为您解决找数难、理解数据难的问题。支持在个人数据中心快捷查看自己所负责的资产。名词解释 元数据：是描述数据的数据（Data About Data），主要是描述数据属性的...
调度依赖配置指引
依赖关系配置完成后，可通过 预览依赖、对比代码解析结果，查看周期任务确认配置时，发布前，发布生产后任务依赖关系是否符合预期。基于血缘配置调度依赖 DataWorks中，表血缘关系体现为产出表数据的节点间的依赖关系。在确认存在强血缘...
空间级模块权限管控
DataWorks通过空间级预设角色与MaxCompute开发环境引擎Role映射关系，来让被授予该空间预设角色的RAM用户拥有该角色映射的开发引擎Role权限，但默认无生产权限。关于MaxCompute引擎添加成员的底层授权过程，详情请参见 MaxCompute数据权限...
离线计算任务提交说明
完成离线计算任务开发并提交时，Dataphin系统将自动解析任务中表和字段的血缘关系及确认任务对象的变更类型、变更内容以及对您提交的计算任务进行前置检查，以确保您提交的任务符合提交条件，降低错误任务提交的可能性。血缘关系解析说明 ...
离线计算任务提交说明
完成离线计算任务开发并提交时，Dataphin系统将自动解析任务中表和字段的血缘关系及确认任务对象的变更类型、变更内容以及对您提交的计算任务进行前置检查，以确保您提交的任务符合提交条件，降低错误任务提交的可能性。血缘关系解析说明 ...
实时计算任务提交说明
完成实时计算任务开发并提交时，Dataphin系统将自动解析任务中表和字段的血缘关系及确认任务对象的变更类型、变更内容以及对您提交的计算任务进行前置检查，以确保您提交的任务符合提交条件，降低错误任务提交的可能性。血缘关系解析说明 ...
实时计算任务提交说明
完成实时计算任务开发并提交时，Dataphin系统将自动解析任务中表和字段的血缘关系及确认任务对象的变更类型、变更内容以及对您提交的计算任务进行前置检查，以确保您提交的任务符合提交条件，降低错误任务提交的可能性。血缘关系解析说明 ...
管理数据标准待发布对象
需要根据跨租户发布设置中发布审批的设置及发布策略中是否配置了需要自动提交上线决定发布成功的判断依据：跨租户发布设置中发布审批配置为忽略审批且发布策略勾选了需要提交上线申请，则标准需发布到生产环境才算整体发布成功。...
步骤三：配置节点运行配置
配置完字段血缘关系并运行上线生产节点后，可至资产中心查看该节点输出表和输入表的字段映射关系，具体操作，请参见 查看表资产详情 的血缘关联介绍。步骤二：（可选）配置数据表的 字段映射关系。说明 对能自动解析输入和输出参数的SQL类...
步骤三：配置节点运行配置
配置完字段血缘关系并运行上线生产节点后，可至资产中心查看该节点输出表和输入表的字段映射关系，具体操作，请参见 查看表资产详情 的血缘关联介绍。步骤二：（可选）配置数据表的 字段映射关系。说明 对能自动解析输入和输出参数的SQL类...
计算节点配置说明
配置完字段血缘关系并运行上线生产节点后，可至资产中心查看该节点输出表和输入表的字段映射关系，具体操作，请参见 查看表资产详情 的血缘关联介绍。调度配置 如果在场景上线后，需要定时调度该场景中离线计算节点，则需要在开发环境场景...
计算节点配置说明
配置完字段血缘关系并运行上线生产节点后，可至资产中心查看该节点输出表和输入表的字段映射关系，具体操作，请参见 查看表资产详情 的血缘关联介绍。调度配置 如果在场景上线后，需要定时调度该场景中离线计算节点，则需要在开发环境场景...
配置参数说明
配置完字段血缘关系并运行上线生产节点后，可至资产中心查看该节点输出表和输入表的字段映射关系，具体操作，请参见 查看表资产详情 的血缘关联介绍。其他参数 节点类型 配置项 说明 Blink运行时参数 智能CU配置 节点运行的所有资源的配置...
免费体验Lindorm宽表性能&价格力
影响 本性能&价格力体验不涉及生产环境的部署，因此不会影响业务。费用 本次体验中，由于体验涉及到的资源不归属于您，因此不会产生任何费用，您可以放心体验。体验内容 本次测试包括吞吐量对比测试与毛刺率对比测试。吞吐量对比：使用相同...
生产者（Producer）
本文介绍 云消息队列 RocketMQ 版 中生产者（Producer）的定义、模型关系、内部属性、版本兼容性及使用建议。定义 生产者是 云消息队列 RocketMQ 版 系统中用来构建并传输消息到服务端的运行实体。生产者通常被集成在业务系统中，将业务...
代码解析结果对比
如何确认是否使用新的解析结果 节点提交时，若发现节点当前调度依赖解析结果与生产环境节点调度依赖关系的配置存在差异，请确认该节点当前的调度依赖是否符合业务需要，避免由于依赖关系变更导致产出数据出现问题。重要 若当前节点存在众多...
配置消息灰度
因为消费者过滤的方式会在每个环境都处理全量的消息，对消息的生产者和消费者压力都比较大，不推荐在生产中使用此模式。开启消息灰度 登录 MSE治理中心控制台，并在顶部菜单栏选择地域。在左侧导航栏，选择 治理中心>应用治理。在 应用列表...
申请、续期和交还数据源权限
本文为您介绍如何申请和交还数据源权限。申请数据源权限 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图操作指引，进入 申请数据源权限 对话框。在 申请数据源权限 对话框，配置参数。参数 描述 数据源 选择所需申请的数据源。...
申请、续期和交还数据源权限
本文为您介绍如何申请和交还数据源权限。申请数据源权限 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图操作指引，进入 申请数据源权限 对话框。在 申请数据源权限 对话框，配置参数。参数 描述 数据源 选择所需申请的数据源。...
一致性复制组概述
反向复制 通过反向复制功能可以颠倒异步复制关系中原有的主从关系，进而可以将容灾站点的云盘中所保存的最新数据复制到生产站点的云盘中。使用限制 地域限制 支持在以下地域及可用区使用一致性复制组功能：华东1（杭州）：可用区G、可用区H...
配置同周期调度依赖
为避免生产调度任务由于依赖关系不符合预期导致生产调度延迟，建议在发布任务前，通过预览依赖功能确认各周期实例关系是否符合预期。详情请参见 预览依赖关系。配置原则 为提升任务开发效率，建议您在实际开发中使用 自动解析 功能快速为...
基于CEN-TR实现企业级云上互联
方案架构 云上网络分区 按照使用习惯和业务访问关系，可以分为业务生产区、开发测试区、互联网出口区、东西向安全区、内联运维区、外联网区等。每个分区可以由独立的VPC承载并根据实际情况调整，VPC内按照部署的业务模块选择创建不同的虚拟...
下线节点
如何恢复已下线节点 报错：请先在发布中心把文件${filename}发布到生产环境或在发布中心取消发布 报错：节点存在子节点，导致任务删除或下线失败 如何下线节点 如果您使用的是标准模式工作空间，则开发环境和生产环境隔离，在DataWorks的...
自定义血缘配置
任务提交成功后变量将替换为开发环境表并解析血缘关系，发布成功后将自动替换为对应的生产环境表并解析血缘关系。如果不存在对应的生产表，不阻塞提交发布，但无法解析生产血缘。所属环境选择 开发 或 生产，则提交发布时不做变量替换，以...
自定义血缘配置
任务提交成功后变量将替换为开发环境表并解析血缘关系，发布成功后将自动替换为对应的生产环境表并解析血缘关系。如果不存在对应的生产表，不阻塞提交发布，但无法解析生产血缘。所属环境选择 开发 或 生产，则提交发布时不做变量替换，以...
跨可用区容灾（Beta）
跨可用区（AZ）容灾，即在同Region不同可用区部署同构的Hologres容灾实例，如果生产实例所处的地理位置发生自然灾害，或者实例内部出现了故障导致生产实例无法正常对外提供读写服务，那么容灾实例可以切换为生产实例，从而保障业务连续性。...
下线任务
下线任务即将该任务从开发环境删除，并将删除操作发布至生产调度系统，下线后任务将无法再调度。本文以标准模式工作空间为例，为您介绍周期调度任务的下线流程、恢复流程、任务下线后对于已生成实例及正在运行实例平台侧的处理方案。使用...
新建注册上挂指标
建议选择生产数据（即非Dev项目或数据板块产生的数据），以免更新至生产调度运维时，该对象在生产环境不存在导致操作失败，或者导致自动解析依赖关系失败。如您选择生产数据，建议您代码写明该生产数据的项目或数据板块前缀，以免无主键...
新建注册上挂指标
建议选择生产数据（即非Dev项目或数据板块产生的数据），以免更新至生产调度运维时，该对象在生产环境不存在导致操作失败，或者导致自动解析依赖关系失败。如您选择生产数据，建议您代码写明该生产数据的项目或数据板块前缀，以免无主键...
集成任务提交说明
发布时，解析生产环境的表和字段血缘关系。单个任务提交发布支持解析不超过 10万条 血缘关系，超过则不予记录，在资产目录中无法展示。离线集成 任务 提交详情说明 提交集成任务时，在 提交 对话框中，支持查看任务的提交内容、前置检查...
新建层级维度逻辑表
层级维度逻辑表是具有层级结构关系的维度表。例如时间层级维度逻辑表，包含日、周、月、季、年等日期数据。本文为您介绍如何新建并配置层级维度逻辑表。前提条件 已完成层级业务对象的创建，具体操作请参见 创建并管理业务实体。步骤一：...
新建层级维度逻辑表
层级维度逻辑表是具有层级结构关系的维度表。例如时间层级维度逻辑表，包含日、周、月、季、年等日期数据。本文为您介绍如何新建并配置层级维度逻辑表。前提条件 已完成层级业务对象的创建，具体操作请参见 创建并管理业务实体。步骤一：...
集成任务提交说明
发布时，解析生产环境的表和字段血缘关系。单个任务提交发布支持解析不超过 10万条 血缘关系，超过则不予记录，在资产目录中无法展示。离线集成 任务 提交详情说明 提交集成任务时，在 提交 对话框中，支持查看任务的提交内容、前置检查...
镜像表和字段详情
发布时，解析生产环境的表的血缘关系。单个任务提交或发布时支持解析不超过10万条血缘关系，超过则不予记录，在资产目录中无法展示。④ 镜像关系 为您展示关联实时表、主表、关联离线表的字段列表信息，包括字段名称、数据类型、描述。⑤ ...
- 产品推荐
- 这些文档可能帮助您