Session集群提供了Flink任务状态、日志和输出结果的实时查看功能,您可以通过观察任务的行为和输出来验证任务的正确性,进行迭代式地修改和调试Flink任务代码,以便快速定位和解决问题。权限说明 仅支持 超级管理员 或 系统管理员 创建...
单击 查看注释,查看指标注释,帮助您了解每个指标的意义。③ 运行详情 展示运行详情,包括实例总数、各状态实例数量的占比情况。同时,分别展示 周期实例、手动实例 和 补数据实例 的实例总数量。实例来源模块的实例数量通过柱状图展示,...
单击 查看注释,查看指标注释,帮助您了解每个指标的意义。③ 运行详情 展示运行详情,包括实例总数、各状态实例数量的占比情况。同时,分别展示 周期实例、手动实例 和 补数据实例 的实例总数量。实例来源模块的实例数量通过柱状图展示,...
说明 若数据板块为Dev-Prod模式,归属Prod业务板块的Basic项目中不可以构建规范建模对象,仅可以构建基础层、应用层数据,以免公共层数据标准规范性受影响、数据生产异常。基本信息 项目英文名 填写项目的英文名。命名规则如下:包含字母、...
说明 导入模型及任务是导入到开发环境,不发布到生产环境,以避免进行周期性调度消耗计算资源。导入物理表时若项目中已包含同名物理表或视图,则系统会自动将模型中原有的物理表或视图进行重命名,避免冲突。若任一步骤导入失败或导入模型...
重要 实时模式下,依赖关系 不实际产生调度依赖。离线模式下,则须配置调度依赖。参数 描述 开始解析 当节点的任务类型为SQL时,您可以单击 开始解析,系统会解析代码中的表,并查找到与该表名相同的输出名称。输出名称所在的节点作为当前...
重要 实时模式下,依赖关系 不实际产生调度依赖。离线模式下,则须配置调度依赖。参数 描述 开始解析 当节点的任务类型为SQL时,您可以单击 开始解析,系统会解析代码中的表,并查找到与该表名相同的输出名称。输出名称所在的节点作为当前...
重要 设置安全模式后,项目数据有更高的安全性,但是会导致系统使用流畅程度下降,建议您根据业务需求进行设置。严格权限模式的默认配置 在Dataphin页面,单击顶部菜单栏的 管理中心。在 管理中心 页面,按照下图指引设置相应的严格模式的 ...
重要 设置安全模式后,项目数据有更高的安全性,但是会导致系统使用流畅程度下降,建议您根据业务需求进行设置。严格权限模式的默认配置 在Dataphin页面,单击顶部菜单栏的 管理中心。在 管理中心 页面,按照下图指引设置相应的严格模式的 ...
业务日期(Bizdate):使用业务日期分区计算派生指标,可保障数据的强一致性,但需保留历史分区用于派生指标计算。生命周期:设置存储的生命周期,生命周期最大值为36500,大于等于该值将自动转为永久存储(显示为36500天)。系统支持快速...
本文介绍如何配置集群连接。...具体操作,请参见 操作步骤。操作步骤 步骤一:机器打标 登录目标集群,将可用于Dataphin任务调度的...重要 为保证调度稳定性,请勿删除目标集群中已部署的应用,否则后续基于该集群创建的资源组将变为不可用状态。
重要 为了保证Dataphin项目空间与Ververica Flink项目正常连接,建议填写Ververica Flink项目管理员的AccessKey。Flink工作空间ID 选择Ververica Flink计算源的 Flink工作空间ID。说明 选择Flink工作空间ID前,请先完成以上参数的正确填写...
重要 为了保证Dataphin项目空间与Ververica Flink项目正常连接,建议填写Ververica Flink项目管理员的AccessKey。Flink工作空间ID 选择Ververica Flink计算源的 Flink工作空间ID。说明 选择Flink工作空间ID前,请先完成以上参数的正确填写...
网站建设方案书:网站数量超过31个时(不含31个),需提供每个网站的网站建设方案书。企业可使用营业执照备案。自2018年01月01日0点起,对提交的网站ICP备案申请,进行网站备案域名核验。详情请参见 网站备案域名核验。域名有效期需大于或...
重要 为了保证Dataphin项目空间与MaxCompute项目正常连接,建议填写MaxCompute项目管理员的AccessKey。为了保证元数据正常采集,请尽量不修改MaxCompute项目的AccessKey。MaxCompute项目 填写MaxCompute项目名称。说明 此处为MaxCompute...
重要 为了保证Dataphin项目空间与MaxCompute项目正常连接,建议填写MaxCompute项目管理员的AccessKey。为了保证元数据正常采集,请尽量不修改MaxCompute项目的AccessKey。MaxCompute项目 填写MaxCompute项目名称。说明 此处为MaxCompute...
Dataphin智能数据建设与治理作为瓴羊开发云领域的核心产品,⾼度重视产品的合规性并积极对标国内和国际最⾼标准合规性要求。当前Dataphin产品的开发、测试、运维和运营服务均已通过 ISO 27001、ISO 27018 认证,意味着Dataphin 及瓴羊在...
网站建设方案书(非必选):域名前缀超过30个时(含30个),需提供每个域名的网站建设方案书。网站负责人人脸核验。更多详情请参见 ICP备案主体为企业或组织。ICP备案流程概述 您可提前了解并做好ICP备案前的准备工作,ICP备案前需做的准备...
数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是空值进行校验。字段空字符串校验 用于对单个字段是否是空字符串进行校验。唯一性 字段唯一性校验 用于对单字段唯一值/非唯一值进行校验。字段分组个数校验 ...
数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是空值进行校验。字段空字符串校验 用于对单个字段是否是空字符串进行校验。唯一性 字段唯一性校验 用于对单字段唯一值/非唯一值进行校验。字段分组个数校验 ...
业务租户:统称为 开发租户,进行数据中台建设的租户,即进行数据开发和治理的核心使用租户。一个Dataphin实例可以创建多个开发租户,由元仓租户在租户设置页面创建并分配可用资源(数据处理单元数、质量规则数等)。元仓共享模型数据说明 ...
湖南省管局要求,有主体新增备案和无主体新增备案时,需提供本次备案域名的网站建设方案书。详细信息请参见 网站建设方案书。暂住证或居住证 部分省份,例如福建,当ICP备案申请人的身份证户籍地与申请ICP备案的省份不一致时,需要提供暂住...
数仓规划是基于Dataphin建设数据中台的第一步,同时也是数据体系的顶层设计中至关重要的一步。在开始数据开发前,需要完成数据仓库的规划,包括定义数据板块、项目、数据源、计算源和统计周期。本文将指导您完成本教程的规划数仓。背景信息...
数仓规划是基于Dataphin建设数据中台的第一步,同时也是数据体系的顶层设计中至关重要的一步。在开始数据开发前,需要完成数据仓库的规划,包括定义数据板块、项目、数据源、计算源和统计周期。本文将指导您完成本教程的规划数仓。背景信息...
重要 创建的手工表为Prod项目或Basic项目的表,请谨慎操作。确认配置无误后,勾选 我已知晓此情况并确认。单击 确定,完成手工表新建。后续步骤 完成手工表创建后,您可对手工表进行编辑和管理。更多信息,请参见 手工表概述。
重要 创建的手工表为Prod项目或Basic项目的表,请谨慎操作。确认配置无误后,勾选 我已知晓此情况并确认。单击 确定,完成手工表新建。后续步骤 完成手工表创建后,您可对手工表进行编辑和管理。更多信息,请参见 手工表概述。
如下图所示:重要 连接地址请确保已设置Dataphin的IP至数据库白名单中,否则可能导致连接失败。具体操作,请参见 数据源白名单配置。使用内网地址时请确保数据库与Dataphin实例在同一地域。更多信息,请参见 网络连通解决方案。用户名、...
如下图所示:重要 连接地址请确保已设置Dataphin的IP至数据库白名单中,否则可能导致连接失败。具体操作,请参见 数据源白名单配置。使用内网地址时请确保数据库与Dataphin实例在同一地域。更多信息,请参见 网络连通解决方案。用户名、...
数仓规划是基于Dataphin建设数据中台的第一步,同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前,需要完成数据仓库的规划,包括定义数据板块、项目、数据源、计算源和统计周期。功能介绍 数仓规划包括逻辑空间与物理空间...
目录编码在实际展示上大小写敏感,校验唯一性时大小写不敏感。重要 目录编码可能会被应用到标准编码的自动生成规则,创建标准集或标准后不可修改,请评估后填写。单击 确定,完成目录创建。标准集目录列表 新建标准集目录后,即可在 标准集...
数仓规划是基于Dataphin建设数据中台的第一步,同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前,需要完成数据仓库的规划,包括定义数据板块、项目、数据源、计算源和统计周期。功能介绍 数仓规划包括逻辑空间与物理空间...
湖南省管局要求,有主体新增备案和无主体新增备案时,需提供本次备案域名的网站建设方案书。详细信息请参见 网站建设方案书。暂住证或居住证 部分省份,例如福建,当ICP备案申请人的身份证户籍地与申请ICP备案的省份不一致时,需要提供暂住...
您可根据租户类型和业务场景为不同的租户配置运行实例的超时时间和运行任务失败时的重跑策略,杜绝因运行实例长时间资源占用造成资源浪费的同时提高运行实例的可靠性。本文将为您介绍如何进行运行配置。生效范围 运行配置所设置的策略仅...
您可根据租户类型和业务场景为不同的租户配置运行实例的超时时间和运行任务失败时的重跑策略,杜绝因运行实例长时间资源占用造成资源浪费的同时提高运行实例的可靠性。本文将为您介绍如何进行运行配置。生效范围 运行配置所设置的策略仅...
Dataphin标签平台提供了标签的离线服务,可将标签的数据周期性的导出到目标数据源;画像服务可提供通过实体ID查询个体画像的服务;标签平台也提供了实时查询实体ID对应的标签值的能力,也可通过API分页查询群组ID及对应的标签值。权限说明 ...
重要 选中的多个表必须具有 相同结构的表,否则会导致配置PolarDB输入组件失败。切分键 您可以将源数据表中某一列作为切分键,建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数,默认的批量条数为1024。输入...
重要 选中的多个表必须 具有相同结构的表,否则会导致配置Oracle输入组件失败。切分键 您可以将源数据表中字段类型为整型的某一列作为切分键,推荐使用 主键 或有 索引的列 作为切分键。读取数据时,根据配置的切分键字段进行数据分片,...
管理中心 全局规划 基于Dataphin建设数据中台的第一步,同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前,需要完成数据仓库的规划,包括定义业务板块、数据域、项目、数据源、计算源和统计周期。数仓规划 数据引入 基于...
请您仔细核对购买信息并阅读 智能数据建设与治理服务协议,确认无误后选中 智能数据建设与治理服务协议。单击 去支付,支付成功后即可开始升级开通增值功能包。正在通过升级开通增值功能包的Dataphin实例,在Dataphin管理控制台页面,显示 ...
背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求,Dataphin应用场景的多样性及复杂性随之增加。因业务系统的原始数据的规范性无法得以保障,所以Dataphin需要定义数据分析的质量,以满足资产质量的时效性、准确性、完整性、...