各类型节点自动解析场景
本文为您汇总了各类型节点的自动解析配置原则，以及不支持自动解析的场景，您可根据业务需求使用。自动解析的配置原则 各类型节点的自动解析配置原则如下表。节点类型 代码命令 自动解析 调度依赖配置规则 ODPS节点 CREATE INSERT 当节点...
Dataphin的调度配置中自动解析没有解析到所有的依赖
概述 Dataphin的调度配置中为什么自动解析没有解析到所有的依赖。详细信息 目前自动依赖解析是根据sql脚本中使用到的表名，去匹配上游节点的输出名的。这种自动解析格式是项目名.物理表名才能解析到的。适用于 Dataphin 公共云 V2.9.4
在Dataphin的SQL中如何自动解析出物理表上游依赖
产品名称 Dataphin 产品模块 代码任务 概述 本文描述如何为SQL自动解析出上游依赖的物理表？问题描述 当您进行SQL开发过程中，从物理表获取数据时，需要将物理表添加为上游依赖，确保在调度过程中，引用的物理表中存在数据。问题原因 NA ...
Dataphin任务节点自动解析成功还是提示存在无法识别的...
问题描述 Dataphin任务节点自动解析成功还是提示提交失败，存在无法识别的上游依赖节点，请点击调度配置页面的自动解析进行更新。错误信息如下：问题原因 点击自动解析的时候没有删除原有的依赖。解决方案 先删除任务节点原有的依赖，在...
Dataphin使用OpenAPI提交任务...自动解析可以解析出来
问题描述 Dataphin使用OpenAPI提交任务提示该任务的上游节点不存在，但是产品界面自动解析可以解析出来。问题原因 当使用 ParseDependency接口解析获取上游节点时，仅可获取到依赖的任务，但是无法获取到未解析到上游的表或字段的信息。...
Dataphin中SQL计算任务自动解析上游依赖失败，报错...
问题描述 Dataphin中SQL计算任务自动解析上游依赖失败，报错“xxx[Read time out]xxx”。问题原因 解析上游依赖时出现该问题的原因一般为用户SQL代码过长，导致解析时间过长而超时。解决方案 建议把代码拆分为多个部分，创建多个不同的计算...
仪表板查询控件配置下拉列表枚举值自动解析时查询控件...
问题描述 数据集开启维值加速后，仪表板查询控件配置下拉列表枚举值自动解析时查询控件显示暂无可用字段。问题原因 维值加速的配置表为分区表，到数据库查询时报错分区查询错误。（is full scan with all partitions,please specify ...
可能由于字段类型自动解析错误，请检查文件并
问题描述 上传文件提示“存在上传失败行，可能由于字段类型自动解析错误，请检查文件并进入高级设置调整。问题原因 上传的文件中存在emoji，上传的数据源编码不支持emoji。解决方案 MySQL数据库编码改成支持emoji的，例如utf8mb4。更多信息...
可能由于字段类型自动解析错误，请检查
问题描述 Quick BI上传文件失败提示“1到100存在上传失败行，可能由于字段类型自动解析错误，请检查文件并进入高级设置调整。异常情况如下：问题原因 数字列含有百分号和数字类型不匹配导致不能导入。解决方案 将带有百分号的数字列取消百...
可能由于字段类型自动解析错误，请
问题描述 Quick BI中MySQL数据源上传Excel，报错“存在上传失败行，可能由于字段类型自动解析错误，请检查文件并进入高级设置调整”。问题原因 由于字符编码不是utf8，插入中文会报该错误。解决方案 1、在建立表时设置默认字符串编码方式为...
HTTPDNS:网络切换后会自动刷新域名解析结果？
网络实时切换后，比如从 4G 切换到 WIFI 下，想要让 SDK 自动对域名进行重新解析，需要设置如下接口：/*设置网络切换时是否自动刷新所有域名解析结果，*如果打开此开关，在网络切换时，会自动刷新所有域名的解析结果，*但会产生一定流量...
配置同周期调度依赖
删除或添加后，自动添加相应注释至自动解析的结果中：@exclude_input=删除输入-@exclude_output=删除输出-@extra_output=添加输出-@extra_input=添加输入 关闭自动解析时，编辑自动解析的输入输出 DataWorks不支持直接删除已存在下游依赖的...
删除或变更节点输出的影响
或通过自动解析代码血缘，将节点产出表自动解析为节点输出。如下操作可能导致节点输出被删除：人为将手动添加的节点输出删除。关闭自动解析功能后未检查节点输出，节点代码变更，导致节点不再产出某张表数据。说明 如果本节点存在下游依赖...
设置调度依赖最佳实践
自动解析 自动解析：通过代码自动解析调度依赖关系。自动解析的实现原理：代码中只能拿到表名，自动解析功能可以根据表名解析出对应的产出任务。类型节点代码如下所示。INSERT OVERWRITE TABLE pm_table_a SELECT*FROM project_b_name.pm_...
使用ECS应用转化K8s应用
功能名称 支持情况 说明 WAR/JAR包地址 支持 自动解析。应用类型 支持 自动解析。Tomcat配置 支持 自动解析。健康检查 支持 自动解析为K8s应用的Liveness探针。JVM参数 支持 自动解析。实例规格 支持 自动解析第一台ECS应用实例的规格。...
配置离线管道调度依赖
上游依赖 自动解析 集成任务上游依赖，您可以单击 自动解析，Dataphin将根据集成任务自动解析获取上游任务和输出表。解析后将在上游依赖列表中添加解析出来的全部依赖表。您可查看解析出的依赖表详情或进行编辑和删除操作。更多信息，请...
什么是自定义集成
定义 支持用户将各种数据源的告警通过API形式发送至运维事件中心，并进行自动解析。目前系统支持解析标准的JSON数据，解析完成后，字段支持应用至流转规则与告警卡片。核心能力 灵活的接入能力、支持流转规则字段配置与告警内容富化 灵活的...
设置域名A记录解析
阿里云注册域名：您无需在云解析DNS管理控制台手动添加域名，可直接在主机管理控制台的域名绑定页面，绑定域名时自动解析。具体操作，请参见 阿里云注册域名设置A记录解析。非阿里云注册域名：如果需要使用云解析DNS，请您先将主域名或子域...
配置离线管道调度依赖
上游依赖 自动解析 集成任务上游依赖，您可以单击 自动解析，Dataphin将根据集成任务自动解析获取上游任务和输出表。解析后将在上游依赖列表中添加解析出来的全部依赖表。您可查看解析出的依赖表详情或进行编辑和删除操作。更多信息，请...
配置逻辑表上游依赖
上游依赖 自动解析 逻辑表上游依赖，您可以单击 自动解析，Dataphin将根据逻辑表的计算逻辑自动解析获取上游任务和输出表。解析后将在上游依赖列表中添加解析出来的全部依赖表。您可查看解析出的依赖表详情或进行编辑和删除操作。更多信息...
配置逻辑表上游依赖
上游依赖 自动解析 逻辑表上游依赖，您可以单击 自动解析，Dataphin将根据逻辑表的计算逻辑自动解析获取上游任务和输出表。解析后将在上游依赖列表中添加解析出来的全部依赖表。您可查看解析出的依赖表详情或进行编辑和删除操作。更多信息...
场景1：包含离线同步节点的业务流程，如何配置调度...
DataWorks的离线同步节点不支持通过自动解析自动添加调度依赖，包含离线同步节点的业务流程，如果下游节点依赖离线同步节点产生的表，您需手动添加产出表到离线同步节点的输出中，下游节点查询离线同步节点数据时，自动解析可以通过表快速...
通过表映射创建离线视图
添加依赖 若 自动解析 无法解析出调度依赖关系或 自动解析 生成的上游依赖配置与实际应用不符时，您可以手动单击+添加依赖 添加节点的 上游依赖。单击 保存并发布，完成离线视图的创建。说明 保存成功后，您可以单击 预览。系统将根据配置...
配置离线任务调度依赖
上游依赖 自动解析 当节点的任务类型为SQL时，您可以单击 自动解析，Dataphin将根据任务代码自动解析获取上游任务和输出表。解析后将在上游依赖列表中添加解析出来的全部依赖表。您可查看解析出的依赖表详情或进行编辑和删除操作。更多信息...
配置离线任务调度依赖
上游依赖 自动解析 当节点的任务类型为SQL时，您可以单击 自动解析，Dataphin将根据任务代码自动解析获取上游任务和输出表。解析后将在上游依赖列表中添加解析出来的全部依赖表。您可查看解析出的依赖表详情或进行编辑和删除操作。更多信息...
智能解析设置方法
在云解析设置双线以及多个线路解析时，请首先添加一条默认解析，当用户网络类型无法确认或者不在您设置的网络类型时系统会自动解析到该默认解析地址上。例如：您有电信和联通两个 IP，想设置两条智能解析记录，需要首先设置一条默认线路，...
通过SQL加工创建离线视图
添加依赖 若 自动解析 无法解析出调度依赖关系或 自动解析 生成的上游依赖配置与实际应用不符时，您可以手动单击+添加依赖 添加节点的 上游依赖。单击 保存并发布，完成离线视图的创建。说明 保存成功后，您可以单击 预览。系统将根据配置...
步骤三：配置节点运行配置
手动新建节点的输入、输出参数和节点变量，或通过单击编辑页面的 图标，自动解析节点任务的输入和输出参数，详细参数说明，请参见 运行属性。这里以解析为例介绍，单击编辑页面的 图标，解析成功后，在节点编辑页面 运行配置 页签，会显示...
步骤三：配置节点运行配置
手动新建节点的输入、输出参数和节点变量，或通过单击编辑页面的 图标，自动解析节点任务的输入和输出参数，详细参数说明，请参见 运行属性。这里以解析为例介绍，单击编辑页面的 图标，解析成功后，在节点编辑页面 运行配置 页签，会显示...
通过表单加工创建离线视图
添加依赖 若 自动解析 无法解析出调度依赖关系或 自动解析 生成的上游依赖配置与实际应用不符时，您可以手动单击+添加依赖 添加节点的 上游依赖。单击 发布，完成离线视图的创建。说明 保存成功后，您可以单击 预览。系统将根据配置的加工...
依赖关系
这样自动解析可以根据唯一的输出找到唯一的节点挂上节点依赖关系，所以如果实际场景有多个节点产出数据至同一张表，那么需要确定下游节点自动解析这张表时应该挂哪个节点依赖（哪个节点最晚写入这张表数据，确保下游节点取数无问题即可），...
文件解析规则设置
什么是文件解析规则 系统会对上传的文件进行自动解析并提取待翻译原文，平台支持对部分格式文档进行解析规则设置。如何设置 在创建项目页面，可以对项目设置进行编辑，可以编辑文件解析规则。目前支持如下截图格式的规则设置，设置完成后可...
新建行为关系
添加依赖 若 自动解析 无法解析出调度依赖关系或 自动解析 生成的上游依赖配置与实际应用不符时，您可以手动单击+添加依赖 添加节点的上游依赖。确认配置无误后，单击 发布 即可完成行为关系的创建与配置。后续步骤 完成行为关系的配置后，...
代码解析结果对比
开启自动解析时，为保障生产数据产出无误、节点变更操作过程可控，在节点发布流程中，需对节点调度变更相关操作进行二次确认，提交节点时将基于代码中表血缘解析当前节点的输入与输出。您可根据代码解析结果，确认节点的上下游依赖是否正确...
调度设置
提交前代码自动解析 周期任务是否启用自动解析功能。启用后，提交节点时，系统会根据最新代码解析出本节点及其依赖的上游节点的输出名称。单击 修改，成功设置周期任务的默认调度配置。调度设置 配置完成后，新建的周期任务将会使用相关...
域名独享资源包
Web应用防火墙（Web Application ...您可以通过Ping域名的CNAME确认域名是否已自动解析到新的WAF IP。重要 如果域名是通过A记录而不是CNAME进行解析，该域名的解析无法完成自动切换，在开启或关闭独享IP时，将可能导致业务流量无法正常访问。
自定义SQL
本文介绍自定义SQL算子的使用方法和注意事项。用途 当系统提供的内置算子无法满足需求时，用户可以通过编写SQL语句实现自己特定的业务逻辑。适用场景 计算链路 计算引擎 ...自动解析的sql格式如图所示：这两个行将解析出如下两个字段信息：
基础配置
ID,{ context:this.context,/*初始化配置是否开启网络变化自动解析 begin*preResolveAfterNetworkChanged:false,/*初始化配置是否开启网络变化自动解析 end*})}/省略其它代码 } 超时配置 配置域名解析请求时的超时时长，默认为2000毫秒。...
新建开发环境场景并运行
说明 针对不能自动解析输入和输出的节点类型，当需要了解资产中字段血缘关系时或者自动解析的节点类型中解析存在差异，需要修改字段映射关系时，在配置好输入和输出参数后，单击 手动配置血缘，手动配置输入和输出表的字段映射关系。...
设置域名CNAME记录解析
根据您的主机域名来源，选择如下解析方法：阿里云注册域名：您无需在云解析DNS管理控制台手动添加域名，可直接在主机管理控制台的域名绑定页面，绑定域名时自动解析。增强版共享云虚拟主机无需开启临时域名CNAME解析功能，即可直接在主机...
- 产品推荐
- 这些文档可能帮助您