CreateFileTrans-创建文件转写任务
如果 AudioOssBucket 非空，则需要赋值 OSS 文件路径（./.mp3）；如果 AudioOssBucket 为空，则需要赋值自定义可下载文件地址（http://……/.mp3）。dir1/dir2/filename http://……/*.mp3 AudioLanguage string 是 音频转写使用的语言模型...
PolarDB死锁
try restarting transaction 说明 本文所说的死锁是指deadlock，而非事务锁造成的阻塞（block）。死锁定位 您可以登录 PolarDB控制台，在 诊断与优化>一键诊断 菜单中选择 锁分析，单击 立即诊断。如果集群存在死锁，会在 发现死锁 列出现 ...
配置节点上下文
部分节点支持赋值参数的功能，赋值参数使用与赋值节点行为大体一致，您可以参考赋值节点使用文档来进行 赋值参数 的配置，关于赋值参数的配置可参考下文。配置节点上下文 登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发...
用户属性管理
支持：保留创建时间最早的字段值 保留更新时间最晚的字段值 保留出现频次最高的字段值 空值取值逻辑 选择遇字段空值时的取值逻辑，支持：有值优先：当多个字段中有字段为空值时，默认排除空值，在余下的非空值字段间按已选的赋值逻辑取值。...
功能概览
sample 采样 simplePath 返回无环的路径 tail 截断，保留最后的结果 where 过滤 sideEffect aggregate 将输入objects阻塞地拷贝一份list<object>alias[*]为输入实体（点或边）定义虚拟字段 fields[*]裁剪字段 store 将输入objects非阻塞地...
参数配置及使用节点参数
运行参数配置是对计算任务代码中所用的变量进行赋值，从而支持节点调度，参数变量可以自动被替换为相应的变量值。本文为您介绍如何配置参数及使用节点参数，并以MAX_COMPUTE_SQL为例，讲解参数配置。操作步骤 在Dataphin首页，单击顶部菜单...
参数配置及使用节点参数
运行参数配置是对计算任务代码中所用的变量进行赋值，从而支持节点调度，参数变量可以自动被替换为相应的变量值。本文为您介绍如何配置参数及使用节点参数，并以MAX_COMPUTE_SQL为例，讲解参数配置。操作步骤 在Dataphin首页，单击顶部菜单...
在RDS SQL Server中出现阻塞
问题描述 在云数据库RDS SQL Server中出现阻塞情况。问题原因 事务之间锁资源争抢导致出现阻塞情况。解决方案 在云数据库RDS SQL Server中发生锁现象时，通过执行下面的脚本，获取到锁的信息。select dtl.request_session_id as waitSID,...
原生SDK概述
JobClient 用于提交和管理作业，提交方式包括阻塞（同步）方式及非阻塞（异步）方式。RunningJob 作业运行时对象，用于跟踪运行中的MapReduce作业实例。JobConf 描述一个MapReduce任务的配置，通常在主程序（main函数）中定义JobConf对象，...
调度参数配置最佳实践
说明 定时时间为用户设置的执行时间，非任务实际运行时间，定时时间的取值不会受任务实际运行时间的延迟而改变。时间格式中若存在空格，请使用两个调度参数进行拼接。参数定义 含义 支持的日期格式 参考样例 variate1=$[yyyymmdd]获取任务...
语雀
Node具有单线程（single-threaded）、非阻塞（non-blocking）、异步（asynchronously programming）等特性，这些特性一方面非常适合于构建可扩展的网络应用，用来实现Web服务这类I/O密集型的应用。但是，Node对CPU密集型的场景不够友好，...
Cava 运算符
a的结果为false 赋值运算符 赋值运算符用于将一个变量赋值给另一个变量，下表列出了cava中支持的赋值运算符：赋值运算符 描述 示例(int left=1,right=2;简单赋值：将右边操作数的值赋给左边操作数 left=right;left结果为2+加和赋值：将左边...
Cava 运算符
a的结果为false 赋值运算符 赋值运算符用于将一个变量赋值给另一个变量，下表列出了cava中支持的赋值运算符：赋值运算符 描述 示例（int left=1,right=2;简单赋值：将右边操作数的值赋给左边操作数 left=right;left结果为2+加和赋值：将...
语雀
Node具有单线程（single-threaded）、非阻塞（non-blocking）、异步（asynchronous programming）等特性，这些特性一方面非常适合于构建可扩展的网络应用，用来实现Web服务这类I/O密集型的应用。但是，Node对CPU密集型的场景不够友好，一旦...
可视化编排服务方法
可选：单击 变量赋值，在 变量赋值 面板完成 节点名称 和 赋值设置，单击 保存。您可以参考下图配置 赋值设置。说明 变量赋值节点支持调整赋值顺序。入参和中间变量都支持在赋值节点赋值。可选：单击 打印日志，在 打印日志 面板完成 节点...
应用部署时的默认启动命令参数
Tomcat java.security.egd file:/dev/./urandom 配置Java随机数生成的种子（urandom的u是unlocked，非阻塞的随机数发生器），加速Tomcat启动。Tomcat org.apache.tomcat.util.http.ServerCookie.ALLOW_EQUALS_IN_VALUE TRUE 添加配置后，...
场景：配置增量数据离线同步任务
非时间类型增量字段同步：可以通过赋值节点将字段处理为目标数据类型后，再传入数据集成进行数据同步。关于赋值节点的使用详情请参见：赋值节点。场景示例 同步历史数据：如果您需要将历史增量数据同步至目标表对应时间分区，您可以使用运...
实时模式变量配置
变量参数配置是对计算任务代码中所用的变量进行赋值，从而支持变量参数可以自动被替换为相应的变量值。本文为您介绍如何配置实时任务实时模式变量配置，并以Flink_SQL为例，讲解参数配置。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发...
离线模式变量配置
变量参数配置是对计算任务代码中所用的变量进行赋值，从而支持变量参数可以自动被替换为相应的变量值。本文为您介绍如何配置实时任务离线模式变量配置，并以Flink_SQL为例，讲解参数配置。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发...
实时模式变量配置
变量参数配置是对计算任务代码中所用的变量进行赋值，从而支持变量参数可以自动被替换为相应的变量值。本文为您介绍如何配置实时任务实时模式变量配置，并以Flink_SQL为例，讲解参数配置。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发...
离线模式变量配置
变量参数配置是对计算任务代码中所用的变量进行赋值，从而支持变量参数可以自动被替换为相应的变量值。本文为您介绍如何配置实时任务离线模式变量配置，并以Flink_SQL为例，讲解参数配置。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发...
逻辑表运行参数配置
逻辑表参数配置是对逻辑表中所用的变量进行赋值，从而支持节点调度时，参数变量可以自动被替换为相应的变量值。本文将指导您如何配置逻辑表参数。操作步骤 在Dataphin首页，单击顶部菜单栏 研发。进入数据 开发 页面。在数据 开发 页面，...
逻辑表运行参数配置
逻辑表参数配置是对逻辑表中所用的变量进行赋值，从而支持节点调度时，参数变量可以自动被替换为相应的变量值。本文将指导您如何配置逻辑表参数。操作步骤 在Dataphin首页，单击顶部菜单栏 研发。进入数据 开发 页面。在数据 开发 页面，...
自定义参数取值差异对比
自定义参数分为系统内置参数、自定义参数${.}、自定义参数$[.]、常量，不同类别的参数赋值格式及取值不同。本文为您介绍不同格式自定义参数的取值差异对比情况。不同格式自定义参数的应用对比 以当前时间为 2021年11月01日，任务每天 00:00...
分支节点实现特定时间执行任务
各类型控制节点的作用如下：赋值节点：您可以通过赋值节点把自己的结果传给下游，详情请参见 赋值节点。赋值节点复用了 配置节点上下文 依赖的特性，在已有常量和变量节点上下文的基础上，赋值节点支持自定义的上下文输出。DataWorks会捕获...
配置数据质量监控
本案例中，当 ods_raw_log_d 节点将OSS数据同步至ods_raw_log_d表后即对该表对应分区数据进行表行数非0校验，若校验不通过，阻断下游任务执行，及时阻塞脏数据蔓延。在数据质量规则配置页面，单击 关联调度，进入关联调度配置页面。在关联...
子类型
结果显示如下：NOTICE:outer-inner DO 说明 由于OUT类型的入参会把传入变量初始化为NULL，因此如果入参类型为具有非空约束的子类型时，会直接报错：DECLARE SUBTYPE sub_type IS PLS_INTEGER NOT NULL;a sub_type:=1;PROCEDURE proc_test...
数据库事务
写操作会给对象添加事务锁，如果一个对象上有事务锁，其它的事务对该对象的写入会操作失败，非事务对该对象的写入会阻塞，直到事务锁释放。为避免大量的锁冲突，目前仅支持在事务中对单个Document的读写操作。支持事务的命令有：insertOne,...
配置数据质量监控
本案例中，当 ods_raw_log_d 节点将OSS数据同步至ods_raw_log_d表后即对该表对应分区数据进行表行数非0校验，若校验不通过，阻断下游任务执行，及时阻塞脏数据蔓延。在数据质量规则配置页面，单击 关联调度，进入关联调度配置页面。在关联...
Python SDK调用示例
condition.operate='=' value String 否 请求参数的赋值。重要 当操作符为非 BETWEEN 时，该参数必传。condition.value='iot-public' between_start String 否 请求参数表示范围时的起始值。重要 请求参数表示范围时的起始值。condition....
Node.js SDK调用示例
重要 当操作符为非 BETWEEN 时，该参数必传。condition.value='iot-public';betweenStart String 否 请求参数表示范围时的起始值。重要 当操作符为 BETWEEN 时，该参数必传。condition.betweenStart='0';betweenEnd String 否 请求参数表示...
Java SDK调用示例
重要 当操作符为非 BETWEEN 时，该参数必传。condition.setValue("all");BetweenStart String 否 请求参数表示范围时的起始值。重要 当操作符为 BETWEEN 时，该参数必传。condition.setBetweenStart("0");BetweenEnd String 否 请求参数...
领域模型概述
重要 此处的同步并不代表RPC的编程接口方式，RPC也可以有异步非阻塞调用的编程方式，但本质上仍然是需要在指定时间内得到目标端的直接响应。异步通信模型 异步消息通信模式下，各子系统之间无需强耦合直接连接，调用方只需要将请求转化成...
CTE
如上所示，n、p、q变量在 non recursive part 赋值后，在recursive part中基于变量名去做赋值。recursive part 执行完成以后，基于project中的位置对变量赋值。因此以上示例的输出为：+-+-+-+|n|p|q|+-+-+-+|1|1|-1|2|-2|2|3|4|-4|4|-8|8|5...
赋值节点
注意事项 部分节点可通过节点上下文中的赋值参数，达到与赋值节点相同的目的（例如，EMR Hive、EMR Spark SQL、ODPS Script、Hologres SQL、AnalyticDB for PostgreSQL和MySql节点），赋值参数的使用与赋值节点一致，添加赋值参数的操作，...
FE参数配置
前两个线程池采用非阻塞模型，一个线程可以处理很多Socket的读写，所以线程池数量较小。大多数项目，Acceptors线程只需要1～2个，Selectors线程配置2～4个即可。Workers是阻塞性的业务逻辑，往往有较多的数据库操作，需要的线程数量较多，...
调试代码片段：快捷运行
引擎费用详情，请参见各引擎的计费文档。操作步骤 进入数据开发。登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。查找目标节点并进入节点编辑页面。在 数据开发 或 ...
创建手动任务
流程参数赋值：若手动业务流程存在流程参数，您可在每次执行时通过为流程参数赋值，统一为该业务流程下代码中同名变量赋值。该配置仅在定义了流程参数的情况下会出现。任务执行顺序：任务执行顺序与设置手动任务执行顺序（可选）阶段的说明...
使用Aviator函数作为过滤器的最佳实践
函数的输入及输出：#输入：{"user_id":1 }#输出：{"user_id":2 } 示例2：调用函数时，函数对客户端未传值的请求参数进行赋值（即：当请求参数为非必填且未传值时进行赋值）。Aviator函数：#对于请求参数user_id，在客户端的原始传值为user_...
MongoDB数据源
例如，当MongoDB存储的增量字段为时间戳，您可以通过赋值节点将时间类型字段通过引擎函数转换为时间戳，再传给离线同步任务使用，关于赋值节点的使用详情请参见：赋值节点。说明 更多MongoDB的查询语法请参见 MongoDB官方文档。splitFactor...
- 产品推荐
- 这些文档可能帮助您