管理引导操作
查看脚本执行日志 说明 建议您在脚本中关键位置增加日志打印逻辑，以便通过运行日志辅助您排查脚本运行情况。您可以通过操作历史查看引导操作脚本的执行日志。具体步骤如下：进入集群服务页面。登录 E-MapReduce控制台。在左侧导航栏，单击...
VALUES子句
VALUES子句用于构造数据，您可以通过VALUES子句向表中插入少量的临时数据用于查询与分析。本文介绍VALUES子句的基本语法和示例。语法 VALUES(column_value01,column_value02.)table_name(column_name01,column_name02.)参数说明 参数 说明 ...
Dataphin在SQL脚本使用正则表达式判断字符是不是小数
概述 本文主要描述了Dataphin在SQL脚本使用正则表达式判断字符是不是小数的方法。详细信息 可以在SQL脚本中使用正则表达式判断。SELECT '123.6' REGEXP '^([0-9]{1,}[.][0-9]*)$';适用于 Dataphin v3.6.3
调用自定义脚本
1.组件介绍 说明 必要前置组件：无 利用本...组件配置示例 在 需要执行的脚本 中，通过编辑表达式的方式填写：print("Hello World")高级选项默认选项值 4.2.示例执行结果 该流程成功执行完后，会自动在日志面板中打印日志“Hello World”。
常数吞吐量分布式使用示例
全局生效即为脚本中设置值为集群整体阈值，施压机会根据使用到的IP数来拆分到单机吞吐量目标值上（即单施压机阈值为脚本中值/IP数），此时场景的总目标吞吐量为2×（100并发/2）×（100/2）=5000（每分钟）。单机生效即为脚本中设置值为单...
常数吞吐量分布式使用示例
全局生效即为脚本中设置值为集群整体阈值，施压机会根据使用到的IP数来拆分到单机吞吐量目标值上（即单施压机阈值为脚本中值/IP数），此时场景的总目标吞吐量为2×（100并发/2）×（100/2）=5000（每分钟）。单机生效即为脚本中设置值为单...
Iframe
使用场景 当您在页面中需要插入外链页面时，可使用 Iframe 组件。使用说明 将 Iframe 组件拖入编排页面画布后，您可在属性 ...使用示例 在轻应用页面中插入页面编排的帮助文档并设置 Iframe 组件固定高度。轻应用运行时的效果如下图所示。
Dataphin配置DataX同步任务执行脚本报错：获得资源...
问题描述 Dataphin配置DataX同步任务执行脚本报错：获得资源信息失败。问题原因 在资源管理上传JSON文件时，自行输入了名称。...解决方案 重新上传JSON文件，在脚本中使用自动生成的名称即可。适用于 Dataphin版本：v2.9.4-3
Dataphin如何在Shell脚本中指定Python脚本的运行环境...
概述 本文为您介绍Dataphin如何在Shell脚本中指定Python脚本的运行环境是Python3。详细信息 可以在运行Python脚本前加上这条语句来指定脚本的运行环境为Python3，也可以在下面这条命令后直接跟pip list、Python-V来查看当前环境装了哪些包...
Dataphin在SQL脚本使用正则表达式判断字符是不是整数...
概述 本文主要描述了Dataphin在SQL脚本使用正则表达式判断字符是不是整数或小数的方法。详细信息 可以在SQL脚本中使用正则表达式判断。SELECT '100' REGEXP '^[0-9]{1,}+(\.[0-9]{1,})?';适用于 Dataphin v3.6.3
Quick BI查询报表中报“INTERNAL:Java....
问题原因 由于SQL脚本中存在不识别的列，导致查询时报错。解决方案 打开SQL数据集编辑界面，修改SQL脚本，验证脚本正确执行后，重新修改报表。报错类似于 Java.sqlSQLSyntaxErrorExceptlon 的问题，需要检查SQL脚本是否有语法错误。适用于 ...
插入数据
注意：向向量表中插入数据时，向量列的维数必须与 定义向量列 时指定的维度相同，否则系统将提示出错。insert into test_table values('rowkey1','[0.5,0.6,0.3,0.1]','seednmae','label')insert into test_table values('rowkey1','AAAAP5...
QuickBI电子表格插入图表，如何使图表显示数值？
详细信息 在电子表格中插入图表，如何配置使图表带数值展示呢？方法如下：框选需要展示的区域，在插入中选择相应图表。点击插入的图表，在样式下的系列设置中，选择系列勾选“显示图表标签”即可。适用于 Quick BI 说明：本文适用于公共云4...
Dataphin如何创建基于MaxCompute引用Python脚本的...
编写Python脚本（注：脚本中需根据Spark版本初始化Spark context，详情可参考MaxCompute关于PySpark的官方文档）2.上传该Python脚本至Dataphin，作为Dataphin中的资源。3.创建SPARK_JAR_ON_MAX_COMPUTE任务，并在任务中引用该资源，以下...
HaaS 510开板式DTU
扩展IO在JS脚本中的PORT映射关系 板上IO丝印名称 JS脚本中PORT编号 IO1"port":54 IO2"port":53 IO3"port":121 IO4"port":122 重要 为了满足对双路串口的需求，硬件在V2.0版本基础上进行了修改，如果您手中的HaaS 510与下图硬件一致，则扩展...
INSERT INTO
INSERT INTO 用于向表中插入数据，遇到主键重复时会自动忽略当前写入数据，不做更新，作用等同于 INSERT IGNORE INTO。语法 INSERT[IGNORE]INTO table_name[(column_name[,…])][VALUES][(value_list[,…])][query];参数 IGNORE：可选参数...
使用cava编写排序脚本
用户可以在脚本中通过cava支持的语法和opensearch提供的feature lib来实现自己的业务逻辑。cava排序脚本接口 为了能够使用自定义的脚本进行算分排序，用户需要实现opensearch提供的算分接口类。接口类的代码如下：package users.scorer;...
使用cava编写排序脚本
用户可以在脚本中通过cava支持的语法和opensearch提供的feature lib来实现自己的业务逻辑。cava排序脚本接口 为了能够使用自定义的脚本进行算分排序，用户需要实现opensearch提供的算分接口类。接口类的代码如下：package users.scorer;...
管理触发器
大小写 提供 全部大写、全部小写 和 首字母大写 三种效果，将您在脚本中选中的语句转换为对应形式。缩进 提供 添加缩进 和 删除缩进 两种效果，为您在脚本中选中的语句添加或删除包含的缩进。注释 提供 添加注释 和 删除注释 两种效果，将...
监控配置导入
例如：需要配置多个分钟统计/多 Key 监控项，但各个监控项配置之间的区别只是应用名及日志筛选条件不同，在这种情况下，可以直接在配置脚本中修改参数，然后通过监控配置导入快速新建配置，或者通过克隆功能实现，详见 克隆。操作步骤 获取...
云产品流转概述
120 KB 一个解析器的脚本中循环执行流转函数的最大次数。流转函数详细信息，请参见 流转数据到数据目的函数。100 使用流程 创建数据源：添加待转发的消息Topic作为数据源。一个数据源支持添加多个Topic。创建数据目的：添加数据转发的目的...
使用云防火墙禁止下载脚本执行主机相关操作
云防火墙操作 当前云防火墙对下载的脚本中携带的疑似Bash History操作、疑似执行User Add增加账户等操作处于 观察模式，如您需要对云上环境禁止通过下载脚本执行上述操作，您可以登录 云防火墙控制台，在 攻击防护>防护配置 页面，单击 ...
脚本语法
脚本中支持操作符和函数，请参见 操作符 和 函数列表。使用云产品流转函数实现数据流转到数据目的。云产品流转函数使用说明，请参见 流转数据到数据目的函数。您也可使用流程控制语句，设置数据流转的更多过滤条件，例如本文“脚本示例”中...
新建触发器
大小写 提供 全部大写、全部小写 和 首字母大写 三种效果，将您在脚本中选中的语句转换为对应形式。缩进 提供 添加缩进 和 删除缩进 两种效果，为您在脚本中选中的语句添加或删除包含的缩进。注释 提供 添加注释 和 删除注释 两种效果，将...
实例自定义数据（cloud-init自定义脚本）HOME变量问题
问题描述 创建ECS实例时，发现实例自定义数据中使用的HOME变量为空。问题原因 cloud-init脚本在初始化过程中，是以root用户的身份...在编写cloud-init自定义脚本时，如果需要使用HOME变量，需要在脚本中定义，如下图所示。适用于 云服务器ECS
用参数仓库的加密参数和aliyun-cli管理执行命令中的...
重要 为了保证加密数据不被泄露，不应在脚本中打印加密参数值。演示aliyun-cli脚本如下#从Parameter Store中获取加密参数mysql-password的值，保存在变量db_password中 db_password=`aliyun oos GetSecretParameter-Name mysql-password-...
DML语句
代码示例如下所示：向非分区表 h0 中插入数据。insert into h0 select 1,'a1',20;向静态分区表 h_p0 中插入数据。insert into h_p0 partition(dt='2021-01-02')select 1,'a1';向动态分区表 h_p0 中插入数据。insert into h_p0 partition(dt...
2023年
2023年08月 功能名称 变更类型 功能描述 相关文档 JMeter压测支持自动补全插件 新增 上传JMeter脚本后，自动补全脚本中依赖的JMeter插件，为压测准备工作提效。JMeter插件自动补全 发布阿里云网站测速平台：cesu.pts.aliyun.com 新增 网站...
无构建部署
部署配置 在后续部署步骤，例如主机部署任务中，选择对应制品，即可在部署脚本中使用对应 Git 环境变量。GIT_REPO:Git 地址 GIT_BRANCH:Git 分支 COMMIT_ID:提交版本号 echo${GIT_REPO} echo${GIT_BRANCH} echo${COMMIT_ID} git clone${GIT...
FLINK
FLINK任务类型用于执行Flink...上传并选择所需文件后，您可以在任务脚本中通过完整路径引用它们。input oss:/path/to/oss/to/data 和-output oss:/path/to/oss/to/result 用来指定作业的数据输入路径和数据输出路径，请您根据实际信息替换。
VALUES
如果需要向表中插入少量数据，您可以通过 insert…values 或 values table 操作向数据量小的表中插入数据。执行 insert into 操作前需要具备目标表的修改权限（Alter）及源表的元信息读取权限（Describe）。授权操作请参见 授权。本文中的...
INSERT（2.0版）
示例 在CUSTOMER表中插入一条数据：INSERT INTO customer(customer_id,customer_name,phone_num,city_name,sex,id_number,home_address,office_address,age,login_time)values(002367,'杨过','13900001234','杭州',0,'987300','西湖','转塘...
VALUES
如果需要向表中插入少量数据，您可以通过 insert…values 或 values table 操作向数据量小的表中插入数据。执行 insert into 操作前需要具备目标表的修改权限（Alter）及源表的元信息读取权限（Describe）。授权操作请参见 权限列表。本文...
SQL开发
向量检索版提供了SQL开发功能，支持SQL语句的编译、...脚本编写，在新建的SQL实例脚本中，支持SQL编辑、格式化SQL、运行SQL等功能：运行结果可在下方列表页进行查看或下载，同时可以查看SQL运行的日志以及查询语句：查询语法 参考：查询语句
REMOTESHELL
该类型任务通过SSH方式将作业提交到SSH数据源所在...选择所需文件后，您可以在任务脚本中通过完整路径引用它们。例如，path/to/test.txt。自定义参数 任务自定义参数，会替换脚本中${变量} 的内容。前置任务 设置当前任务的前置（上游）任务。
查看历史信息
在 pipeline 页面，查看管道脚本中的组件、调度配置 和 容错配置。完成查看信息后，单击 节点版本 对话框中的 确定，关闭节点版本对话框。下载管道脚本 在数据 集成 页面，单击需要下载脚本的离线单条管道。在管道脚本的编辑页面，单击页面...
HTTP相关
构造方式 只能由集成流引擎构造，不支持在脚本中构造。方法列表 方法 说明 Entity getBody()获取对端接口返回的HTTP Response Body内容，类型为Entity。MIME Type根据HTTP Response的content type决定。long getBodyLength()获取对端接口...
OTSStreamReader常见问题
解决方案 同步脚本中配置的endTime必须小于 任务启动时间-5分钟。OTSStreamReader运行时出现“配置中的源表的列个数和目的端表不一致，源表中您配置的列数是:xx大于目的端的列数是:xx”错误 问题现象 OTSStreamReader运行时出现“配置中的...
查看历史信息
在 pipeline 页面，查看管道脚本中的组件、调度配置 和 容错配置。完成查看信息后，单击 节点版本 对话框中的 确定，关闭节点版本对话框。下载管道脚本 在数据 集成 页面，单击需要下载脚本的离线单条管道。在管道脚本的编辑页面，单击页面...
Dataphin中python脚本导入odps包后使用报错"name '...
问题描述 Dataphin的python脚本中，导入odps包后，使用odps.execute_sql()时报错"name 'odps' is not defined。问题原因 用户使用的Dataphin是2.9.1版本，此版本使用odps包时需要先手工添加odps的AK信息去获取实例，不能直接使用。解决方案...
- 产品推荐
- 这些文档可能帮助您