基本概念
数据开发 场景：场景定义数据输出的方式，一个场景包含一种或多种数据输出的方式。计算资源：可以执行计算节点的资源。使用“场景加工”时并不会单独执行一个计算节点任务，需要把计算节点组织成流程执行，所以需要计算资源支持流程的批量...
MaxCompute UDF概述
即其输入与输出是一对多的关系，读入一行数据，输出多个值可视为一张表。UDAF User Defined Aggregation Function。用户自定义聚合函数。适用于多进一出业务场景。即其输入与输出是多对一的关系，将多条输入记录聚合成一个输出值。除上述...
WITH查询（公共表表达式）
一个递归 WITH 查询的通常形式总是一个非递归项，然后是 UNION（或者 UNION ALL），再然后是一个递归项，其中只有递归项能够包含对于查询自身输出的引用。这样一个查询可以被这样执行：递归查询求值 计算非递归项。对 UNION（但不对 UNION ...
GetPipelineRunNode-获取工作流任务节点信息
工作流任务中包含多个节点，通过该接口获取节点的详细信息。接口说明 PAIFlow支持复合形式的工作流，这些工作流在运行时也会体现为复合形式的节点。想要获取到这类节点的详细信息，可以传入Depth参数（默认值为2），可以递归地获取到所查询...
WiFi配网HAL
接口说明 检查系统网络是否可用（设备是否已经成功获得IP地址并且当前IP地址可用）参数说明 void 返回值说明 值 说明 0 网络不可用 1 网络可用 HAL_Wifi_Enable_Mgmt_Frame_Filter 原型 int HAL_Wifi_Enable_Mgmt_Frame_Filter(_IN_uint32_...
节点异常问题排查
检查节点的网络连通性。具体操作，请参见 检查节点的安全组。若节点网络存在异常，请参见 节点网络异常 解决。检查节点的诊断日志。具体操作，请参见 检查节点的诊断日志。检查节点的监控，查看节点CPU、内存、网络等资源负载情况是否存在...
节点异常问题排查
检查节点的网络连通性。具体操作，请参见 检查节点的安全组。若节点网络存在异常，请参见 节点网络异常 解决。检查节点的诊断日志。具体操作，请参见 检查节点的诊断日志。检查节点的监控，查看节点CPU、内存、网络等资源负载情况是否存在...
Logtail限制说明
运行环境 限制项 限制说明 体系结构 Linux Logtail版本支持x86_64和arm64。Windows Logtail版本支持x86_32和x86_64。内存 负载为空时，不开启插件最少需要20 MB内存，开启插件最少需要120 MB内存。实际使用量与采集速率、监控目录和文件...
Logtail
运行环境 限制项 限制说明 体系结构 Linux Logtail版本支持x86_64和arm64。Windows Logtail版本支持x86_32和x86_64。内存 负载为空时，不开启插件最少需要20 MB内存，开启插件最少需要120 MB内存。实际使用量与采集速率、监控目录和文件...
最大连通子图
它通过深度优先搜索（DFS）或广度优先搜索（BFS）来遍历图，识别所有连通组件，再从中找出包含节点最多的子图。配置组件 方法一：可视化方式 在Designer工作流页面添加 最大连通子图 组件，并在界面右侧配置相关参数：参数类型 参数 描述 ...
系统运维工具集SysAK使用说明
loadtask 诊断系统load情况，输出load高的原因及负载贡献最多的进程。sysak loadtask[-m maxload][-i interval][-f outfile][-d][-s]-m：设置要监控的load值，大于这个值时自动开启诊断。如果不设置，则立即对当前系统进行诊断。i：监控...
PageRank
网页获得的链接越多，它的排名越高，同时，链接来源的权重也会影响最终的PageRank分数。PageRank组件能够输出各节点的权重。算法说明 PageRank算法是一种基于链接分析的方法，用于评估网页的相对重要性。核心原则如下：如果一个网页被众多...
UDAF概述
即其输入与输出是多对一的关系，将多条输入记录聚合成一个输出值。MaxCompute支持您通过如下两种代码语言编写UDAF。UDAF类型 说明 Java UDAF 使用Java语言编写UDAF逻辑实现代码。更多信息，请参见 Java UDAF。Python UDAF 使用Python语言...
媒体AI计费
标准版计费（可单击展开查看具体价格）计费项 单价 视频分类+结构化标签 0.05元/分钟 视频人脸识别 0.03元/分钟 视频文字识别标签 0.05元/分钟 视频语音识别标签 0.02元/分钟 音频标签 0.02元/分钟 图片标签 0.0016元/张 入门版计费（单击...
DescribeDiagnosisSQLInfo-查看SQL语句的详细信息
OutputRows Integer 10 算子执行过程中输出的数据行数。InputRows Integer 1000 算子执行过程中输入的数据行数。Memory Float 100 算子占用内存，单位为 KB。StartTime String 1652843003000 算子开始执行的时间。EndTime String ...
数据结构
本文介绍数据加工语法相关的数据结构及其说明。基本数据结构 基本数据结构的不同类型和说明如下表所示：类型 说明 整数 用于设置字段值或者函数的参数传递。例如 e_set("f1",100)表示设置字段 f1 的值为 100。浮点 用于设置字段值或者函数...
QueryJobList-查询转码作业
接口说明 本接口一次最多查询 10 个转码作业。如果不传入 JobIds，则会返回 InvalidParameter（参数无效）错误码。QPS 限制 本接口的单用户 QPS 限制为 100 次/秒。超过限制，API 调用会被限流，这可能会影响您的业务，请合理调用。更多...
创建普通转码任务
说明 如果提交转码任务后转码状态显示为转码失败，但无法查看失败详情，请检查您的网络状况，确保网络畅通后重新提交任务。使用工作流提交普通转码 登录 媒体处理控制台。在顶部菜单栏左侧选择地域。在左侧导航栏，选择 工作流>工作流编排...
数据加工概述
数据分派（一对多）：从源Logstore中读取日志数据，进行加工后分别输出到不同的目标Logstore中。数据融合（多对一）：分别从不同的源Logstore中读取日志数据，进行加工后输出到目标Logstore中。加工语法 SLS DSL（Domain Specific Language...
云市场API概览
银行承兑汇票识别 银承汇票识别支持关键字段识别，包括出票日期、票据号码、出票人信息、收票人信息、承兑人信息、票据金额等结构化识别结果输出。通用混贴票证识别 通用混贴票证识别，基于对客户实际业务流应用场景中对OCR智能化、语义化...
2020年
2020-12-31 华东2（上海）SDR转HDR 视频插帧 基于深度学习的帧率上变换，通过插帧网络合成任意时刻的视频帧，从而优化解决视频中卡顿、抖动等画质问题。2020-12-31 华东2（上海）视频插帧 图像分析处理 肋骨骨折检测 根据胸部CT成像进行...
End节点使用说明
配置页面 可以配置多个key，最终将想要输出的结果，以表达式的形式映射到结束节点中。具体的VALUE取值方式需要参考 流程变量含义及取值方式说明。配置说明 结束节点可以配置多个返回参数，默认配置为svcVars，返回所有节点的执行结果map。...
术语表
N Networklink（网络连接）当您使用外部表、UDF或湖仓一体功能时，MaxCompute默认未建立与外网或VPC网络间的网络连接，您需要开通网络连接以访问外网或VPC中的目标服务（例如HBase、RDS、Hadoop等）。更多开通网络连接信息，请参见 网络...
插件配置概述
S3 input plugin logstash-input-snmp 使用简单网络管理协议（SNMP）轮询网络设备，获取当前设备操作状态信息。SNMP input plugin logstash-input-snmptrap 将SNMP trap消息作为事件读取。Snmptrap input plugin logstash-input-sqs 从...
创建自定义组件
在执行代码中，除了通过环境变量获取输入或输出管道外，也可以直接通过容器内挂载路径进行访问，详情请参见 输入输出目录结构。使用限制 仅华北2（北京）、华东2（上海）、华东1（杭州）和华南1（深圳）支持创建自定义组件。前提条件 已...
功能更新动态（2023年）
FTP输入组件支持通过指定来源文件中的起始字符和结束字符的位置来添加需输出的字段。SQL Server输入组件支持Hint语法。OSS输入与输出组件功能优化，支持读取Excel文件及支持配置文件前缀冲突处理策略等。通过单条管道创建集成任务 配置OSS...
金融大数据
提供了结构化与非结构化数据的融合方案 满足了同时存在离线、在线、流数据的业务场景 解决了大数据平台的集成问题 为大数据平台的开发与管理提供了高效方案 金融风险控制方案 金融风险控制解决方案通过大数据画像、机器学习、知识图谱和...
文档更新动态（2023年）
FTP输入组件支持通过指定来源文件中的起始字符和结束字符的位置来添加需输出的字段。SQL Server输入组件支持Hint语法。OSS输入与输出组件功能优化，支持读取Excel文件及支持配置文件前缀冲突处理策略等。更新说明 通过单条管道创建集成任务...
更新数据
更新文档内容信息 add2DocumentFields={"id":1,#主键id，INT单值类型"name":"搜索",#STRING单值类型"str_arr":"a\x1Db\x1Dc\x1Dd"#STRING多值类型 }#将文档内容添入 add2Document结构 add2Document={"fields":add2DocumentFields,"cmd":...
Python脚本
组件参数 脚本设置 参数 描述 任务输出路径 选择任务输出的OSS路径。配置好的OSS目录会挂载到作业容器的/ml/output/路径下，任务写出到/ml/output/路径下的数据，会被持久化保存到对应的OSS目录。组件的输出端口 OSS输出-1 和OSS输出-2分别...
创建工作流
如果需要制作多码率、多音轨、多字幕或多格式等类型视频，或希望预先编排好一系列任务流程，然后按照编排好的环节和条件依次执行任务，您可以创建工作流并在工作流中设置转码、分析、截图、打包（封装）、审核、提取视频DNA、设置智能封面...
采集标准Docker容器日志
本文介绍如何部署Logtail容器以及创建Logtail配置，用于采集标准Docker容器日志（文本日志和标准输出）。前提条件 已创建Project和Logstore。更多信息，请参见 创建项目Project 和 创建Logstore。目标容器持续产生日志。重要 Logtail只采集...
关键词抽取
该算法基于TextRank，根据PageRank算法思想，利用局部词汇之间关系（共现窗口）构建网络，并计算单词的重要性，最终选取权重大的作为关键词。常用流程如下：原始语料 分词 使用词过滤 关键词抽取 组件配置 您可以使用以下任意一种方式，...
使用Webshell诊断应用
应用的网络环境 SAE 应用置于自建的VPC网络，并提供了命名空间功能，可以将中间件层面的服务调用进行逻辑隔离。命名空间与VPC内的vSwitch为绑定关系，一个命名空间仅能对应一个vSwitch，一个vSwitch可以对应多个命名空间，即VPC内的IP地址...
数据集成
DataWorks数据集成支持复杂网络环境下的数据同步，您可在数据开发（DataStudio）界面直接 创建离线同步节点，用于离线（批量）数据周期性同步；实时同步任务运维，用于单表或整库增量数据实时同步。本文为您介绍数据同步的相关内容。背景...
Oracle同步至Tablestore
网络与资源配置：在下拉框中分别选择已创建的Oracle数据源、Tablestore数据源、独享数据集成资源组，单击 测试所有连通性，保障资源组与数据源之间的网络连通性。配置Oracle来源信息。单击页面上方的 Oracle来源，在Oracle来源信息选择所...
内建函数概述
聚合函数 支持将多条输入记录聚合成一条输出值，实现求和、求平均值、求最大最小值、求平均值、参数聚合、字符串连接等业务处理能力。字符串函数 支持处理STRING类型字符串，实现截取字符串、替换字符串、查找字符串、转换大小写、转换字符...
部署PyTorch模型推理服务
triton 要求的模型目录结构如下：└─chnsenticorp#模型名称。1623831335#模型版本。model.savedmodel#模型文件。saved_model.pb│└─variables│├─variables.data-00000-of-00001│└─variables.index└─config.pbtxt#triton 配置。...
GetServiceInstance-查询服务实例的详细信息
变更历史 变更时间 变更内容概要 操作 2024-03-01 OpenAPI 返回结构发生变更 看变更集 变更项 变更内容 出参 OpenAPI 返回结构发生变更。2023-10-24 OpenAPI 返回结构发生变更 看变更集 变更项 变更内容 出参 OpenAPI 返回结构发生变更。...
配置集群的弹性伸缩
重要 完成本教程预计产生3元左右的费用（假设您的资源运行0.5 小时）。请在完成教程后及时释放资源。前提条件 已参见 快速部署基于Nginx的Web应用 完成Web应用的部署。步骤一：安装metrics-server组件 登录 容器服务管理控制台，在左侧导航...
- 产品推荐
- 这些文档可能帮助您