Window Function的并行加速
Window Function是社区版MySQL 8.0为提升查询分析能力而引入的功能，在 PolarDB MySQL版 8.0版本中对Window Function进行了全面支持，并可以做并行执行。前提条件 集群版本需为 PolarDB MySQL版 8.0 集群版，且Revision version为8.0.2.2.0...
PolarDB并行查询
在join的表集合中，寻找一个可以做逻辑分片的表做拆分，如果3个表都不足以拆分足够多的分片，那就选最多的表，比如这里选择了t2，它可能拆出12个分片，但仍然无法满足并行度16的要求，导致有4个worker读不到数据而idle。聚集操作先在worker...
PolarDB处理TPC-H查询的挑战和机遇
数据访问位置（Data Access Locality）Columnar Locality 这是列存的天然优势，紧凑的数据布局有益于cache locality，并且可以做压缩来减少IO开销。利用向量化技术以及基于SIMD指令集的计算原语，实现高效的算子内并行，提升算子执行效率。...
数据传递
Input=$Context.Current.Input$Output=$Context.Current.Output 数据传递 不同类型的状态（State）之间存在不同的输入输出传输逻辑，在没有输入输出构造器定义的情况下，不同状态（State）的输入输出逻辑如下。传递（Pass）/成功（Succeed...
如何创建 App
注意：对于输入输出参数，可以用环境变量的方式来使用，比如：命令行访问：在 App 的命令行中采用${inputparam} 的方式传入每一个 input/output 参数，对于有 LocalPath 的路径，在命令行执行时，批量计算会将其替换成本地路径。...
前言
App 是什么 App 是批量计算中资源配置的模板，包括使用什么镜像、什么实例类型、VM 个数。镜像中封装了运行作业的程序或算法，使用 App 提交作业，只需要指定输入数据和输出路径即可以运行作业，而不用关心上述的资源配置以及程序运行的...
常见问题
您可以使用 云工作流 编排一系列的函数资源，同时定义流程中每一步的输入和输出，使用内置控制步骤编排复杂逻辑、发起并行执行、管理超时或终止流程。另外通过 云工作流 的控制台能够使用图形界面显示出执行任务状态和执行顺序，同时 云...
集成Serverless工作流
集成 Serverless 工作流 功能让您可以方便地在一个流程中执行另一个流程，本文介绍了集成 Serverless 工作流 的使用场景、集成模式、对象说明和子流程的输入输出规则。使用场景 在以下场景中可以考虑使用 Serverless 工作流 集成：降低流程...
并行循环步骤
当所有分支执行结束后，可以通过输出映射将迭代本地变量数组转换为并行步骤的输出。说明 并行循环步骤最大并发数限制为100。并行步骤包含以下属性：（必需）type：foreach表示该步骤是并行循环步骤。（必需）name：步骤名称。（必需）...
基本概念
应用/App 基因分析应用，使用流程描述语言（如 Workflow Description Language，WDL）编写的标准的、参数化的生物信息分析流程，清晰定义了分析的输入输出、运行环境和软件依赖等，通常包含多个具有依赖关系的分析步骤。平台提供中心化的...
数据集拆分
功能说明 数据集拆分组件可以根据拆分比例对输入数据集做拆分处理，输出两个变量名称相同但数据量不同的数据集。可使用数据集拆分组件将数据集拆分为两份以适用于不同的场景。支持随机拆分和前后拆分两种方式。计算逻辑原理 随机拆分：按照...
基本介绍
在定义流程时，您可以：通过传递（pass）步骤来做占位符规划流程基本结构。通过任务（task）步骤去调用函数计算服务的函数。如果需要等待一段时间可以通过等待（wait）步骤暂停流程的执行。通过选择（choice）步骤来定义不同执行路径。通过...
依赖关系
调度依赖配置常见问题 提交节点报错：当前节点依赖的父节点输出名不存在 提交节点时提示：输入输出和代码血缘分析不匹配 为什么自动解析的父节点名会报依赖的父节点输出（表）不存在？为什么有些节点的本节点的输出中，下游节点名称、下游...
MapReduce常见问题
不使用Combiner时输出正常，使用Combiner后Reduce没有输入，是什么原因？在MapOnly中，为什么程序没有指定输出Table的Schema格式？如何在本地调用MaxCompute服务器运行MapReduce任务？常见报错 执行MaxCompute MapReduce时，报错...
流程定义介绍
这些状态可以组合嵌套使用，以构建复杂的业务逻辑，例如，一个并行状态的分支可以是一个选择状态。流程中的状态执行可能出现错误，云工作流 提供OnError错误处理能力，支持错误重试或错误流转到其他状态。云工作流 的状态类似于编程语言中...
事件请求处理程序（Event Handler）
} static void Main(string[]args){} } } 除了Stream作为输入输出参数，POCO（Plain old CLR objects）对象同样也可以作为输入和输出。如果该POCO没有指定特定的JSON序列化对象，则 函数计算 默认使用JSON.Net进行对象的JSON序列化和反序列...
配置参数说明
当选择数据表时，需保证输入的模型与上游节点的输出数据模型相同，物理表名可以自定义。当选择星号（*）时，代表数据结构为任意结构，用于对未新建数据模型的表进行操作，此时物理表必须选择已经存在的表。开发环境 物理表所在资源 开发...
术语表
在开始使用MaxCompute产品前，您可以提前查阅MaxCompute所涉及的术语及其含义，为了解产品及快速上手提供帮助。本文为您介绍MaxCompute涉及的术语及其概念。A AccessKey 简称AK，包括AccessKey ID和AccessKey Secret，是访问阿里云API的...
普通节点
说明 拒识是指机器人无法将用户输入信息与已设意图做匹配，即机器人无法识别用户意图。超时配置：语音对话时，用户静默一定时间没有响应时，机器人会使用超时回复话术进行回复。超时可以定义超时的时间（建议5s），同拒识一样，除了回复也...
普通节点
说明 拒识是指机器人无法将用户输入信息与已设意图做匹配，即机器人无法识别用户意图。超时配置：语音对话时，用户静默一定时间没有响应时，机器人会使用超时回复话术进行回复。超时可以定义超时的时间（建议5s），同拒识一样，除了回复也...
普通节点
说明 拒识是指机器人无法将用户输入信息与已设意图做匹配，即机器人无法识别用户意图。超时配置：语音对话时，用户静默一定时间没有响应时，机器人会使用超时回复话术进行回复。超时可以定义超时的时间（建议5s），同拒识一样，除了回复也...
部署异步推理服务
说明 在4 GB内存的默认配置下，由于最大数据体积默认为8 KB，则输入输出队列均可以存放230399条数据，如果您需要在队列子服务中存放更多数据项，可以参考上文中的内存配置，将内存大小按照需要提高。系统将占用总内存的10%。对于同一个队列...
COPY
一个输入文件的名称可以是一个绝对或相对路径，但一个输出文件的名称必须是绝对路径。Windows 用户可能需要使用一个 E'' 字符串并且双写路径名称中使用的任何反斜线。PROGRAM 一个要执行的命令。在 COPY FROM 中，输入将从该命令的标准输出...
API详情
模型概览 模型名 模型简介 模型输入输出限制 qwen1.5-72b-chat 通义千问1.5对外开源的72B规模参数量的经过人类指令对齐的chat模型 支持32k tokens上下文，输入最大30k，输出最大2k tokens。qwen1.5-32b-chat 通义千问1.5对外开源的32B规模...
工作流常见问题
您可以在 控制台-媒体库 页面管理视频，通过每个视频的 管理 链接进入视频详情页面，你可以看到每个输出的OSS地址及CDN加速地址（该OSS Bucket有配置CDN的情况下），另外，您还可以通过SDK，以编程方式获取。更多信息请参见 媒体详细信息。...
API详情
模型概览 模型名 模型简介 模型输入输出限制 qwen1.5-72b-chat 通义千问1.5对外开源的72B规模参数量的经过人类指令对齐的chat模型 支持32k tokens上下文，输入最大30k，输出最大2k tokens。qwen1.5-32b-chat 通义千问1.5对外开源的32B规模...
SELECT
通过使用操作符UNION、INTERSECT和EXCEPT，多于一个SELECT语句的输出可以被整合形成一个结果集。UNION操作符返回位于一个或者两个结果集中的全部行。INTERSECT操作符返回同时位于两个结果集中的所有行。EXCEPT操作符返回位于第一个结果集但...
使用C或C++开发自定义Processor
} } 该Processor未读取任何模型信息，将用户输入原样输出，可以通过如下的Makefile将其编译为SO文件。CC=g+CCFLAGS=-I./-D_GNU_SOURCE-Wall-g-fPIC LDFLAGS=-shared-Wl,-rpath=./OBJS=processor.o TARGET=libpredictor.so all:$(TARGET)$...
Hive作业调优
某个特定的Job可能包含多个阶段，而这些阶段可能并非完全相互依赖的，也就是可以并行运行的，这样可以使得整个Job的运行时间缩短。您可以通过设置以下参数，控制不同的作业是否可以同时运行。参数 描述 hive.exec.parallel 默认值为false。...
日期/时间类型
日期顺序习惯 datestyle 设置 输入顺序 例子输出 SQL,DMY 日/月/年 17/12/1997 15:37:16.00 CET SQL,MDY 月/日/年 12/17/1997 07:37:16.00 PST Postgres,DMY 日/月/年 Wed 17 Dec 07:37:16 1997 PST 格式化函数 to_char 也可以作为一个更...
通过配置文件管理管道
Logstash通过管道完成数据的采集与处理，管道配置中包含input、output和filter（可选）插件，input和output用来配置输入和输出数据源、filter用来对数据进行过滤或预处理。阿里云Logstash支持多管道并行运行，目前最多支持20个。本文介绍...
PolarDB HTAP实时数据分析技术解密
对每一个计算表达式，其输入和输出都以Batch为单位，在Batch处理模式下，计算过程可以使用SIMD指令进行加速。即表达式系统有两项关键优化：充分利用列式存储的优势，使用分批处理模型代替迭代器模型，使用SIMD指令重写大部分常用数据类型的...
PolarDB MySQL版8.0.2版本发布日志
修复Hybrid Plan应用于带Order By的SQL语句，且输出行包含NULL时，报 table definition has changed 错误的问题。修复部分内置存储过程输入变量数量错误，不能正确报错的问题。修复并行查询将GROUP BY下推到Worker上去并行执行时，在有分区...
PolarDB MySQL版8.0.1版本发布日志
修复Hybrid Plan应用于带Order By的SQL语句，且输出行包含NULL时，报错"table definition has changed"的问题。8.0.1.1.38.1 类别 说明 发布时间 问题修复 未添加过Statement Outline的集群，在版本升级后如果添加了Statement Outline，...
Kafka单表实时入湖OSS（HUDI）
在 数据输出预览 窗口，您可以根据需要修改输入数据，或者单击 手工构造数据 按钮自定义输入数据，然后单击 预览 按钮，查看当前数据处理节点对数据的处理结果，当数据处理节点处理异常，或者产生脏数据时，也会实时反馈异常信息，能够帮助...
API详情
模型概览 您可以通过API使用的通义千问系列模型详情如下表所示：模型名称 模型简介 模型输入/输出限制 qwen-turbo 通义千问 超大规模 语言模型，支持中文、英文等不同语言输入。模型支持8k tokens上下文，为了保证正常的使用和输出，API...
创建存储过程
调用时，存储过程可选择以输入参数的形式从调用方接收值，并可选择以输出参数的形式向调用方返回值。CREATE PROCEDURE 命令可定义并命名一个将存储在数据库中的独立存储过程。如果包括 schema 名称，则在指定的 schema 中创建存储过程。...
API详情
模型概览 您可以通过API使用的通义千问系列模型详情如下表所示：模型名称 模型简介 模型输入/输出限制 qwen-turbo 通义千问 超大规模 语言模型，支持中文、英文等不同语言输入。模型支持8k tokens上下文，为了保证正常的使用和输出，API...
组件参考：所有组件汇总
过滤与映射 该组件可以对数据按照过滤表达式进行筛选，并且您可以修改输出字段名称。分层采样 给定一个分组列，该组件按照这些列的不同值，将输入数据分成不同的组，并在每组中分别进行随机采样。JOIN 该组件将两张表通过关联信息，合成...
多轮对话管理
相比于表格版，图形版用流程图的凡是来做对话管理和输出配置，逻辑更加直观和清晰，并针对意图中断的情况设置了默认输出。基础信息 与表格版完全一致。问句举例 与表格版完全一致。对话管理 图形版意图和表格版意图的最主要差别就是图形版...
- 产品推荐
- 这些文档可能帮助您