SPL概述
本文介绍 日志服务 SPL语言的基本信息，包括工作原理、语法、指令表达式等。工作原理 日志服务SPL支持在实时消费、扫描查询和Logtail采集三个日志服务场景中使用，工作原理如下图：关于SPL在各个场景中的功能定义，请参见 SPL在不同场景的...
什么是Serverless工作流
Serverless 工作流 简化了开发和运行业务流程所需要的任务协调、状态管理以及错误处理等繁琐工作，让您聚焦业务逻辑开发。下图描述了 Serverless 工作流 如何协调分布式任务，这些任务可以是函数、已集成云服务API、运行在虚拟机或容器上的...
数据解析概述
物联网平台的数据服务提供数据解析功能，通过数据解析对设备数据或导入的API数据源的数据进行解析和预处理后，将数据流转到业务服务器，或以表的形式存储于物联网平台。功能说明 您可在物联网平台控制台的 数据服务>数据解析 页面，创建和...
什么是云工作流（CloudFlow）
云工作流 简化了开发和运行业务流程所需要的任务协调、状态管理以及错误处理等繁琐工作，让您聚焦业务逻辑开发。下图描述了 云工作流 如何协调分布式任务，这些任务可以是函数、已集成云服务API、运行在虚拟机或容器上的程序。产品优势 ...
产品简介
产品简介 阿里巴巴通义实验室千寻搜索算法，基于达摩院长期积累的自然语言处理技术，专注企业统一搜索场景，提供精准的多源异构搜索，以PaaS服务形式提供离线数据处理和搜索服务API。同时支持公有云、专有云、基于云原生的基础架构下混合云...
安装并使用Alibaba Cloud Compiler
Alibaba Cloud Compiler是阿里云打造的C++编译器，基于Clang/LLVM-13社区开源版本开发，继承开源版本支持的所有选项、参数，同时结合阿里云基础设施进行深度优化、补充特性，可以让您获得更好的C++编译器体验。本文主要介绍如何在Alibaba ...
使用EAIS推理PyTorch模型（C++）
如果您初次使用EAIS，可以通过本文内容体验在ECS实例上使用EAIS通过C++程序推理PyTorch模型并获得性能加速的完整使用流程，帮助您快速上手EAIS。背景信息 本教程将引导您创建一个华东1（杭州）地域，eais.ei-a6.2xlarge规格的EAIS实例，并...
函数计算只支持Node.js，用C++写的程序怎么运行？
当前函数计算支持的编程语言详情请参见 开发语言列表，如果您的程序是用函数计算还未支持的语言实现的，您可以采用以下做法：用函数计算支持的语言改写。Node.js、Python等语言包含了非常丰富的类库，开发效率很高。使用 Custom Runtime ...
训练加速（Pai-Megatron-Patch）概述
本文为您介绍Pai-Megatron-Patch的工作原理和使用流程。背景信息 Pai-Megatron-Patch工具是阿里云机器学习平台PAI算法团队研发，基于阿里云智算服务PAI-灵骏平台的大模型最佳实践解决方案配套工具，旨在帮助大模型开发者快速上手灵骏产品，...
产品原理
原理流程图解 原理流程说明 终端向本地递归DNS系统查询应用服务域名 www.example.com 。假设本地递归DNS系统没有 www.example.com 的缓存，那么本地递归DNS会向DNS根服务器发送此域名的DNS查询请求。同时DNS根服务器，会根据查询域名的后缀...
操作指南概述
阿里云媒体处理MPS（ApsaraVideo Media Processing，原MTS）以经济、弹性和高可扩展的转换方法，将多媒体数据转码成适合在全平台播放的格式，并基于海量数据对媒体的内容进行多模态分析，实现智能审核、智能生产、版权保护等功能。...
Wi-Fi设备接入物联网平台
因此开发者在设备端程序的大体流程为：获取设备的身份认证信息 开发让用户输入WiFi热点SSID/密码的实现 获取到IP地址之后，调用SDK连接物联网平台进行认证。认证后，调用SDK提供的API将设备属性的最新数据上报云端。当设备属性变化时，将...
流式ETL
离线数仓加速：通过流数据处理先将数据预处理至数仓，后续再对数仓数据进行深度挖掘。既不影响业务库运行，也能满足离线数仓对外服务。报表提速：构建实时报表体系，不仅大幅提升报表产出效率，还能支持更多实时分析场景，满足了企业数字化...
什么是ETL
离线数仓加速：通过流数据处理先将数据预处理至数仓，后续再对数仓数据进行深度挖掘。既不影响业务库运行，也能满足离线数仓对外服务。报表提速：构建实时报表体系，不仅大幅提升报表产出效率，还能支持更多实时分析场景，满足了企业数字化...
概述
功能原理 应用程序通过调用C Link SDK的API，基于 MQTT协议，设备接收物联网平台下发的任务通知，或主动获取物联网平台的任务详情，根据业务需要执行任务处理后，再向设备更新任务状态。如下功能时序图，以设备的应用程序./demos/task_...
流程定义介绍
本文介绍 云工作流 的流程定义语言的基础知识和相关使用示例等。基础知识 云工作流 使用YAML格式的流程定义语言来描述和定义业务逻辑。在执行流程时，云工作流 服务会根据流程定义解析并驱动执行相关状态流转。一个流程（Flow）通常包含...
函数计算只支持Node.js，用C++写的程序怎么运行？
函数计算 会根据您的需求不断拓展支持的语言种类。当前 函数计算 支持的编程语言详情，请参见 代码开发概述。如果您的程序使用 函数计算 还未支持的语言实现，您可以采用以下做法：用 函数计算 支持的语言改写。Node.js、Python等语言包含...
输入和输出
云工作流 的各种状态（State）之间需要传递数据，每个状态（State）将接受前一状态的输入（Input），并返回输出（Output）并将此输出传递给下一个状态（State）。本文介绍输入和输出的基础知识。流程和状态 流程（Flow）的多个状态（State...
新建自定义工作流
Designer通过工作流的方式来实现建模与模型调试。您需要先创建一个工作流，再根据建模需求在工作流中排布不同组件的处理调度逻辑。...后续步骤 完成新建工作流后，需要进行数据准备与预处理，详情请参见 数据准备与预处理。
以太网设备接入物联网平台
因此开发者在设备端程序的大体流程为：获取设备的身份认证信息。获取到IP地址之后，调用SDK连接物联网平台进行认证。认证后，调用SDK提供的API将设备属性的最新数据上报云端。当设备属性变化时，调用SDK将设备属性的最新数值上报云端。向...
OCR文档自学习概述
价值主张 数据资产化：支持数据资产的闭环管理（上传、处理、标注等），提供一站式预处理与标注工具，通过平台可视化引导，服务无算法基础的用户，5分钟内完成自定义模板任务从创建到发布全流程，从而持续沉淀数据资产，助力业务的转型升级...
服务集成模式
流程引擎将尽最大努力取消任务，例如，当前流程采用等待系统回调（WaitForSystemCallback）任务模式，调用包含了子流程或 函数计算 的异步任务时，调用 云工作流 的 StopExecution-停止一个正在执行的流程 API停止当前流程时，云工作流 会...
产品概述
阿里云流数据处理平台数据总线DataHub是流式数据（Streaming Data）的处理平台，提供对流式数据的发布(Publish)，订阅（Subscribe）和分发功能，让您可以轻松构建基于流式数据的分析和应用。数据总线 DataHub服务可以对各种移动设备，应用...
概览
自定义资源的工作原理 自定义资源执行的操作涉及以下对象：template developer：创建包含自定义资源类型的模板。template developer在模板中指定服务令牌和所有输入数据。custom resource provider：拥有自定义资源并确定如何处理和响应...
OCR文档自学习概述
价值主张 数据资产化：支持数据资产的闭环管理（上传、处理、标注等），提供一站式预处理与标注工具，通过平台可视化引导，服务无算法基础的用户，5分钟内完成标注任务单张整条链路的串联，从而持续沉淀数据资产，助力业务的转型升级。...
高级模板设计师工具箱Leap Box使用说明
使用Leap Box可以将AE模板中暂时不被VE引擎支持的预处理掉，以方便设计师导出AE模板文件。通过阅读本文，您可以了解Leap Box的安装流程及功能说明。背景信息 Leap Box是在VE Cleaner插件基础上进行拓展完善的一款功能强大且集合了各种实用...
功能发布记录
可以通过平台提供的预标注和主动学习能力进行智能标注，减少标注所需工作量，提高工作效率和标注质量，并将数据用于模型的训练。2020-08-13/脏话识别服务 预训练模型 针对一句话识别是否是脏话，以及抽取脏话关键词，详见右侧文档 2020-08-...
LLM on DLC-Megatron on DLC最佳实践
预训练大语言模型面对来自于模型规模和数据规模的多重挑战，为了解决这些问题，PAI提供了在 DLC 上使用Megatron-LM进行大语言模型预训练的最佳实践。该实践通过准备镜像环境与训练数据、调整训练策略、提交与管理任务等流程，帮助您在 DLC ...
SDK参考
支持插件式定制实现自定义的验签逻辑、流量控制、预请求处理和响应处理。更多信息，请参见 CSB 用户自定义扩展说明。历史版本支持 重要 不再建议使用1.1.5.7之前的版本。如果您仍在使用，建议升级到最新版本的SDK。1.0.4.1 Java 1.7 Java 1...
触发工作流
触发方式对比 触发方式 适用场景 自动触发 文件上传到指定路径后立即按固定流程处理 手动 触发（校验输入路径）历史数据处理，对已存储在OSS的文件按工作流批量处理 文件上传后不需要立刻处理，比如等待有用户访问、播放量较高后再处理 ...
函数实例生命周期回调方法
4736-8b08-a67c1d*[INFO]Handle PreStop:03be685c-378b-4736-8b08-a67c1d*2022-10-09 19:32:17 2022-10-09 19:32:17 03be685c-378b-4736-8b08-a67c1d*[INFO]PreStop end 2022-10-09 19:32:17 FC PreStop End RequestId:03be685c-378b-4736-...
使用Megatron-Deepspeed训练GPT-2并生成文本
xz-d oscar-1GB.jsonl.xz 执行以下命令，预处理数据。python3 tools/preprocess_data.py \-input oscar-1GB.jsonl \-output-prefix meg-gpt2 \-vocab gpt2-vocab.json \-dataset-impl mmap \-tokenizer-type GPT2BPETokenizer \-merge-file...
功能特性
Serverless 工作流 功能集 功能 功能描述 参考文档 基础功能建设 流程（Flow）云工作流使用YAML格式的流程定义语言来描述和定义流程。执行流程时，云工作流服务会根据流程定义解析并驱动执行相关状态流转。一个流程通常包含若干状态（State...
AGS概览
WDL工作流 WDL（Workflow Description Language）是由Broad Institute开发的一种流程开发语言，简单易用，能够有效的提高生物信息工作流的构建效率。更多信息，请参见 创建WDL工作流。在ACK上运行WDL的优势 兼容社区CronwellServer，完整...
基础开发
本文介绍 Serverless 应用引擎 SAE（Serverless App Engine）源码部署的工作原理、环境配置、构建流程、源代码导入等信息。整体工作原理 作为 Serverless 应用引擎 SAE（Serverless App Engine）中，降低用户运维负担的重要一环，源码部署...
联邦建模概述
联邦数据处理：对联邦表中的数据进行预处理，包括数据预处理和预处理应用。模型训练：使用预处理过的训练集数据训练模型。模型评估：使用预处理过的测试集数据评估模型效果。典型的模型开发业务逻辑如下图所示，其中，离线样本生成的三种...
连接方式概述
OceanBase Connector/C 允许 C/C++ 程序以一种较为底层的方式访问 OceanBase 分布式数据库集群，以进行数据库连接、数据访问、错误处理和 Prepared Statement 处理等操作。OceanBase Connector/C 也称为 LibOBClient，用于应用程序作为独立...
在线访客名片文档
1.在线服务访客名片接入流程 说明 注意：本文只对在线服务接入访客名片功能进行详细叙述。接入在线服务的租户通常会有这么一个需求，就是希望客服在工作台界面能够看到来咨询问题的访客的个人信息，以便提供更好的服务。出于为客户的数据...
功能简介
数据开发为用户提供一站式计算节点开发能力，通过对数据加工流程的开发和运行调试等环节的一体化管理，数据开发实现数据加工工作流编排、加工逻辑的复用，大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构，提高系统的工程化水平...
功能简介
数据开发为用户提供一站式计算节点开发能力，通过对数据加工流程的开发和运行调试等环节的一体化管理，数据开发实现数据加工工作流编排、加工逻辑的复用，大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构，提高系统的工程化水平...
- 产品推荐
- 这些文档可能帮助您