授权信息
本文为您介绍 开源大数据平台 E-MapReduce（EMR）为RAM权限策略定义的操作（Action）、资源（Resource）和条件（Condition）。开源大数据平台 E-MapReduce（EMR）的RAM代码（RamCode）为 emr,emr-apm-server,ecm,emr-serverless-spark,dls...
授权信息
本文为您介绍 大模型服务平台百炼（SFM）为RAM权限策略定义的操作（Action）、资源（Resource）和条件（Condition）。大模型服务平台百炼（SFM）的RAM代码（RamCode）为 sfm，支持的授权粒度为 RESOURCE。权限策略通用结构 权限策略支持...
其他问题
为什么不能在调度资源组上进行大数据计算？其他 如何设置任务优先级？如何查看任务优先级？周期任务与周期实例、补数据实例、测试实例是什么关系？DataWorks每晚将根据周期任务，批量生成第二天自动调度的周期实例，周期实例自动生成并且...
写入HDFS出现无法close文件的异常
如果大量并发提交作业，会有大量JAR文件需要上传，可能会导致DataNode瞬时压力大，可以继续调大 dfs.client.block.write.locateFollowingBlock.retries 参数值或者增加DataNode数量。说明 调大 dfs.client.block.write....
相关协议
本文介绍大数据专家服务相关服务协议。专家服务试用协议
BiLLa开源推理能力增强模型
BiLLa模型在大模型服务平台上的模型名称为"billa-7b-sft-v1。BiLLa 是开源的推理能力增强的中英双语 LLaMA 模型.模型的主要特点：较大提升 LLaMA 的中文理解能力,并尽可能减少对原始 LLaMA 英文能力的损伤;训练过程增加较多的任务型数据,...
录音指导
音量、语速不一致 此问题主要是拼接多段不同来源的音频导致，如下图所示：音量过大或过小 音量过大，会产生音频截幅现象，会导致声音信息不完整，具体表现为波形图中波峰信息被截断：造成音量过大的可能原因有：离麦克风过近 录制时发音过...
Prompt优化
说明 Prompt优化功能通过调用大模型实现，需要消耗一定量的tokens。操作步骤 功能路径：Prompt工程-Prompt优化。您可以在 原始Prompt 框输入您的Prompt。点击 优化 按钮，系统会弹出计费提示，如您点击 开始优化 按钮，则系统开始优化，...
快速使用
OpenNLU全称Open Domain Natural Language Understanding，是开箱即用的文本理解大模型，适用于中文、英文在在零样本条件下进行文本理解任务，如信息抽取、文本分类等。OpenNLU将NLU任务分成两个大类：抽取和分类。抽取任务目标是从给定...
计量计费
语音合成 计费单元 模型服务 计费单元 语音合成 万字 重要 语音合成模型服务根据待合成字符数计费（其中每个...查看账单 有关阿里云百炼大模型服务平台的账单时效信息请参阅：产品计费。有关账单详情请前往阿里云用户中心查询：查看账单详情。
API详情
Ziya-LLaMA 说明 支持的领域/任务：aigc Ziya-LLaMA通用大模型是由IDEA研究院出品的大规模语言模型，它在大模型服务平台上的模型名称为"ziya-llama-13b-v1。Ziya-LLaMA大模型V1是基于LLaMa的130亿参数的大规模预训练模型，具备翻译，编程，...
客户案例
MaxCompute已被广泛应用于各大领域处理云上大数据，帮助众多企业解决了海量数据分析问题，同时降低企业运维成本，企业人员可更专注于业务开发。本文为您介绍MaxCompute的精选客户案例。MaxCompute的全量客户案例信息，请参见 行业客户案例...
IoT数据自动化同步至云端解决方案
大数据分析是大数据完成数据价值化的重要手段之一，而进行大数据分析的第一步是让数据成功上云。解决方案 IoT数据自动化同步至云端解决方案主要包括存储原始数据和同步数据至分析系统两部分。IoT设备大量的数据通常以半结构化的形式存储。...
相关的云服务
本文为您介绍典型场景下，使用开源大数据平台E-MapReduce时通常会使用到的其他云服务。云服务名称 说明 云服务器ECS 使用云服务器ECS（Elastic Compute Service）作为集群的节点，每个ECS实例集群中的一个节点。专有网络VPC 专有网络VPC...
计量计费
计费单价 模型服务 计费单价（币种：RMB）multimodal-embedding-one-peace-v1 限时免费 免费额度 模型服务 免费额度 multimodal-embedding-one-peace-v1 开通大模型服务平台即获赠 10000 加权条目数，180天有效期。基础限流 为了保证用户...
应用调用SDK参考
重要 历史文档仅适用于百炼1.0版本的API和SDK调用，鉴于旧版功能已停止迭代更新，强烈建议您升级至最新版API和SDK，具体详情请参考 新版本升级说明。本文主要介绍如何通过SDK调用阿里云百炼大语言模型以及应用。
应用调用API参考
本文主要介绍如何通过API调用阿里云百炼大语言模型以及应用。重要 历史文档仅适用于百炼1.0版本的API和SDK调用，鉴于旧版功能已停止迭代更新，强烈建议您升级至最新版API和SDK，具体详情请参考 新版本升级说明。
操作说明
插件是智能体API应用中重要的一环，结合增强大语言模型的规划调度能力和生成能力，更好地在您的业务场景中落地。我们提供两类插件：官方插件和自定义插件 官方插件 百炼平台官方提供的插件，您可以根据业务需求进行选择。官方插件名称 插件...
DataWorks on EMR数据安全方案
在大数据领域，阿里云为企业用户提供了一整套数据安全方案，包含用户认证、数据权限、大数据作业管理体系等。本文以联合使用DataWorks与EMR为例，为您介绍DataWorks on EMR场景下的数据安全方案。背景信息 DataWorks on EMR目前支持LDAP...
技术架构选型
本教程中使用阿里云大数据产品MaxCompute配合DataWorks，完成整体的数据建模和研发流程。完整的技术架构图如下图所示。其中，DataWorks的数据集成负责完成数据的采集和基本的ETL。MaxCompute作为整个大数据开发过程中的离线计算引擎。...
通过阿里云Milvus与PAI搭建高效的检索增强生成（RAG）...
然而，在广泛应用大语言模型（LLM）的过程中，一些固有局限性逐渐显现：领域知识局限：大语言模型通常基于大规模通用数据集训练而成，这意味着它们在处理专业垂直领域的具体应用时可能缺乏针对性和深度。信息更新滞后：由于模型训练所依赖...
使用限制
数据库名、表名、视图名区分大小写，列名不区分大小写。列名不支持修改。标签（Label）名：导入数据时可以指定任务的标签（Label）。标签名可由数字(0-9)、大小写字母（a-z或A-Z），以及下划线(_)组成，且长度不能超过128个字符。标签名对...
大语言模型
Qwen 通义千问为阿里云研发的大语言系列模型。千问模型基于Transformer架构，在超大规模的预训练数据上进行训练得到。预训练数据类型多样，覆盖广泛，包括大量网络文本、专业书籍、代码等。同时，在预训练模型的基础之上，使用对齐机制打造...
Spark作业异常排查及处理
解决方案：在EMR控制台中Spark服务的配置页面，调大 spark.driver.memoryOverhead 或 spark.executor.memoryOverhead 的值。Spark任务读写OSS文件时出现Container killed by YARN for exceeding memory limits 报错原因：可能是由于读写OSS...
流程编排
例如返回结果希望是大模型的返回结果，可以在输出表达式上写下 svcVars.LLM_DGc2XV.response.text {"svcVars":{"LLM_DGc2XV":{"params":{"modelId":"qwen-plus-v1","prompt":"你是一个音乐播放器，根据下面的描述，推荐一首适合这个天气挺...
技术架构选型
本教程中使用阿里云大数据产品MaxCompute配合DataWorks，完成整体的数据建模和研发流程。完整的技术架构图如下图所示。其中，DataWorks的数据集成负责完成数据的采集和基本的ETL。MaxCompute作为整个大数据开发过程中的离线计算引擎。...
安装SDK
功能描述 本文主要介绍如何下载和安装SDK来调用阿里云百炼大模型应用,目前阿里云百炼SDK支持Python、Java和Go语言。SDK安装说明 Python SDK Python SDK支持Python3.7.0以上版本。通过pip安装bailian python SDK pip install broadscope-...
产品架构
从上图可以看出EMR由四部分组成：社区开源产品 集成Apache社区开源大数据组件，例如Hadoop、Hive和HBase，随着EMR版本更新，开源软件也会相应的升级，详情请参见 版本概述 下各版本的版本说明。注意 已经创建好的EMR集群不支持组件升级。...
API详情
BELLE-LLaMA 说明 支持的领域/任务：aigc BELLE-LLaMA模型是由BELLE出品的大规模语言模型，它在大模型服务平台上的模型名称为"belle-llama-13b-2m-v1。BELLE（BE Large Language Model Engine），一款基于BLOOM和LLAMA针对中文优化、模型调...
Sambert语音合成
提供SAMBERT+NSFGAN深度神经网络算法与传统领域知识深度结合的文字转语音服务，兼具读音准确，韵律自然，声音还原度高，...开发者可以通过以下链接，了解如何通过大模型服务平台调用Sambert语音合成API：快速开始 API详情 计量计费 模型列表
支持倚天云服务器
阿里云E-MapReduce支持使用倚天云服务器构建开源大数据集群。适用客户 全网用户 新增功能/规格 阿里云E-MapReduce（简称EMR）支持使用倚天云服务器构建开源大数据集群。与现有X86架构实例体验完全相同的情况下，具有更高的性价比，帮助用户...
JindoFS介绍和使用
JindoFS是基于阿里云对象存储OSS，为开源大数据生态构建的Hadoop兼容文件系统（Hadoop Compatible File System，HCFS）。JindoFS提供兼容对象存储的纯客户端模式（SDK）和缓存模式（Cache），以支持与优化Hadoop和Spark生态大数据计算对OSS...
检索增强应用
30*869 SessionId string 否 对话历史会话唯一标识,传入sessionId后，将在云端进行对话历史进行记录，调用大模型将自动携带存储的对话历史。请确保SessionId不重复，并且SessionId和History二选一即可。40*213 AppId string 是 阿里云百炼...
OSS/OSS-HDFS概述
JindoData是阿里云开源大数据团队自研的数据湖存储加速套件，面向大数据和AI生态，为阿里云和业界主要数据湖存储系统提供全方位访问加速解决方案。JindoData套件基于统一架构和内核实现，主要包括 JindoFS 存储系统（原JindoFS Block模式）...
MaxCompute UDF（Java）常见问题
解决措施：如果实际计算量很大，可以在MaxCompute UDF的实现Java类的方法中调用 ExecutionContext.claimAlive 来重置计时器。重点优化MaxCompute UDF代码逻辑。后续调用MaxCompute UDF时，可同时在Session级别配置如下参数辅助调节...
OpenNLU开放域文本理解模型
OpenNLU是开箱即用的文本理解大模型，适用于零样本、少样本条件下进行文本理解任务，如信息抽取、文本分类等。开发者可以通过以下链接，了解如何通过大模型服务平台调用OpenNLU开放域文本理解模型API。快速使用 API详情
通义千问模型版本升级下线说明
背景 随着通义千问大模型不定期完成升级，我们将淘换线上旧版本规格。模型升级、下线前我们会通过短信、站内信、公告等多种方式同步大家。确保大家第一时间可以调用到最新的大模型。升级下线说明 模型规格 下线时间 影响说明 qwen-max-1201...
循环属性说明
例如，用大模型生成测评数据，如果需要生成多条时，可以选择多次执行当前大模型节点，而不需要拉多个节点，更不需要通过多次执行应用调用来实现。考虑到循环的中间结果与业务逻辑实现紧密相关，同时方便控制循环的次数和跳出条件，我们将...
MaxFrame概述
您可以用更熟悉、高效、便捷的方式利用MaxCompute的海量计算资源及数据进行大规模数据处理、可视化数据探索分析以及科学计算、ML/AI开发等工作。本文为您介绍MaxFrame背景信息、功能介绍及使用场景。版本说明 当前MaxCompute MaxFrame功能...
配置字符串替换
您可以通过字符串替换节点替换字符串类型的字段。前提条件 配置字符串替换节点前，您需要先配置好...大小写敏感：原字符串查找是否大小写敏感。添加条件 您可以添加多个字符串替换规则。输出字段 替换后的最终输出字段。单击工具栏中的 图标。
- 产品推荐
- 这些文档可能帮助您