产品概述
源自阿里巴巴多年安全技术积累，涵盖电商、社区、支付等多领域的平台内容治理经验以及AI算法和云计算基础设施，为企业用户提供稳定、即接即用、成熟的内容安全解决方案，帮助企业和开发者在复杂多变的互联网环境下快速发现文本、图片、视频...
使用OSS Foreign Table导出数据
支持的文件格式 OSS FDW目前仅支持导出如下格式的数据文件：支持导出CSV、TEXT格式的非压缩文本文件。支持导出CSV、TEXT格式的GZIP压缩文件。支持导出ORC格式的二进制文件。关于ORC与 AnalyticDB PostgreSQL版 的数据类型的区别，请参见 ...
数据压缩与编码
业务类型 无压缩表大小 LZO（压缩率/解压速度MB/s）ZSTD（压缩率/解压速度MB/s）LZ4（压缩率/解压速度MB/s）监控类 419.75T 5.82/372 13.09/256 5.19/463.8 日志类 77.26T 4.11/333 6.0/287 4.16/496.1 风控类 147.83T 4.29/297.7 5.93/270...
API详情
对于英文文本来说，1个token通常对应3至4个字母或1个单词。例如，中文文本“你好。会被转换成序列['你','好','。']，而英文文本"Nice to meet you."则会被转换成['Nice',' to',' meet',' you','.']。由于模型调用的计算量与token序列长度...
API详情
对于英文文本来说，1个token通常对应3至4个字母或1个单词。例如，中文文本“你好。会被转换成序列['你','好','。']，而英文文本"Nice to meet you."则会被转换成['Nice',' to',' meet',' you','.']。由于模型调用的计算量与token序列长度...
什么是内容安全
源自阿里巴巴多年安全技术积累，涵盖电商、社区、支付等多领域的平台内容治理经验以及AI算法和云计算基础设施，为企业用户提供稳定、即接即用、成熟的内容安全解决方案，帮助企业和开发者在复杂多变的互联网环境下快速发现文本、图片、视频...
使用oss_fdw读写外部数据文本文件
compressiontype：设置读取和写入OSS上文件的格式：none：默认的文件类型，即没有压缩的文本格式。gzip：读取文件的格式为gzip压缩格式。compressionlevel：设置写入OSS的压缩格式的压缩等级，范围1到9，默认6。说明 filepath和dir需要在...
API详情
对于中文文本来说，1个token通常对应一个汉字；对于英文文本来说，1个token通常对应3至4个字母或1个单词。例如，中文文本“你好。会被转换成序列['你','好','。']，而英文文本"Nice to meet you."则会被转换成['Nice',' to',' meet',' you'...
API概览
文件处理 API 标题 API概述 压缩解压 压缩解压 CreateFileCompressionTask 创建文件压缩任务 文件压缩任务可以将您的多个文件，打包为zip等压缩包。您提交任务后会异步打包文件，将结果存储到指定位置。在打包时支持对文件进行重命名操作，...
Prompt最佳实践
Prompt 工程简介 Prompt（提示词）是一个指令、问题或者语句，能被 用来引导或指示一个语言模型生成特定的文本输出。Prompt是用户与语言模型交互的起始点，它告诉模型用户的意图，并且期望模型能以有意义且相关的方式回应。通过精心设计的...
API详情
对于中文文本来说，1个token通常对应一个汉字；对于英文文本来说，1个token通常对应3至4个字母或1个单词。例如，中文文本“你好。会被转换成序列['你','好','。']，而英文文本"Nice to meet you."则会被转换成['Nice',' to',' meet',' you'...
配置HTTP/2
例如，引入帧来传输数据和指令。多路复用（MultiPlexing）：在HTTP1.x中，我们经常会使用到雪碧图、使用多个域名等方式来优化性能，因为浏览器限制了同一个域名下的请求数量，当页面需要请求很多资源的时候，队头阻塞（Head of line ...
配置HTTP/2
HTTP/2（HTTP2.0）是继HTTP1.1版本之后的新版HTTP协议，支持二进制分帧、多路复用、首部压缩等最新的特性，能够大幅度提高Web性能，降低数据交互延迟。本文主要介绍HTTP/2的概念、优势、使用场景和配置方法。前提条件 执行该操作前，请您...
内容检测API
内容安全文本审核的 FilteredContent 字段是过滤后文本内容，如果被检测文本命中了自定义关键词或相似文本等算法时，则会返回当前字段，并将命中的关键词替换为星号（*）。而文本审核的 Context 字段是检测文本命中的风险关键词，如果命中...
读写外部数据文本文件（oss_fdw）
compressiontype 设置读取和写入OSS上文件的格式：none：默认的文件类型，即没有压缩的文本格式。gzip：读取文件的格式为gzip压缩格式。compressionlevel 设置写入OSS的压缩格式的压缩等级，范围1到9，默认为6。说明 filepath和dir需要在...
导入Amazon S3文件
目前日志服务只支持导入5GB以内的S3文件，压缩文件大小按照压缩后的大小计算。前提条件 已上传日志文件到S3中。已创建Project和Logstore。具体操作，请参见 创建项目Project 和 创建Logstore。自定义权限：参见如下示例，创建具备操作S3...
API详情
OpenNLU全称Open Domain Natural Language Understanding，是开箱即用的文本理解大模型，适用于中文、英文在零样本条件下进行文本理解任务，如信息抽取、文本分类等。OpenNLU将NLU任务分成两个大类：抽取和分类。抽取任务目标是从给定文本...
DashVector+ModelScope 玩转多模态检索
作为示例，我们采用 多模态牧歌数据集 作为图片语料库，用户通过输入文本来跨模态检索最相似的图片。整体流程 主要分为两个阶段：图片数据Embedding入库。将牧歌数据集通过中文CLIP模型Embedding接口转化为高维向量，然后写入DashVector...
API详情
OpenNLU全称Open Domain Natural Language Understanding，是开箱即用的文本理解大模型，适用于中文、英文在零样本条件下进行文本理解任务，如信息抽取、文本分类等。OpenNLU将NLU任务分成两个大类：抽取和分类。抽取任务目标是从给定文本...
文本摘要（生成式）
文本摘要（生成式）服务基于PALM2.0中文生成摘要模型，针对实际场景中常见的文本生成需求所设计，适用于生成文本摘要或者生成文章的标题。PALM模型具有以下特点：理解能力更强：为conditional generation特别设计了预训练任务，增强模型对...
常见问题
您同样可以将文本文件以及MaxCompute中的表作为不同类型的资源上传到MaxCompute，您可以在UDF及MapReduce的运行过程中读取、使用这些资源。MaxCompute常见错误信息如何理解，怎么定位问题？MaxCompute的常见报错信息编号有规范定义，格式为...
步骤二、应用搭建
拖入 3个文本组件 到相应位置，将 第二个文本用Data数据容器包裹 起来，将3个文本组件和1个登出文本组件外面包裹一个容器，并设置容器宽度高度为自适应。创建获取天气对象的前端逻辑流。左侧选择 逻辑编排，单击 添加逻辑流，命名为 获取...
如何开启模型训练
优势•推理加速：平台底层默认进行模型压缩和推理加速，屏蔽机器管理和推理加速的技术工作。全链路训练平台：丰富、完整的模型训练工具，支持SFT、LoRa等多种优化方式，训练之后支持一键部署。多维度评估：支持单模型、多模型对比等多维度...
错误反馈
如果待检测图片超过大小或者分辨率较高，请先进行图像压缩后再提交检测。更多信息，请参见 同步检测。为什么调用内容安全视频直播流审核接口返回错误码480（Input/output error）？报错原因：表示下载失败，错误信息 Input/output error ...
引擎类型
云原生多模数据库 Lindorm 内含宽表引擎、时序引擎、搜索引擎、文件引擎、计算引擎和流引擎，兼容HBase/Cassandra/S3、OpenTSDB、Solr、HDFS、Kafka等多种开源标准接口，同时提供SQL查询、时序处理、文本检索分析等能力。为应对动态变化的...
内容社区行业
分词：（以空格分词）query 通用版 行业增强版 为了解压缩 为 了解 压缩 为了 解 压缩 实参与形参 实 参与 形参 实参 与 形参 结构体重载 结构 体重 载 结构体重载 googlechromeframe googlechromeframe google chrome frame 拼写纠错：...
搜索增强
tips：若希望不使用向量召回（仅用文本相关性召回）设置为0%，当前版本不支持仅向量召回（不建议设置成100%）。精排DOC数量 名词解释：进入精排计算的最大文档数量。推荐值：200-500。功能描述：query在召回所有相关文本后，会基于召回的...
3D数字人视频合成接入指南
3D数字人视频合成服务为您提供 输入文本 以及 输入音频 合成为3D虚拟数字人指定格式的视频，并且通过返回的视频链接下载视频内容。功能介绍 形象配置 支持选择不同3D数字人形象，并进行装扮。具体可参考：配置数字人形象 支持通过参数指定...
多路召回实战
{"user_defined_param":{"copy_from":"content"},"field_name":"DUP_content","field_type":"STRING","compress_type":"uniq"}]} 查询语法说明 如图所示，多路召回其中有一部分文档，是只用向量检索回来的，有一部分是用文本检索回来的，而...
API概览
我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，可通过签名机制进行自签名对接。由于自签名细节非常复杂，需花费 5个工作日左右。因此建议加入...
正排索引压缩
等值压缩就是通过用更少的 Bit 位来代表这些重复值，来压缩索引的。此功能，适用于单值和多值 Attribute 的 Offset 文件。对于多值 Attribute（包括单值 String)和 Section Attribute 可以同时使用多值排重和等值压缩。自适应Offset 由于每...
正排索引压缩
等值压缩就是通过用更少的 Bit 位来代表这些重复值，来压缩索引的。此功能，适用于单值和多值 Attribute 的 Offset 文件。对于多值 Attribute（包括单值 String)和 Section Attribute 可以同时使用多值排重和等值压缩。自适应Offset 由于每...
将数据写入OSS
实现示例如下：示例：通过内置文本数据解析器将数据写入OSS-非分区路径 示例：通过内置文本数据解析器将数据写入OSS-分区路径 示例：通过内置文本数据解析器将数据以压缩方式写入OSS 示例：通过内置开源数据解析器将数据写入OSS 通过自定义...
HttpFile数据源
否 无 compress 文本压缩类型，默认不填写（即不压缩）。支持压缩类型为 gzip、bzip2 和 zip。否 不压缩 encoding 读取文件的编码配置。否 utf-8 nullFormat 文本文件中无法使用标准字符串定义null（空指针），数据同步提供nullFormat定义...
获取文本库列表
ResourceType String TEXT 文本库类型，取值：TEXT：文字文本库 IMAGE：图片文本库 VOICE：语音文本库 LibType String textKeyword 各应用场景中的文本库类型，取值：文本反垃圾场景 textKeyword：关键词文本库 similarText：相似文本库 ...
性能优化概述
性能优化指的是通过去除页面冗余内容、文件压缩、图像处理、过滤参数（提高缓存命中率）等方式来提升用户请求的响应速度和文件下载速度。性能衡量指标：请参考 CDN的性能衡量指标。您可以通过性能优化功能，对域名执行如下操作。功能 说明 ...
性能优化概述
性能优化指的是通过去除页面冗余内容、文件压缩、图像处理、过滤参数（提高缓存命中率）等方式来提升用户请求的响应速度和文件下载速度。您可以通过性能优化功能，对域名执行如下操作。功能 说明 页面优化 开启页面优化功能，全站加速会...
创建OSS外部表
CSV 以GZIP方式压缩的CSV TSV 以GZIP方式压缩的TSV 示例：通过内置文本数据解析器创建OSS外部表-非分区表 示例：通过内置文本数据解析器创建OSS外部表-分区表 示例：通过内置文本数据解析器创建OSS外部表-压缩数据 通过内置开源数据解析器...
HTTP请求和响应的压缩传输
默认按请求消息的压缩标记来判断是否压缩。builder.addAttachFile("file2","fileName2",new FileInputStream(new File("文件名2.yyy")),ContentEncoding.none);明确不压缩 HttpReturn ret=HttpCaller.invokeReturn(builder.build());} ...
数据集管理
语音转文本时，系统会自动将录音分为两个对话角色，但是出于一些客观因素系统无法准确识别哪个角色为客服，所以需要您根据文本内容来手工设置，选出哪一方为客服，则另一方即为客户。准确的进行话者角色配置非常重要，因为我们进行质检分析...
- 产品推荐
- 这些文档可能帮助您