数据传输服务DTS
数据提取：通过 JSONPath语法提取消息中的数据，将指定的消息内容路由到目标。配置规则，请参见 消息转换。数据清洗 服务及函数名称 默认创建名称为<源端服务名称>_<目标端服务名称>_Transform_<TemplateName>_的服务和函数。当 消息体...
消息队列RocketMQ版
数据提取：通过 JSONPath语法提取消息中的数据，将指定的消息内容路由到目标。配置规则，请参见 消息转换。数据清洗 服务及函数名称 默认创建名称为 RocketMQ_RocketMQ_Transform_<TemplateName>_的服务和函数。当 消息体（body）选择 数据...
路由到云消息队列 RocketMQ 版
部分事件$.data.systemProperties.KEYS 消息标签（Tags）事件总线EventBridge 通过JSONPath提取事件中的数据，将指定的事件内容路由到事件目标。部分事件$.data.systemProperties.TAGS 任务属性 设置事件流的重试策略及死信队列。更多信息...
多目标Logstore数据分发
加工规则 e_output(project=v("project"),logstore=v("logstore"),tags={"type":"dynamic_dispatch"})e_output函数动态提取 project 字段和 logstore 字段的值进行日志分发。存储目标 在 创建数据加工任务 页面中，设置默认存储目标即可，...
创建RabbitMQ Sink Connector
部分事件$.data.props.messageId 自定义属性（Properties）事件总线EventBridge 通过JSONPath提取事件中的数据，将指定的事件内容路由到事件目标。部分事件$.data.props 任务属性 配置事件推送失败时的重试策略及错误发生时的处理方式。更...
基于事件流实现RocketMQ消息路由
部分事件$.data.systemProperties.KEYS 消息标签（Tags）事件总线EventBridge 通过JSONPath提取事件中的数据，将指定的事件内容路由到事件目标。部分事件$.data.systemProperties.TAGS 任务属性 设置事件流的重试策略及死信队列。更多信息...
数据提取
事件总线EventBridge 支持事件内容转换，即在事件被路由到事件目标前，事件总线EventBridge 可以把CloudEvents标准事件转换为事件目标能接收的事件类型。本文介绍 事件总线EventBridge 提供的事件转换类型。背景信息 事件总线EventBridge ...
路由到云消息队列 Kafka 版
部分事件$.data.value 消息键值（Key）事件总线EventBridge 通过JSONPath提取事件中的数据，将指定的事件内容路由到事件目标。部分事件$.data.key 任务属性 设置事件流的重试策略及死信队列。更多信息，请参见 重试和死信。返回 事件流 ...
创建RocketMQ Sink Connector
部分事件$.data.systemProperties.KEYS 消息标签（Tags）事件总线EventBridge 通过JSONPath提取事件中的数据，将指定的事件内容路由到事件目标。部分事件$.data.systemProperties.TAGS 任务属性 配置事件推送失败时的重试策略及错误发生时...
基于事件流实现RabbitMQ消息路由
部分事件$.data.props.messageId 自定义属性（Properties）事件总线EventBridge 通过JSONPath提取事件中的数据，将指定的事件内容路由到事件目标。部分事件 任务属性 设置事件流的重试策略及死信队列。更多信息，请参见 重试和死信。返回 ...
数据脱敏
写入目标表失败 目标位置配置时写入目标表失败。从源表查询失败 源表中未查询到该数据。创建目标表失败 目标位置中可能不存在该表格。找不到主键 RDS源表缺少主键。有关主键的更多信息，请参见 RDS MySQL查看表的主键字段的方法。任务配置...
基于事件流实现Kafka消息路由
部分事件$.data.value 消息键值（Key）事件总线EventBridge 通过JSONPath提取事件中的数据，将指定的事件内容路由到事件目标。部分事件$.data.key 任务属性 设置事件流的重试策略及死信队列。更多信息，请参见 重试和死信。返回 事件流 ...
事件目标参数
事件总线EventBridge 通过JSONPath从CloudEvents中提取事件中的参数，将指定的事件内容路由到事件目标。更多信息，请参见 部分事件。value 示例值如下所示。data.name CONSTANT：常量。无需定义 template，只需定义 value。无论事件内容是...
创建MQTT Source Connector
部分事件$.data.value 消息键值（Key）事件总线EventBridge 通过JSONPath提取事件中的数据，将指定的事件内容路由到事件目标。部分事件$.data.key 任务属性 配置事件推送失败时的重试策略及错误发生时的处理方式。更多信息，请参见 重试和...
创建Kafka Sink Connector
部分事件$.data.value 消息键值（Key）事件总线EventBridge 通过JSONPath提取事件中的数据，将指定的事件内容路由到事件目标。部分事件$.data.key 任务属性 设置此任务的重试策略及死信队列。更多信息，请参见 重试和死信。返回 任务列表 ...
创建MNS Source Connector
部分事件$.data.value 消息键值（Key）事件总线EventBridge 通过JSONPath提取事件中的数据，将指定的事件内容路由到事件目标。部分事件$.data.key 任务属性 配置事件推送失败时的重试策略及错误发生时的处理方式。更多信息，请参见 重试和...
创建RabbitMQ Source Connector
部分事件$.data.value 消息键值（Key）事件总线EventBridge 通过JSONPath提取事件中的数据，将指定的事件内容路由到事件目标。部分事件$.data.key 任务属性 配置事件推送失败时的重试策略及错误发生时的处理方式。更多信息，请参见 重试和...
创建RocketMQ Source Connector
部分事件$.data.value 消息键值（Key）事件总线EventBridge 通过JSONPath提取事件中的数据，将指定的事件内容路由到事件目标。部分事件$.data.key 任务属性 配置事件推送失败时的重试策略及错误发生时的处理方式。更多信息，请参见 重试和...
创建Kafka Source Connector
部分事件$.data.value 消息键值（Key）事件总线EventBridge 通过JSONPath提取事件中的数据，将指定的事件内容路由到事件目标。部分事件$.data.key 任务属性 配置事件推送失败时的重试策略及错误发生时的处理方式。更多信息，请参见 重试和...
创建DTS Source Connector
部分事件$.data.value 消息键值（Key）事件总线EventBridge 通过JSONPath提取事件中的数据，将指定的事件内容路由到事件目标。部分事件$.data.key 任务属性 配置事件推送失败时的重试策略及错误发生时的处理方式。更多信息，请参见 重试和...
消息转换
事件总线EventBridge 支持事件内容转换，即在事件被路由到事件目标前，事件总线EventBridge 可以把CloudEvents标准事件转换为事件目标能接收的事件类型。本文介绍 事件总线EventBridge 提供的事件转换类型。背景信息 事件总线EventBridge ...
多活容灾术语表
基线 接入层路由标提取方式、路由标解析规则、路由规则以及这些规则推送目标（接入层集群和ACM）的集合。服务类型 服务类型是异地多活单元化架构下的特殊定义。Unit，单元服务。主要是指服务的调用必须按照单元规则来进行调用，服务调用...
消息转换
事件总线EventBridge 支持事件内容转换，即在事件被路由到事件目标前，事件总线EventBridge 可以把CloudEvents标准事件转换为事件目标能接收的事件类型。本文介绍 事件总线EventBridge 提供的事件转换类型。背景信息 事件总线EventBridge ...
消息转换
事件总线EventBridge 支持事件内容转换，即在事件被路由到事件目标前，事件总线EventBridge 可以把CloudEvents标准事件转换为事件目标能接收的事件类型。本文介绍 事件总线EventBridge 提供的事件转换类型。背景信息 事件总线EventBridge ...
案例：搭建以图搜图系统
第三种方法，将预训练模型在目标数据集上使用专门设计的损失函数进行迁移训练，以提取特征。例如，商品以图搜图特征提取模型通常需要在商品数据集上进行迁移学习，以便能更加准确地提取不同商品的视觉特征。您可以选择适合当前使用场景的...
使用前须知
网络日志提取费 VPC按照提取的日志收取网络日志提取费。更多信息，请参见 流日志计费说明。日志服务的服务费 当涉及的Logstore的计费模式为按使用功能计费时，日志服务采集到VPC流日志后，根据存储空间、读取流量、请求数量、数据加工、...
数据水印
当您需要在DMS导出的文件上添加水印，或提取外部文件中的水印信息时，您可参考本文档的水印嵌入和水印提取的操作步骤。前提条件 实例已开通敏感数据保护功能。详细信息，请参见 开通敏感数据保护。使用场景 用于数据的散布或分发过程中追溯...
敏感数据溯源
DataWorks的数据溯源功能，支持通过提取数据泄露文件中数据的水印信息，帮助您定位到可能会泄露目标数据的责任人。本文为您介绍如何创建溯源任务，并通过该任务查找可能会泄露数据的责任人。前提条件 已创建 数据识别规则，详情请参见 配置...
视觉智能开放平台的审计事件
说明 目前操作审计支持视觉智能开放平台的功能包括：人体人脸识别、图像识别、图像分割、目标检测、OCR识别、视觉智能辅助工具。事件名称 事件含义 AddBodyTrace 添加Trace。AddFaceImageTemplate 增加图像人脸融合模板。BatchAddFaces ...
云原生可观测服务内容说明
该服务基于客户现实情况，以及可观测治理目标，为客户提供统一可观测平台设计与落地、业务指标梳理与提取、应用及基础设施指标梳理及提取、决策支撑大盘设计与绘制、告警梳理与落地的技术服务。云原生可观测服务包含 3 个版本，客户可以...
无感数据集成（Zero-ETL）
ETL是将上层业务系统的数据经过提取（Extract）、转换清洗（Transform）、加载（Load）到数据仓库的处理过程，目的是将上游分散的数据整合到目标端数仓，通过在数仓中做进一步的计算分析，来为业务做有效的商业决策。传统的ETL流程通常会...
无感集成（Zero-ETL）
ETL是将上层业务系统的数据经过提取（Extract）、转换清洗（Transform）、加载（Load）到数据仓库的处理过程，目的是将上游分散的数据整合到目标端数仓，通过在数仓中做进一步的计算分析，来为业务做有效的商业决策。传统的ETL流程通常会...
Map映射函数和运算符
函数名称 语法 说明 支持SQL 支持SPL 下标运算符[x]获取Map中目标键的值。cardinality函数 cardinality(x)计算Map的大小。element_at函数 element_at(x,key)获取Map中目标键的值。histogram函数 histogram(x)对查询和分析结果进行分组，...
术语提取
您可以使用术语提取功能，对以后的单语/双语文档中的术语进行提取，并导入到术语库中。使用场景 当您对术语准确性的要求较高，就可以在平台中储存您的术语。如果本身已有很多文档或者翻译后的文档，可以通过术语提取的能力，对已有文档中的...
将云虚拟主机MySQL备份导入其他服务器MySQL数据库
本文以Linux操作系统云服务器（例如云服务器ECS）的MySQL数据库为目标数据库，为您介绍具体导入方法。背景信息 将云虚拟主机MySQL数据库的数据导入到其他Linux操作系统云服务器（本文以云服务器ECS为例）的MySQL数据库后，在目标数据库中...
身份证加工函数
EXTRACT_AGE 从身份证号中提取年龄。EXTRACT_BIRTH_DATE 从身份证号中提取出生日期。EXTRACT_BIRTH_DAY_OF_MONTH 从身份证号中提取出生日期的日部分。EXTRACT_BIRTH_MONTH 从身份证号中提取出生日期的月份。EXTRACT_BIRTH_YEAR 从身份证号...
备份和恢复数据
提取任务提交成功后，系统自动跳转至 我的任务 页签下，您可以看到提取状态为 提取中。重要 提取数据需要一定的时间，请您耐心等待。如果提取状态显示为 提取成功 时，表示自动备份提取任务已完成。备份提取成功后，单击 数据库备份 页签，...
数字水印（暗水印）
从视频文件中提取视频版权水印信息 在需要确认版权归属时，可以通过下述步骤，提取指定视频文件中的版权水印信息：提交视频版权水印提取作业。通过SubmitCopyrightExtract接口，提交需要提取版权水印信息的视频文件信息。接口详细说明请...
URL函数
url_extract_parameter函数 url_extract_parameter(x,parameter name)从URL的查询部分中提取指定参数的值。url_extract_path函数 url_extract_path(x)从URL中提取访问路径信息。url_extract_port函数 url_extract_port(x)从URL中提取端口...
提取字符串动态键值对
本文档介绍如何使用不同方案提取字符串键值对。常用方案比较 字符串动态键值对提取分为关键字提取、值提取、关键字加工和值加工，常用方案为采用e_kv函数、e_kv_delimit函数和e_regex函数等。不同提取场景的三种方案如下：方案 关键字提取 ...
- 产品推荐
- 这些文档可能帮助您