ModifyDatabaseConfig-修改数据库属性
修改数据库属性功能：填写目标数据库属性名称即可。数据归档 OSS 功能：填写目标在线或冷存数据库名称即可。compatibility_level DatabasePropertyValue string 是 期望修改的数据库属性值。修改数据库属性功能：填写目标数据库属性指即可...
ModifyDatabaseConfig-修改数据库属性
修改数据库属性功能：填写目标数据库属性名称即可。数据归档 OSS 功能：填写目标在线或冷存数据库名称即可。compatibility_level DatabasePropertyValue string 是 期望修改的数据库属性值。修改数据库属性功能：填写目标数据库属性指即可...
查看审计日志
在日志服务控制台查看审计日志 日志服务存储了数据库审计系统审计到的数据库操作日志，在数据库审计系统查看到的审计日志来源是日志服务。您可以在日志服务控制台查看和下载数据库审计服务创建的Project和Logstore中记录的审计日志数据。...
配置StarRocks输出组件
stream load同步数据延迟说明 当使用stream load方式向StarRocks数据库导入数据时，返回的状态有以下几种情况，可能出现publish timeout情况，此情况下任务也是成功的，但是会存在查询延迟情况。请关注运行日志中的状态：Success：表示导入...
配置StarRocks输出组件
stream load同步数据延迟说明 当使用stream load方式向StarRocks数据库导入数据时，返回的状态有以下几种情况，可能出现publish timeout情况，此情况下任务也是成功的，但是会存在查询延迟情况。请关注运行日志中的状态：Success：表示导入...
数据源表授权
查看详情：单击数据源名称，右侧显示数据库中的数据表列表，可单击 图标查看表的字段信息。编辑：单击 图标，可编辑数据源参数，编辑操作与添加时相同，请参见 数据源（即分析数据源）。移除：单击 图标，确认后将数据源移除。说明 若有...
行级权限设置
由管理员、被授权数据集（除行为数据集外）的管理权限的用户进行数据集的行级权限设置，其他非管理员用户也可以对自己创建的数据集进行行级权限设置。被授权用户可在 数据集 页面的 已授权 页签中看到被授权的数据集，可在分析、筛选等操作...
质量规则模板类型
数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是空值进行校验。字段空字符串校验 用于对单个字段是否是空字符串进行校验。唯一性 字段唯一性校验 用于对单字段唯一值/非唯一值进行校验。字段分组个数校验 ...
质量规则模板类型
数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是空值进行校验。字段空字符串校验 用于对单个字段是否是空字符串进行校验。唯一性 字段唯一性校验 用于对单字段唯一值/非唯一值进行校验。字段分组个数校验 ...
创建多元索引
在数据表上创建一个多元索引后，您可以根据多元索引中建立索引的字段来查询数据表中的数据。一张数据表可以创建多个多元索引。最佳使用方式 请根据实际查询需求确定在一张数据表中创建多元索引的个数。例如有一张数据表有5个字段，分别为id...
SQL其他常见问题
定时（例如每天）对ODS层的增量数据做数据清洗，复杂字段拆分为多个简单字段，然后存储在CDM层的表中，便于统计和分析数据。在执行MaxCompute SQL过程中，报错partitions exceeds the specified limit，如何解决？问题现象 在执行...
使用配置巡检功能检查注册集群Workload安全隐患
修改Pod Spec，修改 image 字段，使用指定的镜像Tag，并且不要使用latest作为镜像Tag。示例：anonymousUserRBACBinding 通过检查集群内的RBAC（Role-based access control）绑定找出配置了匿名用户访问权限的配置项。如果配置了允许匿名...
使用配置巡检检查集群工作负载
修改Pod Spec，修改 image 字段，使用指定的镜像Tag，并且不要使用latest作为镜像Tag。示例：anonymousUserRBACBinding 通过检查集群内的RBAC（Role-based access control）绑定找出配置了匿名用户访问权限的配置项。如果配置了允许匿名...
配置离线数据集成节点
功能特性 不限制来源表和目标表数据库类型。支持字段映射，包含修改源表和目标表字段的命名和类型映射。可配置并发迁移数据。支持通过WHERE语句，对迁移数据进行预过滤。支持前置及后置SQL语句，在导入数据前后实现数据处理。使用限制 系统...
字段加工
用途 字段加工算子可以将节点的数据进行逻辑加工，然后作为输出字段在之后的节点使用。适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 是 使用说明 加工逻辑 对于需要加工的字段，需要输入字段...
日志字段详情
日志字段解析 一条消息操作日志中包含多个字段，各个字段的含义如下：字段 含义 Time 本次操作的发生时间。MessageId 消息的MessageId，标识本次操作处理的消息。QueueName 本次操作对应的队列名称。AccountId 本次操作对应队列的账号。...
元数据
背景信息 元数据（字典）是属于数据库本身的一些数据，包含数据库名、数据库字符集、表名、表的大小、表的记录行数、表的字符集、表的字段、表的索引、表的描述、字段的类型、字段的精度、字段的描述等。所有信息均来源于 information_...
敏感数据保护概览
RDS MariaDB、其他来源MariaDB PolarDB PostgreSQL版（兼容Oracle）PolarDB分布式版 OceanBase Oracle DB2 达梦数据库 Lindorm：Lindorm_CQL、Lindorm_SQL OpenGauss 数据仓库：AnalyticDB MySQL版 AnalyticDB PostgreSQL版 DLA（Data Lake...
交叉表
交叉表可以显示表中某个字段的汇总值，并对同类数据合并。其中一组列在表的左侧，另一组列在表的上部。行和列的交叉处可以对数据进行多种汇总计算，例如求和、平均值、记数、最大值和最小值。本文为您介绍如何为交叉表添加数据并配置样式。...
配置GoldenDB输出组件
如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入字段 移入到 未选的输入字段。映射关系 根据上游的输入和目标表的字段，可以手动选择字段映射。快速映射 包括 同行映射 和 同名...
统计分组
适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 是 Spark 是 使用说明 分组字段 分组字段 是指需要分组的字段，用户可以选择一个或多个字段作为分组条件；可选配置，可不配置。一旦选择为 分组...
配置GoldenDB输出组件
如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入字段 移入到 未选的输入字段。映射关系 根据上游的输入和目标表的字段，可以手动选择字段映射。快速映射 包括 同行映射 和 同名...
函数总览
本文列举数据加工任务所涉及的所有函数。全局操作函数 函数分类 函数名称 说明 流程控制函数 e_if 条件与操作组合。满足条件则进行对应操作，不满足条件则不进行对应操作，直接进行下一个条件判断。对于某一条日志，如果其中某一操作删除了...
主副指标卡
该组件用于展示有所属关系的原始指标或衍生指标数据。下文介绍组件的详细配置方法。前提条件 已完成组件待分析数据集的工作簿创建。具体操作，请参见 创建工作簿。步骤一：配置字段 在数据分析报表工作台，从 图表 栏，拖拽 主副指 标卡 ...
模糊查询+查询分析
但是我们可以通过创建多个不同数据类型的字段并配置多个不同分析器的索引来解决这个问题，下文将详细介绍该方法的配置演示流程。注意：查询分析-停用词功能不适用于该场景 配置步骤 在实例管理页找到需要配置的应用并点击 详情，然后点击 ...
柱状层
无需修改数据源中的字段，就可以实现数据的实时匹配。也可以单击 图标对字段分别样式配置。过滤器 打开 过滤器，选择已创建的数据过滤器或新建数据过滤器，并配置数据过滤器脚本，实现数据的筛选功能。详情请参见 管理数据过滤器。数据响应...
两表交集
交集条件 可以分别指定两个来源节点的1个或者多个字段作为 交集条件 的字段，并设置这些字段的映射关系。两个来源节点的原始数据中满足这些映射关系的数据即为二者的交集，如下示意图所示。示例如下所示，假设两个输入节点分别为A和B，设置...
数据集成侧同步任务能力说明
说明 支持的变量解释：DATASOURCE_NAME_SRC：源端数据源名称 DB_NAME_SRC：源端数据库名称 TABLE_NAME_SRC：源表名称 DATASOURCE_NAME_DEST：目标端数据源名称 DB_NAME_DEST：目标端数据库名称 TABLE_NAME_DEST：目标表名称 DB_NAME_SRC_...
日志字段详情
db_name 数据库名称 db_type 数据库类型，包括MySQL、PostgrepSQL。db_version 数据库版本 instance_id 集群ID lock_time 锁等待的耗时，单位：秒。owner_id 阿里云账号ID query_sql 慢日志SQL语句 query_time 查询耗时，单位：秒。region ...
新建字段标准通用信息
新建字段标准时需要为字段标准设置属性，如果默认属性不满足需要，可以为字段标准添加自定义属性。本文介绍如何新建字段标准通用信息。背景信息 可根据需要同时新建多个字段标准通用信息供新建字段标准时使用。新建的字段标准通用信息适用...
新建字段标准通用信息
新建字段标准时需要为字段标准设置属性，如果默认属性不满足需要，可以为字段标准添加自定义属性。本文介绍如何新建字段标准通用信息。背景信息 可根据需要同时新建多个字段标准通用信息供新建字段标准时使用。新建的字段标准通用信息适用...
配置GBase 8a输出组件
如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入字段 移入到 未选的输入字段。映射关系 根据上游的输入和目标表的字段，可以手动选择字段映射。快速映射 包括 同行映射 和 同名...
配置GBase 8a输出组件
如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入字段 移入到 未选的输入字段。映射关系 根据上游的输入和目标表的字段，可以手动选择字段映射。快速映射 包括 同行映射 和 同名...
配置KingbaseES输出组件
如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入字段 移入到 未选的输入字段。映射关系 根据上游的输入和目标表的字段，可以手动选择字段映射。快速映射 包括 同行映射 和 同名...
配置KingbaseES输出组件
如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入字段 移入到 未选的输入字段。映射关系 根据上游的输入和目标表的字段，可以手动选择字段映射。快速映射 包括 同行映射 和 同名...
配置Impala输出组件
如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入字段 移入到 未选的输入字段。映射关系 根据上游的输入和目标表的字段，可以手动选择字段映射。快速映射 包括 同行映射 和 同名...
字段分析
SLS（Simple Log Service）具备字段分析功能，专注于对text、long和double类型字段的统计分析。此功能涵盖了字段的基本分布情况、各种统计指标以及TOP5的时间序列图，为用户提供了深入的数据洞察和可视化工具，便于理解和挖掘。前提条件 已...
配置Impala输出组件
如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入字段 移入到 未选的输入字段。映射关系 根据上游的输入和目标表的字段，可以手动选择字段映射。快速映射 包括 同行映射 和 同名...
字段操作函数
本文介绍字段操作函数的语法规则，包括参数解释、函数示例等。函数列表 函数 说明 v 获得日志特定字段的值。当同时传入多个字段名时，返回日志中第一个存在的字段的值。支持和其他函数组合使用。相关示例，请参见 调用函数清洗数据。e_set ...
两表并集
合并条件 可以分别指定两个来源节点的1个或者多个字段作为 合并条件 的字段。合并的结果中将包含这两个来源节点中的指定合并字段的所有记录，示意图如下所示。示例如下所示，假设两个输入节点分别为A和B，设置两个合并条件为"A.ID<=>B.ID...
- 产品推荐
- 这些文档可能帮助您