管理敏感数据
涉敏字段-数据类型分布：可查看数据库中敏感字段的数据类型分布。数据类型即根据数据语义对数据进行的分类。默认包含如下分类：一级分类：个人信息、企业信息、位置信息等。二级分类：手机号、邮箱、银行卡等。说明 用户可自定义新的数据...
数据表管理
更新从数据库导入的数据表 字段同步 当数据库中新增或删除有关列的字段后，通过 同步字段 功能，系统会自动检测数据库中的字段变更内容，并可根据实际业务需求选择是否对有关元数据做字段变更同步。具体操作如下：选择 知识中心>数据问答>...
MaxCompute数据源
类型分类 数据集成配置类型 数据库数据类型 整数类 LONG BIGINT、INT、TINYINT和SMALLINT 布尔类 BOOLEAN BOOLEAN 日期时间类 DATE DATETIME、TIMESTAMP和DATE 浮点类 DOUBLE FLOAT、DOUBLE和DECIMAL 二进制类 BYTES BINARY 复杂类 STRING ...
图层交互管理
添加字段 单击图层数据下的 添加字段，在当前数据表中选择需要添加的字段，单击 确定。删除字段 在图层数据下，选择需要删除的字段，单击 图标，删除当前字段。显示坐标 单击 显示图标 右侧的 图标，控制当前数据的经纬度坐标在标签上的...
横向虚拟关联
建模的数据输入分别位于己方和对方的数据库中，对字段进行匹配对齐。组件截图 二、参数说明 参数名称 参数说明 选择保留字段 选择参与方1和参与方2的匹配字段，用于后续横向建模。默认按字段名称（忽略大小写）自动匹配。字段别名默认使用...
教育行业算法版
（2）应用结构，这里以 手动创建 的方式介绍，配置后，单击“下一步”：注意：字段标签是用于快速生成行业增强索引结构、查询分析规则和排序策略的，请务必在应用结构中给对应字段添加字段标签，操作见如上截图。（3）索引结构：注意：索引...
游戏行业算法版
（2）应用结构，这里以 通过数据源创建 的方式介绍，配置后，单击“下一步”：注意：字段标签是用于快速生成行业增强索引结构、查询分析规则和排序策略的，请务必在应用结构中给对应字段添加字段标签，操作见如上截图。（3）索引结构：注意...
数据接口配置说明
单击选中画布中的区块，在右侧配置面板中选择 数据 页签，即可查看该区块的数据接口中的所有配置信息，您可以参见 配置组件数据 和 设置组件数据源，修改区块的数据内容。实时预览数据接口配置 在 数据接口设置 页签中，对话框左侧是用于...
0002-00000503
问题描述 请求头缺少用于签名认证的合法日期字段。问题原因 请求头中缺少合法的 x-oss-date 字段或者 Date 字段。问题示例 您发起了基于请求头Authorization签名的请求，但是没有通过 Date 字段或者 x-oss-date 字段提供日期参数。GET/oss....
DocumentClient类
类安全性描述 DocumentClient 类非线程安全 构造函数 有参构造函数，创建对象时指定参数 DocumentClient(OpenSearchClient client)参数描述 参数名称 类型 描述 client OpenSearchClient OpenSearchClient类对象 添加字段信息 接口定义 ...
多表合并
数据合并的结果中将包含全部来源节点中的指定对齐字段的所有记录。示例如下所示，假设三个输入节点分别为A、B、C，设置两个对齐条件为"A.ID<=>B.ID<=>C.ID"、"A.NAME<=>B.NAME<=>C.NAME"，则多表合并默认运算结果、去重合并后的运算结果...
Quick BI中添加计算字段求两个度量字段的差值，结果...
问题描述 Quick BI中添加计算字段求两个度量字段的差值，结果展示为空。问题原因 由于求差值的两个字段中其中有一个字段为NULL值，数字和NULL做加减乘除的时候，程序不认识NULL，所以就不知道这个运算结果是什么，所以最后只能返回NULL。...
Canal
canal-json.database.include 选填(none)String 一个可选的正则表达式，通过正则匹配Canal记录中的database元字段，仅读取指定数据库的changelog记录。正则字符串与Java的 Pattern 兼容。canal-json.table.include 选填(none)String 一个可...
过滤条件不下推
filter_not_pushdown_columns=[test01.table01:id|product]*/示例2：以3.1.4及以上的内核版本为例，当前查询，包含数据库 test01 的表 table01 中字段 id、product，数据库 test02 的表 table03 中字段 key 的过滤条件不会下推。...
追加字段
您可以使用processor_appender插件为指定的字段（可以为不存在的字段）追加特定的值，支持在字段值中添加模板变量。该插件通常与input_prometheus、input_system_v2等时序监控相关的插件结合使用，用于给拉取到的Prometheus数据追加特定的...
常见问题
添加好新的字段后，还需要在「用例模板」中，将这个字段添加到用例的模板中，在这里可以设置字段是否必填。现在您创建新的用例时，就可以设置这个新的字段了，并且在用例设计和测试计划中，也可以按这个字段进行过滤。导入测试用例出错了...
限制账号只能访问指定表、视图、字段
授权查询数据库中的视图 grant select on<数据库名>.<视图名>to<用户名>;示例 授权用户test01查询数据库rds001的视图view_test1。grant select on rds001.view_test1 to test01;授权更新或查询表中的字段 grant update(<字段名>)on table...
新建数据模型
内存实体 不存储在数据库中，仅临时存储在应用程序内存中的实体。系统默认实体 系统默认实体里面既含有实体，也有内存实体。系统默认实体实际上是引用模块的实体，系统数据模块是应用的默认引用模块。操作步骤 登录 魔笔。在顶部菜单栏选择...
DMS分类分级扫描原理介绍
DMS分类分级扫描能够对数据库中的敏感数据进行检测，并自动为符合识别规则的字段打上相应的分类分级标签，还可以保护高敏感等级的字段，并将敏感字段直观地展示在识别结果中。本文介绍DMS敏感数据保护分类分级扫描功能的原理。原理介绍 DMS...
查看原始日志
您可在 原始日志 页面进行以下操作：单击 原始日志 列表右侧的 列设置 可将您需要的字段添加到原始日志列表中。字段添加到 列设置 后，原始日志列表将以列的形式呈现该字段信息。单击 列设置 右侧的 打开 下载日志 对话框。在下载日志...
添加字段
表单配置方式 参数说明 配置 处理器类型 为 添加字段，相关参数说明如下表所示。参数 说明 添加字段 待添加的字段名和字段值，支持添加多个。忽略重复字段 存在相同的字段名时，是否忽略重复的字段。配置示例 添加 aaa2 字段和aaa3字段，...
从RDS MySQL数据库获取数据进行数据富化
map(res_rds_mysql(address="rds-host",username="mysql-username",password="xxx",database="xxx",table="xx",refresh_interval=60),"content","name")多行匹配 遍历RDS MySQL数据库表中的所有数据行，将匹配到的数据全部添加到指定字段中...
API
PropsWithPageContext 这个类型是为了方便组件在 Props 中添加 PageContext 字段而定义的。不是强制使用的。定义如下：type PropsWithPageContext<P = {}>=P&{ pageContext?PageContext;};下面代码中定义PropsA和PropsB的方式效果一样：...
创建MaxCompute投递任务（新版）
如果您要投递该字段，只能在 MaxCompute分区列 中添加该字段。参考信息_partition_time_字段 将日志时间作为分区字段，通过时间筛选数据是MaxCompute常见的过滤数据的方法。格式_partition_time_是根据日志服务中_time_字段的值计算得到的...
数据标准概述
DataWorks数据建模支持在建模前规划制定数据标准，或在建模使用过程中根据业务情况沉淀企业业务的数据标准。通过规范约束标准代码、度量单位、字段标准、命名词典，来保障后续建模与应用过程中数据处理的一致性，从源头上保障数据的标准化...
图文解释
Manifest 格式中 data 字段的下一级字段均对应一个数据集字段，字段名 可自定义，在配置数据集字段名时选择对应的字段名即可。图片文件支持常见的JPG、PNG等格式。sam_embedding_url 用于SAM分割的embedding数据，目前使用前需要用户自行预...
DataSource
plugins Object 字段数据处理插件 plugins.*Object 插件详情，具体说明查看下文 Plugin*：字段名 keyField String 主键 parameters Object 数据源信息不同数据源的配置信息各不相同，具体说明查看相关下文：rds-odps-opensearch-polardb ...
DataSource
plugins Object 字段数据处理插件 plugins.*Object 插件详情，具体说明查看下文 Plugin*：字段名 keyField String 主键 parameters Object 数据源信息不同数据源的配置信息各不相同，具体说明查看相关下文：rds-odps-opensearch-polardb ...
新功能发布记录
用户指南 Topic操作 2020年11月 新功能/特性 简要概述 类别 文档 Topic新增字段修改 通过页面新增Topic Schema字段 用户指南 Topic操作 同步任务修改字段 同步详情页面可以修改同步字段 数据同步 Topic操作 2020年12月 新功能/特性 简要...
映射富化函数
maki pop:200 cid:3 province:sh 示例3：将日志中的 city1、pop1 字段与数据表中的主键（city、pop）进行映射，返回目标行中所有列的值。原始日志 city1:sh name:maki pop1:200 加工规则 e_tablestore_map([("city1","city"),("pop1","pop...
资源函数
max_retry_back_off=60,primary_keys=None,use_ssl=false,update_time_key=None,deleted_flag_key=None)说明 日志服务还支持通过res_rds_mysql函数从AnalyticDB MySQL数据库、PolarDB MySQL数据库拉取数据，您只需将加工规则中的数据库地址...
从游标提取行
这样，即使更改了数据库列的数据类型，也不必更改 SPL 程序中的目标变量声明。TYPE 将自动选取指定列的新数据类型。CREATE OR REPLACE PROCEDURE cursor_example IS v_empno emp.empno%TYPE;v_ename emp.ename%TYPE;CURSOR emp_cur_3 IS ...
配置Teradata输入组件
使用限制 不支持读取Teradata数据库的视图。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建Teradata数据源。具体操作，请参见 创建Tablestore数据源。进行Teradata输入组件属性配置的账号，需具备该数据源的同步读权限。如果...
数组和嵌套类型
对于多元索引中数组类型的字段，在数据表中必须为String类型，且对应的多元索引中的类型必须为相应的类型，例如Long、Double等。如果字段price是Double Array数组类型，则在数据表中price必须为String类型，在对应的多元索引中的类型必须为...
配置Teradata输入组件
使用限制 不支持读取Teradata数据库的视图。操作步骤 请参见 配置离线单条管道，进入离线单条管道脚本的开发页面。按照下图指引，进入 Teradata输入配置 对话框。序号 说明 ① 单击 组件库。② 单击 输入。③ 拖动 Teradata 组件至左侧的...
任务类型配置
三、在项目中添加和使用任务类型 在企业后台创建好类型后，点击项目右上角的「菜单」，在「项目菜单」-「项目设置」-「任务类型配置」界面就可以选择已有的任务类型，同时在此界面也可以新建任务类型，然后在任务中就可以使用已添加的任务...
动作接口配置说明
说明 当您删除完列表内所有字段后，您可以单击字段列表内的 添加字段，快速添加一行字段内容。可视化应用中查看并使用动作接口 在区块编辑器中配置完动作接口后，您可以在可视化应用中使用区块时，在蓝图编辑器内查看到区块的所有动作接口...
配置IBM DB2输入组件
同步IBM DB2数据源的数据至其他数据源的场景中，您需要先配置IBM DB2输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置IBM DB2输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建IBM DB2...
配置IBM DB2输入组件
同步IBM DB2数据源的数据至其他数据源的场景中，您需要先配置IBM DB2输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置IBM DB2输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建IBM DB2...
行业算法版表结构
应用结构 数据推送到行业算法版后会先保存到离线数据表中，在此阶段，为了方便用户推送数据，数据表允许用户根据实际业务场景定义多个表（需要指定关联字段），并提供了数据处理的插件。数据处理完毕后会join成一张索引表，这种索引表主要...
- 产品推荐
- 这些文档可能帮助您