索引结构 索引结构分为:索引字段和属性字段。其中索引字段为文本类型字段分词,提供检索服务,而属性字段则提供统计、排序、过滤、聚合等功能。支持创建为索引字段的类型 INT,INT_ARRAY,TEXT,SHORT_TEXT,LITERAL,LITERAL_ARRAY,...
索引结构 索引结构分为:索引字段和属性字段。其中索引字段为文本类型字段分词,提供检索服务,而属性字段则提供统计、排序、过滤、聚合等功能。支持创建为索引字段的类型 INT,INT_ARRAY,TEXT,SHORT_TEXT,LITERAL,LITERAL_ARRAY,...
本文介绍了数据表中和多元索引中字段数据类型的映射关系以及不同字段数据类型支持的附加属性信息。多元索引的字段值来源于数据表中同名字段的值,两者的数据类型必须相匹配,多元索引字段数据类型与数据表中字段数据类型的匹配关系请参见下...
设置字段,至少需要定义2个字段 主键字段 和 向量字段(向量字段需要设置为多值float类型):如果需要带有类目的向量,可以在主键和向量字段中间加一个类目字段,类型要求单值或多值的整数类型:属性和字段内容压缩:属性字段可以选择是否...
属性和字段内容压缩:属性字段可以选择是否压缩,默认为不压缩,选择file_compressor表示开启压缩 字段内容可以选择是否压缩,默认为不压缩,默认多值和STRING类型选择uniq,单值数值类型是equal 说明 使用向量检索,在定义字段时有位置...
可能原因1:执行时间过长 前置语句或后置语句(例如:preSql和postSql)在数据库执行耗时过长,导致任务运行慢。未合理配置切分键,导致任务运行慢。离线同步会根据切分键(splitPk)来对进行数据分片,数据同步根据此配置启动并发任务进行...
如果需要带有类目的向量,可以在主键和向量字段中间加一个类目字段,类型要求单值或多值的整数类型:属性和字段内容压缩:属性字段可以选择是否压缩,默认为不压缩,选择file_compressor表示开启压缩 字段内容可以选择是否压缩,默认为不...
已有CSV文件,如果需要追加或替换Excel文件中的某个Sheet下的数据时,只要保持新数据文件的字段名和字段数据类型与历史上传数据文件的字段名和字段数据类型一致即可。在完成第一次的业务数据文件上传后,新追加或替换的文件字段顺序及数据...
返回结果:+-+|CAST(_id AS string)|+-+|641002ad883a73eb0d7291a7|+-+说明 如果要将ObjectId字段导入到 AnalyticDB MySQL 中,需要先创建用于存储ObjectId字段的数据库和数据表,具体操作,请参见 导入MongoDB非嵌套文档 中的步骤5~7。...
主表(数据输入1)中的字段和数据将全部展示,次表(数据输入2)中相同的字段对应的数据将在行上进行扩展,不同的字段与数据不会展示。字段列表:展示主表数据输入1的字段。清洗加工 去掉数据表中不需要的列和行,并新增需要的列和行。从...
说明 开通免费试用后,系统会根据您提供的用户名和密码抽取目标数据库中的元数据和少量随机数据用于敏感数据分析,这些数据不会被存储和修改。您可以在页面中查看到数据库相关信息和数据库中敏感数据的扫描结果。如需对扫描出来的敏感数据...
在配置数据源界面点击 编辑,配置好brand(映射数据源的brand字段)和brand_text(也是映射数据源的brand字段)以及所有新添加的应用结构字段和数据源的字段的映射关系,然后点击 完成 即可。5.等待线下版本完成创建,当状态变成正常时,就...
取值约束 根据已选 属性字段类型 和 填写方式,可配置如下不同的取值约束:下拉单选/多选框:若属性字段取值为枚举类型,需要在此处通过取值约束配置可枚举范围,枚举项将生成对应的下拉选项值,创建数据标准时可以从下拉列表中选取此处...
取值约束 根据已选 属性字段类型 和 填写方式,可配置如下不同的取值约束:下拉单选/多选框:若属性字段取值为枚举类型,需要在此处通过取值约束配置可枚举范围,枚举项将生成对应的下拉选项值,创建数据标准时可以从下拉列表中选取此处...
添加字段:支持添加 数据字段 和 分区字段,您可根据业务情况编辑字段的 名称、说明、数据类型、字段类别、关联维度、字段标准、字段约束、数据分类、数据分级 及 备注 信息。说明 MaxCompute引擎下支持创建不超过6级分区字段。③ 字段列表...
添加字段:支持添加 数据字段 和 分区字段,您可根据业务情况编辑字段的 名称、说明、数据类型、字段类别、关联维度、字段标准、字段约束、数据分类、数据分级 及 备注 信息。说明 MaxCompute引擎下支持创建不超过6级分区字段。ArgoDB、...
本文介绍了如何为实时计算创建日志服务源表以及创建过程涉及到的属性字段提取和类型映射。创建日志服务源表 日志服务是实时数据存储,实时计算能将其作为流式数据输入。假设有如下日志内容:_source_:11.85.123.199_tag_:_receive_time_:...
相关操作 在模板管理页面,可对模板进行以下操作:操作 说明 查看模板详情 在模板列表,单击目标模板 操作 列的 查看,查看模板的基础信息和数据字段。编辑模板 在模板列表,单击目标模板 操作 列的 编辑,对模板的信息进行编辑。删除模板 ...
取值约束 根据已选 属性字段类型 和 填写方式,可配置如下不同的取值约束:下拉单选/多选框:若属性字段取值为枚举类型,需要在此处通过取值约束配置可枚举范围,枚举项将生成对应的下拉选项值,创建数据标准时可以从下拉列表中选取此处...
取值约束 根据已选 属性字段类型 和 填写方式,可配置如下不同的取值约束:下拉单选/多选框:若属性字段取值为枚举类型,需要在此处通过取值约束配置可枚举范围,枚举项将生成对应的下拉选项值,创建数据标准时可以从下拉列表中选取此处...
相关操作 在模板管理页面,可对模板进行以下操作:操作 说明 查看模板详情 在模板列表,单击目标模板 操作 列的 查看,查看模板的基础信息和数据字段。编辑模板 在模板列表,单击目标模板 操作 列的 编辑,对模板的信息进行编辑。删除模板 ...
优势 详情 提升数据确认效率 通过溯源数据,可以全面了解数据的各个方面,包括作业涉及的产品、数据库和表情况,表字段的属性和关联关系,数据的来源、经过的处理步骤、传输路径以及最终的消费者。这样可以帮助您更好地理解数据的流向和...
字段映射 设置 维表字段 和 数据列 的映射关系。导入数据方式 包括 追加 和 覆盖。本地CSV文件 参数 描述 文件 单击 选择文件,选中需要导入的本地CSV文件,单击 打开。原始字符集 包括 UTF-8 和 GBK。如果出现乱码,您可以切换字符集。...
描述 暂不支持获取summary。非TEXT、SHORT_TEXT类型的字段,用户可以设置为属性字段,直接从表中获取原值,TEXT、SHORT_TEXT类型的字段,用户可以额外添加一个LITERAL类型的字段,原字段作为建索引,新字段设置为属性字段,用来获取原值。
是否支持修改分布字段和分区字段?如何查看表的所有二级分区及分区的统计信息?分片数跟什么因素有关系,是否可以自己调整?如何删除索引?如何解决删除数据库时提示“schema is not empty.”?如何合理建表?在 AnalyticDB MySQL 中建表时...
背景信息 RDBMS数据库即关系型数据库,包括MySQL、Oracle、SQL Server、PostgreSQL、Vertica、DRDS、DB2、OceanBase、PolarDB、SAP HANA和TeraData。本教程以MySQL为例,带您体验自定义RDBMS数据库,并进行数据同步。操作流程 自定义并应用...
背景信息 RDBMS数据库即关系型数据库,包括MySQL、Oracle、SQL Server、PostgreSQL、Vertica、DRDS、DB2、OceanBase、PolarDB、SAP HANA和TeraData。本教程以MySQL为例,带您体验自定义RDBMS数据库,并进行数据同步。操作流程 自定义并应用...
映射关系 映射关系用于将源表的输入字段和目标表的输出字段映射起来。映射关系包括同名映射和同行映射。适用场景说明如下:同名映射:对字段名称相同的字段进行映射。如下图所示,选择同名映射后,输入 id 字段对应的数据映射到输出字段的 ...
组件级数据替换 使用场景 您从其他仪表板复制组件、卡片引用时,所有字段和字段相关的配置都需要重新配置,成本很高。组件级数据集替换针对于报表中的组件需要更换数据集的场景,提高您组件配置的效率,降低数据集切换的成本。操作步骤 ...
使用限制 不支持写入Hologres数据库的视图。操作步骤 请参见 离线管道组件开发入口,进入离线单条管道脚本的开发页面。在离线单条管道脚本的开发页面,按照下图操作指引,进入 Hologres输出配置 对话框。在 Hologres输出配置 对话框,配置...
例如A表中包含字段1、字段2和字段3,B表中包含字段3、字段4和字段5,对A表和B表通过做JOIN操作后,需要输出字段1、字段2、字段3、字段4和字段5,则需要在目标库侧创建做JOIN操作后的C表,C表中包含字段1、字段2、字段3、字段4和字段5。...
如果想要修改时序数据库的指定属性,或为其添加新的数据库属性,您可以使用 ALTER DATABASE 语句。引擎与版本 ALTER DATABASE语法 仅适用于时序引擎。无版本限制。语法 alter_database_statement:=ALTER DATABASE database_identifier[WITH...
DataWorks的数据血缘功能支持可视化展示敏感数据的血缘关系,自动分析字段之间的异常关联关系、敏感数据识别结果异常的字段,帮助您梳理敏感数据的扩散情况及影响面,提高数据识别效率。本文为您介绍如何查看血缘关系图。背景信息 数据血缘...
目标数据集中存在图片字段时,Quick BI支持在数据集中切换图片类型字段,并在制作仪表板时,将图片字段展示在报表中。前提条件 您已连接数据源,请参见 连接阿里云MySQL数据源。您已创建数据集,且目标数据集中存在图片字段,请参见 创建并...
使用限制 不支持写入Hologres数据库的视图。操作步骤 请参见 配置离线单条管道,进入离线单条管道脚本的开发页面。在离线单条管道脚本的开发页面,按照下图操作指引,进入 Hologres输出配置 对话框。在 Hologres输出配置 对话框,配置参数...
可以对字段名称和字段代码进行重新命名。去重合并 多表合并算子默认不做去重合并,输出的数据包含来源节点的所有记录。勾选去重合并后,节点的输出数据将会过滤重复的记录。去重合并的效果示例参考 对齐字段 中的示意图。
背景信息 DataWorks支持您按照数据的敏感级别和所属分类定义数据识别规则,帮助您识别组织内的敏感数据,对于识别结果不准确的数据,您可以 手动修正数据,并在 敏感数据概况 模块为您展示最近的通过数据识别规则命中的、按照项目细分的...
MySQL输入基于Binlog实时订阅的方式,实时读取您配置的MySQL数据库表数据。本文为您介绍,如何配置MySQL输入,以及配置输入之前需要准备的网络环境及账号权限。前提条件 配置MySQL输入之前,请确保已完成以下规划与准备工作。已配置同步...
是否关联文件数据 当接入数据源同时存在文件类型及数据库类型数据时,且“文件路径字段”和“文件类型字段”都是数据库中的字段,需要开启“关联文件数据”功能,可以参考最佳实践说明。开启后,系统会自动校验,若源数据表中字段和系统...
映射关系 映射关系用于将源表的输入字段和目标表的输出字段映射起来。映射关系包括同名映射和同行映射。适用场景说明如下:同名映射:对字段名称相同的字段进行映射。如下图所示,选择同名映射后,输入 id 字段对应的数据映射到输出字段的 ...