结构设计

字段类型配置:配置 新增字段 中允许使用的数据类型。索引类型配置:配置 新增索引 中允许使用的数据类型。建表模板:配置建表模板,新建表将默认加载配置好的模板。(建表模板不是强制性规范,用户建表时可根据实际情况进行修改。禁止修改...

Amazon S3数据

支持的字段类型 类型分类 数据集成column配置类型 S3数据类型 整数类 LONG LONG 浮点类 DOUBLE DOUBLE 字符串类 STRING STRING 日期时间类 DATE DATE 布尔型 BOOL BOOL 数据同步任务开发 Amazon S3数据同步任务的配置入口和通用配置流程...

散点层

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据类型数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 配置资产数据数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...

概述

大多数系统目录都是在数据库创建过程中从模版数据库中复制过来的,因此都是数据库相关的。少数目录物理上是在一个集簇的所有数据库间共享。系统目录见下表:目录名称 用途 pg_aggregate 聚集函数。pg_am 关系访问方法。pg_amop 访问方法...

HDFS数据

支持的字段类型 离线读 由于文件表的元数据信息由Hive维护,并存放在Hive自己维护的元数据库(如MySQL)中。目前HDFS Reader不支持对Hive元数据的数据库进行访问查询,因此您在进行类型转换时,必须指定数据类型。RCFile、ParquetFile、...

散点层(线性渐变)

数据映射 当您需要自定义图表字段配置时,可以在 数据映射 模块设置不同的字段映射内容,将这些字段映射到组件对应的字段上。无需修改数据源中的字段,就可以实现数据的实时匹配。也可以单击 图标对字段分别样式配置。过滤器 打开 过滤器,...

保留字段

请手动添加并设置该字段的索引,索引数据类型为text,并根据需求选择是否开启统计。解析失败的原始日志。关闭丢弃解析失败日志功能后,Logtail在解析日志失败时上传原始日志。其中Key为_raw_log_、Value为日志内容。该字段可用于日志投递、...

创建多元索引

可以选择部分主键列作为路由字段,在进行索引数据写入时,会根据路由字段的值计算索引数据的分布位置,路由字段的值相同的记录会被索引到相同的数据分区中。index_sort 索引预排序设置,包含sorters设置。如果不设置,则默认按照主键排序。...

新增离线数据同步任务

适用的字段类型包括字符串类型字段,类如:Oracle字符串类型varchar,varchar2,char。MySQL字符串类型varchar,char。取数规则:只针对日期数据做取数规则,其中yyyy表示4位的年份、yy表示2位的年份、mm(MM)表示月、dd表示天、hh24表示小时...

新增离线数据同步任务

适用的字段类型包括字符串类型字段,类如:Oracle字符串类型varchar,varchar2,char。MySQL字符串类型varchar,char。取数规则:只针对日期数据做取数规则,其中yyyy表示4位的年份、yy表示2位的年份、mm(MM)表示月、dd表示天、hh24表示小时...

搜索增强

勾选使用该字段,对勾选的字段将入库构建索引,不同的字段类型在搜索过程中参与到召回、排序的链路中,在查询结果中可以展示。未勾选字段将不会构建索引。数据源类型 是否为faq 解析字段 RDS MySQL/MaxCompute 是 要求数据库库表字段类型为...

数据上传

DataWorks的数据上传功能支持将本地文件、数据分析的电子表格、OSS文件等数据上传至MaxCompute、EMR Hive、Hologres等引擎进行分析及管理,为您提供便捷的数据传输服务,助力您快速实现数据驱动业务。本文为您介绍如何使用数据上传功能上传...

订单汇总表数据要求

MaxCompute大宽表示例:字段要求:字段分类 字段类型 说明 用户ID 文本型 用户ID可用于营销、推送等。user_id是表的主键,必选字段。其他用户ID请根据业务需要设置。ID类型支持使用 ID类型管理 中所有已启用的ID类型。同一ID类型仅支持保存...

统计表数据要求

MaxCompute大宽表示例:字段要求:字段分类 字段类型 说明 用户ID 文本型、数值型 用户ID可用于营销、推送等,请根据业务需要设置至少一个用户ID。ID类型支持使用 ID类型管理 中所有已启用的ID类型。同一ID类型仅支持保存一个字段。您可以...

API

字段 类型 含义 备注 propValue PackMultiAttrSchemaDataWith,Config>|MultiAttrSchemaDataWith实体模型数据数组或者带包装字段的实体模型数据数组 参见 MultiAttrSchemaDataWith PackMultiAttrSchemaDataWith 返回值:MultiAttrMetaWith|...

FTP数据

支持的字段类型 远程FTP文件本身不提供数据类型,该类型是DataX FtpReader定义。DataX内部类型 远程FTP文件数据类型 LONG LONG DOUBLE DOUBLE STRING STRING BOOLEAN BOOLEAN DATE DATE 数据同步任务开发 FTP数据同步任务的配置入口和通用...

MaxCompute表数据

暂不支持MaxCompute外部表和包括JSON字段类型的MaxCompute表的数据预览。进行数据探查 数据探查通过分析数据的结构和取值,为您展示数据的统计信息和分布情况等探查结果。说明 数据探查将会产生数据质量实例费,您可以在数据质量任务查询...

飞线层

数据映射 当您需要自定义图表字段配置时,可以在 数据映射 模块设置不同的字段映射内容,将这些字段映射到组件对应的字段上。无需修改数据源中的字段,就可以实现数据的实时匹配。也可以单击 图标对字段分别样式配置。过滤器 打开 过滤器,...

分区

虽然可以指定分区列的类型为BIGINT,但是除了表的字段显示为BIGINT类型,任何其他情况(例如,字段的计算和比较)下都当作STRING类型处理。执行如下语句后,返回结果为空。创建表parttest。create table parttest(a bigint)partitioned by...

飞线层

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据类型数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 配置资产数据数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...

添加维度属性

通过添加维度属性,配置维度属性的字段类型、长度、质量校验函数和引用数据字典,为数据模型标准化设计及数据治理过程中的质量检测提供依据。本文介绍如何添加维度属性。前提条件 已新建维度,具体操作,请参见 新建维度。背景信息 在模型...

添加维度属性

通过添加维度属性,配置维度属性的字段类型、长度、质量校验函数和引用数据字典,为数据模型标准化设计及数据治理过程中的质量检测提供依据。本文介绍如何添加维度属性。前提条件 已新建维度,具体操作,请参见 新建维度。背景信息 在模型...

pg_stat_activity视图

pg_stat_activity视图的字段描述 字段 类型 描述 datid oid 数据库OID。datname name 数据库名称。procpid integer 后端进程的进程ID。说明 只有4.3版本支持procpid字段。pid integer 后端进程的进程ID。说明 只有6.0版本支持pid字段。sess...

散点层(线性渐变)

数据源 单击 配置数据源,可在 设置数据源 面板中修改数据类型数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 配置资产数据数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...

OSS数据

支持的字段类型与使用限制 离线读 OSS Reader实现了从OSS读取数据并转为数据集成协议的功能,OSS本身是无结构化数据存储。对于数据集成而言,OSS Reader支持的功能如下。支持 不支持 支持且仅支持读取TXT格式的文件,且要求TXT中schema为...

新建及管理质量规则模板

建议码表中的字段类型和校验字段类型都是string或其他相同类型。码表:选择目标码表。码表名称:输入码表名称,作为质量规则配置时的提示信息。码表参照字段:选择码表中对应的参照字段。说明 码表参照表 是判断某个字段是否在码表中,需要...

BI分析模式数据面板功能介绍

使用BI分析模式配置组件数据是一个全新的数据配置功能,需要与您准备的数据集内容相结合,您可以使用BI分析模式,为组件自由分配所需数据的字段内容,合理配置图表数据映射和其他数据筛选等功能。本文介绍BI分析模式下组件数据配置面板...

新建及管理质量规则模板

建议码表中的字段类型和校验字段类型都是string或其他相同类型。码表:选择目标码表。码表名称:输入码表名称,作为质量规则配置时的提示信息。码表参照字段:选择码表中对应的参照字段。说明 码表参照表 是判断某个字段是否在码表中,需要...

通过日志服务导入至数仓版

左边文本框为日志字段名称,右边为AnalyticDB MySQL数据库表中的字段。说明 Timestamp类型的字段映射精确到秒级别。例如日志时间为2022-01-05 10:12:13.145,投递到AnalyticDB MySQL后,投递结果为2022-01-05 10:12:13。投递开始时间 配置...

新建表

column_name column_type 指定数据表中每个列(字段名称和数据类型,如果创建多个列,需要用逗号隔开。步骤 7:完成新建表 单击 执行,完成新建表后,会在左侧导航栏的表列表中出现新建的 employee 表。说明 在左侧导航栏的表列表中,...

配置Vertica输入组件

切分建 您可以将源数据表中字段类型为整型的某一列作为切分键,推荐使用 主键 或 有索引的列 作为切分键。读取数据时,根据配置的切分键字段进行数据分片,实现并发读取,可以提升数据同步效率。批量条数 每个并发SQL语句读取数据的条数。...

配置Vertica输入组件

切分建 您可以将源数据表中字段类型为整型的某一列作为切分键,推荐使用 主键 或 有索引的列 作为切分键。读取数据时,根据配置的切分键字段进行数据分片,实现并发读取,可以提升数据同步效率。批量条数 每个并发SQL语句读取数据的条数。...

配置Teradata输入组件

切分键 您可以将源数据表中字段类型为整型的某一列作为切分键,推荐使用 主键 或有 索引的列 作为切分键。读取数据时,根据配置的切分键字段进行数据分片,实现并发读取,可以提升数据同步效率。批量条数 配置数据同步时,每条并发SQL语句...

配置OceanBase输入组件

切分键 您可以将源数据表中字段类型为整型的某一列作为切分键,推荐使用 主键 或 有索引的列 作为切分键。读取数据时,根据配置的切分键字段进行数据分片,实现并发读取,可以提升数据同步效率。批量条数 配置数据同步时,每条并发SQL语句...

配置OceanBase输入组件

切分键 您可以将源数据表中字段类型为整型的某一列作为切分键,推荐使用 主键 或 有索引的列 作为切分键。读取数据时,根据配置的切分键字段进行数据分片,实现并发读取,可以提升数据同步效率。批量条数 配置数据同步时,每条并发SQL语句...

配置IBM DB2输入组件

切分键 您可以将源数据表中字段类型为整型的某一列作为切分键,推荐使用 主键 或 有索引的列 作为切分键。读取数据时,根据配置的切分键字段进行数据分片,实现并发读取,可以提升数据同步效率。批量条数 配置数据同步时,每条并发SQL语句...

配置IBM DB2输入组件

切分键 您可以将源数据表中字段类型为整型的某一列作为切分键,推荐使用 主键 或 有索引的列 作为切分键。读取数据时,根据配置的切分键字段进行数据分片,实现并发读取,可以提升数据同步效率。批量条数 配置数据同步时,每条并发SQL语句...

弧线层

数据映射 当您需要自定义图表字段配置时,可以在 数据映射 模块设置不同的字段映射内容,将这些字段映射到组件对应的字段上。无需修改数据源中的字段,就可以实现数据的实时匹配。也可以单击 图标对字段分别样式配置。过滤器 打开 过滤器,...

配置Teradata输入组件

切分键 您可以将源数据表中字段类型为整型的某一列作为切分键,推荐使用 主键 或有 索引的列 作为切分键。读取数据时,根据配置的切分键字段进行数据分片,实现并发读取,可以提升数据同步效率。批量条数 配置数据同步时,每条并发SQL语句...

识别规则及识别方式

说明 自动继承开启后,下游会根据字段血缘关系自动继承直接上游字段的敏感等级,同时根据默认脱敏规则的配置,以实现对新增数据的自动保护,减少手动配置成本,也能更大程度上保证关联数据识别结果一致性和相关性。继承场景 支持选择 识别...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 Redis 版 云数据库 RDS 数据传输服务 数据库备份 DBS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用