配置MongoDB输出组件
快速映射 根据上游的输入和目标表的字段，可以手动选择字段映射。快速映射 包括 同行映射 和 同名映射。单击 确认，完成 MongoDB 输出组件的属性配置。后续步骤 完成输出组件的配置后，即可配置离线单条管道的容错、并发度及内存等参数。...
受众推送功能
若您需要在Kafka使用字段的别名，选择某个字段用于推送后，可以修改该字段的字段名映射。默认映射为原字段名，修改后，推送到Kafka的字段名将为新的字段名映射，非原字段名。说明 推送的ID字段、标签字段必须来自于受众来源的用户标签数据...
配置OceanBase输出组件
快速映射 根据上游的输入和目标表的字段，可以手动选择字段映射。快速映射 包括 同行映射 和 同名映射。单击 确认，完成 OceanBase 输出组件的属性配置。后续步骤 完成输出组件的配置后，即可配置离线单条管道的容错、并发度及内存等参数。...
配置StarRocks输出组件
StarRocks输出组件用于向StarRocks数据源写入数据。同步其他数据源的数据至StarRocks...映射关系 根据上游的输入和目标表的字段，可以手动选择字段映射。快速映射 包括 同行映射 和 同名映射。单击 确定，完成 StarRocks输出组件 的属性配置。
配置StarRocks输出组件
StarRocks输出组件用于向StarRocks数据源写入数据。同步其他数据源的数据至StarRocks...映射关系 根据上游的输入和目标表的字段，可以手动选择字段映射。快速映射 包括 同行映射 和 同名映射。单击 确定，完成 StarRocks输出组件 的属性配置。
数据源表授权
查看详情：单击数据源名称，右侧显示数据库中的数据表列表，可单击 图标查看表的字段信息。编辑：单击 图标，可编辑数据源参数，编辑操作与添加时相同，请参见 数据源（即分析数据源）。移除：单击 图标，确认后将数据源移除。说明 若有...
查看并管理明细及汇总表实例
例如 图标，表示该逻辑表的字段有运行 成功 和 未运行 的两种状态。字段运行状态图标后字段对应的数量为当前逻辑表节点的字段数量；节点对应的数量为当前逻辑表节点的物化节点数量。同时您也可以单击 图标，查看每个字段的归一运行状态。...
查看并管理明细及汇总表实例
例如 图标，表示该逻辑表的字段有运行 成功 和 未运行 的两种状态。字段运行状态图标后字段对应的数量为当前逻辑表节点的字段数量；节点对应的数量为当前逻辑表节点的物化节点数量。同时您也可以单击 图标，查看每个字段的归一运行状态。...
数据建模
字段类型准确性校验 取表字段的字段类型元数据与期望的类型进行比较，符合规则则通过。标准字典值校验 对应分区，字段值与对应数据字典的值编码进行比较，字段值全部存在于字典的值编码中的，则规则通过。自定义SQL规则：单表自定义SQL：...
配置PostgreSQL输出组件
快速映射 根据上游的输入和目标表的字段，可以手动选择字段映射。快速映射 包括 同行映射 和 同名映射。单击 确认，完成 PostgreSQL 输出组件的属性配置。后续步骤 完成输出组件的配置后，即可配置离线单条管道的容错、并发度及内存等参数...
配置HBase输出组件
HBase输出组件用于向HBase数据源写入数据。同步其他数据源的数据至HBase数据源的场景中，完成...快速映射 根据上游的输入和目标表的字段，可以手动选择字段映射。快速映射 的同行映射和 同名映射。单击 确认，完成 HBase输出组件 的属性配置。
配置PolarDB输出组件
快速映射 根据上游的输入和目标表的字段，可以手动选择字段映射。快速映射 包括 同行映射 和 同名映射。单击 确认，完成 PolarDB 输出组件的属性配置。后续步骤 完成输出组件的配置后，即可配置离线单条管道的容错、并发度及内存等参数。...
配置PolarDB输出组件
快速映射 根据上游的输入和目标表的字段，可以手动选择字段映射。快速映射 包括 同行映射 和 同名映射。单击 确认，完成 PolarDB 输出组件的属性配置。后续步骤 完成输出组件的配置后，即可配置离线单条管道的容错、并发度及内存等参数。...
如何使用蓝图编辑器自定义开发组件
本文档示例为开发者的自定义组件提供功能开发的参考，主要介绍三个蓝图...说明 container 中的字段名要和 package.json 文件中的字段名保持一致。this.container.show();显示代码，开发者自定义 this.container.hide();隐藏代码，开发者自定义
事件处理流
支持识别的事件对象分类（Class）如下：网络（Network）存储（Storage）计算（Compute）操作系统（OS）应用（Application）数据库（Database）变更（Change）支持识别的事件类型（Type）如下：可用性（Availability）时延 容量（Capacity）...
配置SAP HANA输出组件
快速映射 根据上游的输入和目标表的字段，可以手动选择字段映射的方式。快速映射 包括 同行映射 和 同名映射。单击 确认，完成 SAP HANA 输出组件的属性配置。后续步骤 完成输出组件的配置后，即可配置离线单条管道的容错、并发度及内存等...
分区
虽然可以指定分区列的类型为BIGINT，但是除了表的字段显示为BIGINT类型，任何其他情况（例如，字段的计算和比较）下都当作STRING类型处理。执行如下语句后，返回结果为空。创建表parttest。create table parttest(a bigint)partitioned by...
Quick BI报错“调用对象查询时异常：.Parse exception...
新手遇到比较常见的错误：聚合函数后面不写括号 错误写法：count[字段a]正确写法：count([字段a])计算字段引用的字段名不是通过单击右侧字段列表或者键盘点击“[”唤出的，而是手动打上的。错误写法：count(字段名)正确写法：count([字段a]...
字段值提取函数
分隔符提取 e_csv、e_psv、e_tsv 使用自定义的分隔符与预定义的字段名，从特定字段中提取多个字段。e_csv：默认分隔符为半角逗号（,）。e_psv：默认分隔符为竖线（|）。e_tsv：默认分隔符为\t。支持和其他函数组合使用。相关示例，请参见 ...
申请、续期和交还表权限
字段列表为您展示 序号、字段名、字段描述、数据类型、数据分类、数据分级 信息。数据分级 等级从低到高为L1、L2、L3、L4（公开到绝密）。申请理由 填写申请表权限的原因。单击 提交，完成表权限的申请。数据表权限详情 在数据表权限页面，...
创建字段
如果需要的字段超出范围，则可以 自定义字段，单击 新建字段，并填写以下信息：字段名称：系统入参的字段名。为防止与系统默认字段冲突，自带DE前缀（不需要输入）。建议取有业务含义的名称，例如：DEorderId。字段显示名：字段在决策引擎...
申请、续期和交还表权限
字段列表为您展示 序号、字段名、字段描述、数据类型、数据分类、数据分级 信息。数据分级 等级从低到高为L1、L2、L3、L4（公开到绝密）。申请理由 填写申请表权限的原因。单击 提交，完成表权限的申请。数据表权限详情 在数据表权限页面，...
有约束的列修改类型
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改不同约束下的列的字段类型的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型、短横线（-）表示没有、all 表示全部类型。主键（PRIMAEY KEY）约束下...
配置SAP HANA输出组件
本文为您介绍如何配置SAP HANA输出组件。操作步骤 请参见 离线管道组件开发入口...快速映射 根据上游的输入和目标表的字段，可以手动选择字段映射的方式。快速映射 包括 同行映射 和 同名映射。单击 确认，完成 SAP HANA 输出组件的属性配置。
配置OceanBase输出组件
本文为您介绍如何配置OceanBase输出组件。前提条件 已创建OceanBase数据源。...映射关系 根据上游的输入和目标表的字段，可以手动选择字段映射。快速映射 包括 同行映射 和 同名映射。单击 确认，完成 OceanBase 输出组件的属性配置。
配置DataWorks平台GDB Writer
示例的字段名或枚举值，如果没有特殊说明，均为大小写敏感。目前GDB服务端仅支持UTF-8编码格式，要求来源数据均为UTF-8编码格式。由于网络限制，运行数据集成任务时，只能使用 独享资源模式。参数说明 参数 描述 是否必选 默认值 ...
有约束的列修改长度
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改不同约束下的列的字段长度的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型、短横线（-）表示没有。主键（PRIMARY KEY）约束下字段长度的修改 ...
CSV格式
参数 说明 CSV字段 在 原始日志 页签中查看日志字段，将需要投递到OSS的字段名有序填入。日志服务还提供保留字段_time_、_topic_、_source_等。保留字段的更多信息，请参见 保留字段。说明 同一个日志字段在 CSV字段 中只能配置一次，不...
Quick BI如何设置自动用字段备注作为字段名
问题描述 数据库的建表语句已经给字段加了备注名称，希望创建数据集时，可以直接用该备注名称作为字段名 解决方案 需要修改工作空间的配置信息，个人空间与群空间配置入口不一样。要确认数据集是在哪个工作空间创建的，然后进入相应工作...
StorageDescriptor
名称 类型 描述 示例值 object StorageDescriptor BucketCols ListString 分桶的字段的数组 Cols array 表中的所有字段 FieldSchema 表字段的定义 Compressed boolean 是否启用压缩 false InputFormat string 输入格式，具体参见 ...
StorageDescriptor
名称 类型 描述 示例值 object StorageDescriptor BucketCols ListString 分桶的字段的数组 Cols array 表中的所有字段 FieldSchema 表字段的定义 Compressed boolean 是否启用压缩 false InputFormat string 输入格式，具体参见...
扩展字段
管理员可在扩展字段菜单中定义并使用新的字段。说明 当前仅支持账户的扩展字段，其他主体暂不支持。创建字段 管理员可前往【扩展字段】菜单，点击【创建字段】按钮，弹出字段的创建表单。需要填写的内容说明如下：字段 说明 是否支持编辑 ...
扫描（Scan）分析概述
字段名较多，事先无法获取具体的字段名，无法建立字段索引。字段类型发生变化，无法查询。针对上述问题，日志服务推出扫描查询和扫描分析功能，用于查询和分析日志，无需对扫描的目标字段建立索引。关于扫描查询的更多信息，请参见 扫描...
正则解析
日志提取字段 为提取的日志内容（Value），设置对应的字段名（Key）。解析失败时保留原始字段 选中 解析失败时保留原始字段，则解析失败时，将保留原始字段。解析成功时保留原始字段 选中 解析成功时保留原始字段，则解析成功时，将保留...
风险识别管理（新版）
11 规则生效的字段 规则项>字段 规则定义>条件设置 区域，选择条件 选择 数据位置 时，所配置的 字段名。12 用于配置哪些用户访问时会触发该规则。规则项>访问人员 规则定义>条件设置 区域，选择条件 选择 用户信息 时，所选择的 信息类别...
Kafka数据接入
通过创建Tablestore Sink Connector，将 云消息队列 Kafka 版 实例的数据源Topic导出到 表格存储（Tablestore...每个标签是一个字符串类型的Key和Value，Key为配置的字段名，Value为字段内容。标签作为时间线元数据的一部分，度量名称、数据源...
事件操作函数
原始日志_topic_:db_name:db-01 db_version:5.6_topic_:db_name:db-02 db_version:5.7 加工规则 e_output(name="target1",hash_key_field="db_version")加工结果#假设存储目标target1一共有2个Shard。Shard 0的范围...
创建索引
日志中存在同名字段（例如都为request_time）时，则日志服务会将其中一个字段名显示为request_time_0，底层存储的字段名仍为request_time。因此在创建索引、查询、分析、投递、加工时，只能使用原始字段名request_time。全文索引和字段索引...
开启和使用冷数据分层存储
未过期（高频访问）的分区子表无需任何改变，仍存储在数据库云盘中，这样既不影响分区表的访问性能，又降低了存储成本。prt1为分区表（父表）-prt1_p1为prt1的未过期子表-prt2_p2为prt1的已过期子表-对已过期子表执行alter操作 ALTER TABLE...
开启和使用冷数据分层存储
未过期（高频访问）的分区子表无需任何改变，仍存储在数据库云盘中，这样既不影响分区表的访问性能，又降低了存储成本。prt1为分区表（父表）-prt1_p1为prt1的未过期子表-prt2_p2为prt1的已过期子表-对已过期子表执行alter操作 ALTER TABLE...
- 产品推荐
- 这些文档可能帮助您