创建多元索引
在数据表上创建一个多元索引后，您可以根据多元索引中建立索引的字段来查询数据表中的数据。一张数据表可以创建多个多元索引。最佳使用方式 请根据实际查询需求确定在一张数据表中创建多元索引的个数。例如有一张数据表有5个字段，分别为id...
桑基图
桑基图可以展示一组数据到另一组数据的分流情况，其分支的宽度代表数据流量的大小。例如，通过桑基图可视化分析能源数据、材料成分数据或金融数据的流向。仅高级版和专业版的群空间支持创建桑基图。前提条件 已创建仪表板，请参见 新建仪表...
创建多元索引
使用多元索引Search接口查不到数据 如何查看表的总行数 表格存储是否支持类似关系数据库的in和between.and查询 如何将多元索引Search接口查询数据的limit提高到1000 如何批量删除数据 使用多元索引时出现field:xx must enable enable_sort_...
自定义RDBMS数据库及同步数据
为了满足不同业务场景数据集成的诉求，Dataphin支持用户自定义当前系统不支持的RDBMS数据库（关系型数据库）类型的组件，并进行数据同步。您只需要准备关系型数据库的驱动，即可自定义RDBMS数据库类型的组件。本教程以MySQL为例，为您介绍...
自定义RDBMS数据库及同步数据
为了满足不同业务场景数据集成的诉求，Dataphin支持用户自定义当前系统不支持的RDBMS数据库（关系型数据库）类型的组件，并进行数据同步。您只需要准备关系型数据库的驱动，即可自定义RDBMS数据库类型的组件。本教程以MySQL为例，为您介绍...
字段提取模式
参数值 说明 fill 当目标字段不存在或者值为空时，设置目标字段。fill-auto 当新值非空，且目标字段不存在或者值为空时，设置目标字段。add 当目标字段不存在时，设置目标字段。add-auto 当新值非空，且目标字段不存在时，设置目标字段。...
过滤日志
参数 类型 是否必选 说明 Include string[]否 设置为日志字段的正则表达式，字段之间为与关系。如果日志字段符合对应的正则表达式，则采集该日志。Exclude string[]否 设置为日志字段的正则表达式，字段之间为或关系。如果日志中任意一个...
配置Elasticsearch输入组件
同步Elasticsearch数据源的数据至其他数据源的场景中，您需要先配置Elasticsearch输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置Elasticsearch输入组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条...
配置Elasticsearch输入组件
同步Elasticsearch数据源的数据至其他数据源的场景中，您需要先配置Elasticsearch输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置Elasticsearch输入组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条...
配置OSS输出组件
配置OSS输出组件，可以将外部数据库中读取的数据写入到OSS，或从大数据平台对接的存储系统中将数据复制推送至OSS，进行数据整合和再加工。本文为您介绍如何配置OSS输出组件。前提条件 已创建OSS数据源。具体操作，请参见 创建OSS数据源。...
用户属性管理
ID Mapping 已实现将跨来源渠道的数据中的同一个用户识别出来，为其赋予Quick Audience中的唯一身份标识QAID，将其名下的数据拉通。导入用户标签表时，通过从拉通后的数据获取用户属性信息，并确立解决数据冲突的规则，实现构建用户属性...
配置OSS输出组件
配置OSS输出组件，可以将外部数据库中读取的数据写入到OSS，或从大数据平台对接的存储系统中将数据复制推送至OSS，进行数据整合和再加工。本文为您介绍如何配置OSS输出组件。前提条件 已创建OSS数据源。具体操作，请参见 创建OSS数据源。...
数据表管理
更新从数据库导入的数据表 字段同步 当数据库中新增或删除有关列的字段后，通过 同步字段 功能，系统会自动检测数据库中的字段变更内容，并可根据实际业务需求选择是否对有关元数据做字段变更同步。具体操作如下：选择 知识中心>数据问答>...
新建字段标准通用信息
新建字段标准时需要为字段标准设置属性，如果默认属性不满足需要，可以为字段标准添加自定义属性。本文介绍如何新建字段标准通用信息。背景信息 可根据需要同时新建多个字段标准通用信息供新建字段标准时使用。新建的字段标准通用信息适用...
新建字段标准通用信息
新建字段标准时需要为字段标准设置属性，如果默认属性不满足需要，可以为字段标准添加自定义属性。本文介绍如何新建字段标准通用信息。背景信息 可根据需要同时新建多个字段标准通用信息供新建字段标准时使用。新建的字段标准通用信息适用...
用户标签表数据要求
支持将字段名设置为 用户属性 的属性编码，字段保存对应的用户属性值。该字段在 表结构配置 时将自动识别映射为对应的用户属性（支持修改），在导入时为对应的用户属性赋值（需要服从属性的赋值规则）。标签字段支持多值型，多个标签值之间...
任务类型配置
3、当需要删除某个任务类型时，需要确认当前项目内已经没有任务被设置为这个类型的情况下才能将其删除（具体需要检查项目内所有任务分组的父任务、子任务、孙任务等，以及回收站中所有任务分组内的父任务、子任务、孙任务等）。4、任务类型...
配置Kafka输出组件
配置Kafka输出组件，可以将外部数据库中读取数据写入到Kafka，或从大数据平台对接的存储系统中将数据复制推送至Kafka，进行数据整合和再加工。本文为您介绍如何配置Kafka输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道...
配置Kafka输出组件
配置Kafka输出组件，可以将外部数据库中读取数据写入到Kafka，或从大数据平台对接的存储系统中将数据复制推送至Kafka，进行数据整合和再加工。本文为您介绍如何配置Kafka输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道...
配置FTP输出组件
同步其他数据源的数据至FTP数据源的场景中，完成源数据源的信息配置后，需要配置FTP输出组件的目标数据源。本文为您介绍如何配置FTP输出组件。前提条件 已创建FTP数据源，详情请参见 创建FTP数据源。进行FTP输出组件属性配置的账号，需具备...
配置FTP输出组件
同步其他数据源的数据至FTP数据源的场景中，完成源数据源的信息配置后，需要配置FTP输出组件的目标数据源。本文为您介绍如何配置FTP输出组件。前提条件 已创建FTP数据源，详情请参见 创建FTP数据源。进行FTP输出组件属性配置的账号，需具备...
TongyiBeebotChat
字段详见 RelatedQuestion字段释义 Sentence字段释义 字段名 类型 描述 Content String 文本内容 ReferNumber Integer 引用的序号 AnswerReference字段释义 字段名 类型 描述 ItemList Array of Item 引用内容列表 Item字段释义 字段名 ...
配置相邻消息计算
如果电表的数据是通过一个大网关设备上报，电表设备的标志在消息里以 deviceId 字段表示，此时需要将 deviceId 设置为消息分区键，才能保证实际场景下的同一个电表的消息进行相邻计算。消息存活时长 单位为秒，默认一天，最小1秒，最大30天...
类型二：标签授权
分别自定义标签名称为 area、province、city 和 order_number，且 关联标签表字段 均设置为 手动录入。手动管理用户标签表。在手动管理标签表中，选定一个或多个用户，为添加的用户标签赋值。在 标签管理 页面，单击左侧导航栏的 手动管理...
数据脱敏
在数据集中设置需要脱敏的字段，系统将该字段中的敏感数据进行模糊化处理，使得该字段在仪表板、电子表格或自助取数中以脱敏的形式展示，保护数据安全。前提条件 已创建数据集，请参见 创建并管理数据集。脱敏规则及效果展示 说明 本文档仅...
查询语法
开启 全文索引 后，日志服务默认将整条日志（除_time_以外所有字段）设置为 text类型。and、or、not、()、:、""、\、*、?long或double类型 只有设置字段的数据类型为long或double后，才能通过数值范围查询该字段的值。如果字段的数据类型不...
配置组件交互
id、city 为您数据库中的字段，test_id_3 为数据库中数据表的表名。API模式 https://api.test?id=:income&city=:mycity 说明 income 和 mycity 为您配置的回调ID，id 和 city 为您数据库中的字段。高级功能 设置自定义字段 选择数字翻牌器...
搜索增强
已适配数据源列表 链接 阿里云 RDS MySQL 云数据库 RDS 控制台 云数据库 RDS MySQL 版 文档 阿里云 MaxCompute MaxCompute 控制台 云原生大数据计算服务 MaxCompute 文档 阿里云 OSS 对象存储OSS 控制台 对象存储 OSS 文档 子路径/库表 ...
通过数据同步功能同步SLS数据至数仓版
例如：AnalyticDB for MySQL 集群数据表的字段名为name，源端SLS数据字段名为user_name，系统会自动以name填充 源字段 和 目标字段，此时您需要手动修改 源字段 为user_name。同步配置 的参数说明如下：参数名称 参数说明 投递起始位点 ...
复合查询控件
说明 筛选一段时间范围时，需先添加一个筛选字段设置 默认值 为大于或大于等于，再添加相同日期筛选字段设置 默认值 为小于等于或小于。单击 添加条件，筛选字段选择 订单日期(year)，字段名称默认为 订单日期(year)，默认值选择 大于，...
配置MySQL输出组件
输出字段 为您展示输出字段。单击 字段管理 选择输出字段。单击 图标，将 已选的输入字段 移入 未选的输入字段。单击 图标，将 未选的输入字段 移入 已选的输入字段。映射关系 根据上游的输入和目标表的字段，可以手动选择字段映射。快速...
配置MySQL输出组件
输出字段 为您展示输出字段。单击 字段管理 选择输出字段。单击 图标，将 已选的输入字段 移入 未选的输入字段。单击 图标，将 未选的输入字段 移入 已选的输入字段。映射关系 根据上游的输入和目标表的字段，可以手动选择字段映射。快速...
配置DM（达梦）输出组件
配置DM（达梦）输出组件，可以将外部数据库中读取的数据写入到DM（达梦），或从大数据平台对接的存储系统中将数据复制推送至DM（达梦），进行数据整合和再加工。本文为您介绍如何配置DM（达梦）输出组件。前提条件 已创建DM（达梦）数据源...
配置DM（达梦）输出组件
配置DM（达梦）输出组件，可以将外部数据库中读取的数据写入到DM（达梦），或从大数据平台对接的存储系统中将数据复制推送至DM（达梦），进行数据整合和再加工。本文为您介绍如何配置DM（达梦）输出组件。前提条件 已创建DM（达梦）数据源...
创建索引
倒排索引是一种数据存储结构，由关键词和指向实际数据的逻辑指针组成，记录了特定文本内容出现在哪些日志中，用于快速根据关键词定位到具体数据行，类似于数据的目录。创建索引后，您才能对日志数据进行查询和分析。本文为您介绍日志服务...
结果字段说明
result_type 字段为 cluster_info 当 result_type 字段为 cluster_info 时，result 字段中包含日志类别信息，内容如下："result":{"cluster_id":"xxxx","cluster_pattern":"xxxx","cluster_active_age":120,"cluster_alive_age":150,...
GetMetaTableColumn-获取表的字段信息
1 Nullable boolean 字段是否允许为空，返回值说明如下：true：允许为空 false：不允许为空 false DataLength long 字段长度。0 ErrorMessage string 错误信息。TableGuid is mandatory for this action.Success boolean 请求是否成功，...
多轮对话搜索
已适配数据源列表 链接 阿里云 RDS MySQL 云数据库 RDS 控制台 云数据库 RDS MySQL 版 文档 阿里云 MaxCompute MaxCompute 控制台 云原生大数据计算服务 MaxCompute 文档 阿里云 OSS 对象存储OSS 控制台 对象存储 OSS 文档 子路径/库表 ...
数据集填报
选择智能提交时，写入方式可以设置为 添加、编辑、删除。删除后提交 会结合入库设置的主键字段将所属行全部数据清空后再重新提交。若您的入库配置表未包含全部字段，未绑定填报控件的字段值也会被清空，请谨慎操作。不包含数据集表格：纯...
配置本地文件输入组件
本地文件输入组件可用于将本地文件的TXT、excel、CSV格式的数据。同步至其他数据源的场景中。本文为您介绍如何配置本地文件输入组件。使用限制 仅支持手动任务配置本地文件输入组件。操作步骤 请参见 离线管道组件开发入口，进入离线管道...
- 产品推荐
- 这些文档可能帮助您