属性设置器
supportStaticType Array<string>tabTitles包括静态时，静态支持的类型 这里的类型取 字段类型。配置时字段类型改为全小写。supportFieldType Array配置字段时，允许配置的字段类型列表 这里的类型取 字段类型。配置时字段类型改为全小写。...
管理Schema
在Milvus中，Schema定义了向量数据库中数据的组织结构，包括字段名称和类型等。通过定义Schema来管理和查询数据，以支持高效的搜索和分析操作。本文为您介绍Collection和字段的Schema定义以及如何在Milvus中创建Schema。前提条件 已在本地...
工具箱
工具箱是OCR文档自学习所提供的用于模型、模板路由分类及提升识别准确率的小工具集合，当前主要提供了分类器与字段类型两大类工具。分类器管理 分类器：是一个支持多模板、多模型分类路由的工具。用户通过设定分类器中的关键词或训练样本...
工具箱
工具箱是OCR文档自学习所提供的用于模型、模板路由分类及提升识别准确率的小工具集合，当前主要提供了分类器与字段类型两大类工具。分类器管理 分类器：是一个支持多模板、多模型分类路由的工具。用户通过设定分类器中的关键词或训练样本...
配置API输出组件
配置API输出组件，可以将外部数据库中读取的数据写入到API，或从大数据平台对接的存储系统中将数据复制推送至API，进行数据整合和再加工。本文为您介绍如何配置API输出组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建API...
配置API输出组件
配置API输出组件，可以将外部数据库中读取的数据写入到API，或从大数据平台对接的存储系统中将数据复制推送至API，进行数据整合和再加工。本文为您介绍如何配置API输出组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建API...
文本分析器
注意事项 支持创建为索引字段的类型 INT，INT_ARRAY，TEXT，SHORT_TEXT，LITERAL，LITERAL_ARRAY，TIMESTAMP，GEO_POINT 不支持创建为索引字段的类型 FLOAT，FLOAT_ARRAY，DOUBLE，DOUBLE_ARRAY 如果TEXT字段设置了搜索结果摘要，扩展检索...
文本分析器
注意事项 支持创建为索引字段的类型 INT，INT_ARRAY，TEXT，SHORT_TEXT，LITERAL，LITERAL_ARRAY，TIMESTAMP，GEO_POINT 不支持创建为索引字段的类型 FLOAT，FLOAT_ARRAY，DOUBLE，DOUBLE_ARRAY 如果TEXT字段设置了搜索结果摘要，扩展检索...
DELETE
每组对应的 return_expression 与 collection 字段的类型必须兼容。subquery 子查询语句。示例 从 jobhist 表中删除员工 7900 的所有行：DELETE FROM jobhist WHERE empno=7900;清除表 jobhist：DELETE FROM jobhist;将 select*from t 的...
多元索引最佳实践
常见索引字段类型设计示例如下：Type、Status等枚举类型字段的取值为0、1、2三种，虽然字段取值为数字，但是通过在数据表中保存为字符串类型并在创建多元索引时索引为Keyword类型，您可以使用TermQuery或者多词精确查询（TermsQuery）...
配置MongoDB输入组件
[{"name":"cf1:a","type":"String"},{"name":"cf1:b","type":"String"}]单击 新建输出字段，根据页面提示填写 字段 及选择字段的 类型。同时您也可以对已添加的字段执行如下操作：单击 操作 列下的 图标，编辑已有的字段。单击>操作 列下的...
数组和嵌套类型
嵌套类型字段在写入数据表时为字符串类型，对应到多元索引嵌套字段类型的格式为JSON对象的数组，例如[{"tagName":"tag1","score":0.8},{"tagName":"tag2","score":0.2}]。重要 即使只有一个子行，也必须按照JSON数组的格式构造字符串。单层...
控制台错误日志说明
字段将补充默认值 字段类型转换场景 如果用户的数据源数据类型与schema配置类型无法进行转换则报错 73016 文档总数超过应用配额 数据写出场景 应用实际存储超配额 7523 字符串连接插件处理出错，推送失败，请检查后重试。字符串拼接插件 ...
Range范围查询
字段类型 说明 系统限制 INT int64类型整数,支持INT类型数据的范围查询。最多只能有4个字段为该类型。TIMESTAMP 大于等于0的整数时间戳，单位为毫秒（存储支持毫秒，查询精度只到秒级，后3位数值默认为000）。提供时间戳类型数据的范围查询...
Range范围查询
字段类型 说明 系统限制 INT int64类型整数,支持INT类型数据的范围查询。最多只能有4个字段为该类型。TIMESTAMP 大于等于0的整数时间戳，单位为毫秒（存储支持毫秒，查询精度只到秒级，后3位数值默认为000）。提供时间戳类型数据的范围查询...
新建数据探查任务
数据探查可以帮助您快速了解数据概况，提前评估数据可用性和潜在风险，您可对数据表进行全量探查、抽样探查。本文为您介绍如何新建数据探查任务。前提条件 需开通数据质量功能模块才可使用数据探查功能。使用限制 当计算引擎为AnalyticDB ...
新建数据探查任务
数据探查可以帮助您快速了解数据概况，提前评估数据可用性和潜在风险，您可对数据表进行全量探查、抽样探查。本文为您介绍如何新建数据探查任务。前提条件 需开通数据质量功能模块才可使用数据探查功能。使用限制 当计算引擎为AnalyticDB ...
控制台错误日志说明
字段将补充默认值 字段类型转换场景 如果用户的数据源数据类型与schema配置类型无法进行转换则报错 73016 文档总数超过应用配额 数据写出场景 应用实际存储超配额 7523 字符串连接插件处理出错，推送失败，请检查后重试。字符串拼接插件 ...
创建多元索引
可以选择部分主键列作为路由字段，在进行索引数据写入时，会根据路由字段的值计算索引数据的分布位置，路由字段的值相同的记录会被索引到相同的数据分区中。index_sort 索引预排序设置，包含sorters设置。如果不设置，则默认按照主键排序。...
配置MongoDB输入组件
[{"name":"cf1:a","type":"String"},{"name":"cf1:b","type":"String"}]单击 新建输出字段，根据页面提示填写 字段 及选择字段的 类型。同时您也可以对已添加的字段执行如下操作：单击 操作 列下的 图标，编辑已有的字段。单击>操作 列下的...
创建多元索引
可以选择部分主键列作为路由字段，在进行索引数据写入时，会根据路由字段的值计算索引数据的分布位置，路由字段的值相同的记录会被索引到相同的数据分区中。indexSort 索引预排序设置，包含sorters设置。如果不设置，则默认按照主键排序。...
配置Elasticsearch输入组件
同步Elasticsearch数据源的数据至其他数据源的场景中，您需要先配置Elasticsearch输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置Elasticsearch输入组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条...
扫描（Scan）分析概述
例如计算每个接口的平均延时，其中avg函数需要数值类型，即需要先使用cast函数将 latency 字段的类型转换为bigint类型。status:200|set session mode=scan;SELECT avg(cast(latency AS bigint))AS '平均延时',api GROUP BY api 扫描分析...
配置Elasticsearch输入组件
同步Elasticsearch数据源的数据至其他数据源的场景中，您需要先配置Elasticsearch输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置Elasticsearch输入组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条...
离线同步能力说明
数据集成的离线同步功能为您提供数据读取（Reader）和写入插件（Writer），方便您通过定义来源与去向数据源，并结合DataWorks调度参数使用，将源端数据库中全量或增量数据的同步至目标数据库中。本文为您介绍离线同步的相关能力。使用限制 ...
TSDB数据源
TSDB Writer脚本Demo RDB到TSDB的默认配置（推荐）{"type":"job","version":"2.0","steps":[{"stepType":"stream",/您可将stream插件替换为具体的RDB类型插件json，RDB类型数据库包括MySQL、Oracle、PostgreSQL、DRDS等。parameter":{},...
配置Amazon S3输出组件
配置Amazon S3输出组件，可以将外部数据库中读取的数据写入到Amazon S3，或从大数据平台对接的存储系统中将数据复制推送至Amazon S3，进行数据整合和再加工。本文为您介绍如何配置Amazon S3输出组件。前提条件 已创建Amazon S3数据源。具体...
配置Amazon S3输出组件
配置Amazon S3输出组件，可以将外部数据库中读取的数据写入到Amazon S3，或从大数据平台对接的存储系统中将数据复制推送至Amazon S3，进行数据整合和再加工。本文为您介绍如何配置Amazon S3输出组件。前提条件 已创建Amazon S3数据源。具体...
配置Log Service输入组件
输出字段 为您展示输出的字段，您也可以通过以下两种方式添加字段：单击右侧的 新建输出字段，填写 来源序号、字段 及选择字段的 类型，单击非该字段显示的区域。单击右侧的 批量添加，在 请以JSON格式批量配置 对话框，填写配置代码，单击...
配置Log Service输入组件
输出字段 为您展示输出的字段，您也可以通过以下两种方式添加字段：单击右侧的 新建输出字段，填写 来源序号、字段 及选择字段的 类型，单击非该字段显示的区域。单击右侧的 批量添加，在 请以JSON格式批量配置 对话框，填写配置代码，单击...
配置OSS输出组件
配置OSS输出组件，可以将外部数据库中读取的数据写入到OSS，或从大数据平台对接的存储系统中将数据复制推送至OSS，进行数据整合和再加工。本文为您介绍如何配置OSS输出组件。前提条件 已创建OSS数据源。具体操作，请参见 创建OSS数据源。...
配置OSS输出组件
配置OSS输出组件，可以将外部数据库中读取的数据写入到OSS，或从大数据平台对接的存储系统中将数据复制推送至OSS，进行数据整合和再加工。本文为您介绍如何配置OSS输出组件。前提条件 已创建OSS数据源。具体操作，请参见 创建OSS数据源。...
UPDATE
每组对应的 return_expression 与 collection 字段的类型必须兼容。subquery 子查询语句。示例 将 dept 表中第 20 部门的位置更改为 AUSTIN：UPDATE dept SET loc='AUSTIN' WHERE deptno=20;对于 emp 表中 job=SALESMAN 的所有员工，将工资...
常见问题
可以排查数据集中新建计算字段的表达式中是否引用了其他计算字段，注意计算字段表达式中只能使用数据库中原始字段，不能引用之前创建的计算字段，您也可以使用前计算字段的表达式来代替。日期类型的字段，在不转换文本的情况下是否支持...
Quick BI的参数SQL应该怎样写
配置参数字段类型如下：仪表板使用该数据集制作图表时，查询条件筛选内容，及生成的SQL如下：从上面自动生成的SQL来看 report_date字段（日期类型），自动以区间的形式查询，如果查询条件里输入的是单日的日期，SQL会自动查询该日数据。...
数据集组合
单击辅助数据集，可以查看字段的关联状态，支持手动关联或取消关联字段。表示该字段目前为关联字段，单击后取消该关联字段。表示该字段目前不是关联字段，单击后将变为关联字段。说明 拖入关联字段，对应的关联图标会自动打开。需要保证...
配置HDFS输入组件
同步HDFS数据源的数据至其他数据源的场景中，您需要先配置HDFS输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置HDFS输入组件。前提条件 已创建HDFS数据源，如何创建，请参见 创建HDFS数据源。进行HDFS输入组件属性...
管理HBase输入组件
输出字段 根据左侧页面的输入配置，为您展示输出的字段，您也可以通过以下两种方式添加字段：单击右侧的 新建输出字段，根据页面提示填写 列簇、字段 及选择字段的 类型。单击右侧的 批量添加，请以JSON格式批量配置，完成配置后单击 确认...
配置Oracle输出组件
Dataphin会自动为您匹配创建表的代码，包括目标表名称（默认为来源表名）、字段类型（基于Dataphin初步做了字段类型的转换）等信息。您可以根据业务情况完成创建目标表的SQL脚本修改，并单击 新建。目标表新建成功后，Dataphin自动将新建的...
配置Oracle输出组件
Dataphin会自动为您匹配创建表的代码，包括目标表名称（默认为来源表名）、字段类型（基于Dataphin初步做了字段类型的转换）等信息。您可以根据业务情况完成创建目标表的SQL脚本修改，并单击 新建。目标表新建成功后，Dataphin自动将新建的...
- 产品推荐
- 这些文档可能帮助您