图编辑
建立MaxCompute分区回流时要设置回追增量的起始时间戳，即当前全量数据所包含的数据结束时间 索引类型及字段结构 索引类型 KV：需要指定pkey字段，（注意：总字段数需要最少2个）；KKV：需要指定起点字段、终点字段，（注意：总字段数需要...
通过控制台使用多元索引
只有当所选字段的数据类型为地理位置时才能使用地理位置查询。距离查询：根据一个中心点和距离条件查询表中的数据，当一个地理位置点到指定的中心点的距离不超过指定的值时，满足查询条件。矩形查询：根据一个长方形范围的地理位置边界条件...
云消息队列 RocketMQ 版
其既可为分布式应用系统提供异步解耦和削峰填谷的能力，同时也具备互联网应用所需的海量消息堆积、高吞吐和可靠重试等特性。RocketMQ连接器支持的信息如下。类别 详情 支持类型 源表和结果表 运行模式 仅支持流模式 数据格式 CSV和二进制...
客户资料评分
系统默认客户所有资料字段的评分规则为空；自定义客户属性也支持配置资料评分规则。评分规则分类 主要分为以下两类：完善资料评分：客户只需要提交该资料字段的信息即可获取分值。按资料价值评分：基于客户填写信息的价值高低给予不同的...
错误码说明
模板名只能由数字、26个英文字母或下划线组成 9004 模板名长度不可超过30位 9005 查询模板信息出错 9006 模板名字已存在 9007 插入模板信息出错 9008 无效的数据 9009 定义的字段数目超过系统允许的最大字段数 9010 此字段保留字段名 9011 ...
错误码说明
模板名只能由数字、26个英文字母或下划线组成 9004 模板名长度不可超过30位 9005 查询模板信息出错 9006 模板名字已存在 9007 插入模板信息出错 9008 无效的数据 9009 定义的字段数目超过系统允许的最大字段数 9010 此字段保留字段名 9011 ...
数据表管理
重要 全量同步适用于数据库内容进行了大量更新的场景，所需时间较长，对资源消耗也较大，建议必要时才使用。表格生效状态管理 失效：表示数据表不参与问答，有关失效状态如下图所示：生效：表示数据表可以参与问答，有关生效状态如下图所示...
SPL指令
字段数多于值时，多余字段输出空字符串。True：严格配对，不输出任何字段。默认为关闭，需要开启时，请添加此参数。field Field 是 需要解析的原字段名称。要求数据内容包含该字段，类型须为 VARCHAR，且其值为非 null。否则，不执行提取...
Elasticsearch数据源
默认情况下，SelectDB On ES会从行存（_source）中获取所需的所有列，_source 的存储采用的行式+JSON的形式存储，在批量读取性能上要劣于列式存储，尤其是在只需要查询少数列的情况下尤为明显。在只查询少数列的情况下，docvalue 的性能...
MongoDB数据源
数据集成本身不支持数组类型，但MongoDB支持数组类型，并且数组类型具有强大的索引功能。您可以通过参数的特殊配置，将字符串转换为MongoDB中的数组。转换类型后，即可并行写入MongoDB。自建MongonDB数据库不支持公网访问，仅支持阿里云...
虚拟列
数据表中字段类型 虚拟列字段类型 String Keyword（含数组）String Text（含数组）String Long（含数组）String Double（含数组）String Geo-point（含数组）Long Keyword Long Text Double Keyword Double Text 虚拟列目前仅支持用在查询...
导入Kafka数据
解析数组元素 打开 解析数组元素 开关后，对于JSON数组格式的数据，系统会按其数组元素拆分为多条数据后进行导入。编码格式 待导入数据的编码格式（即字符集），目前支持UTF-8和GBK。VPC实例ID 如果Kafka集群是VPC环境下的阿里云 云消息...
通过数据同步功能同步Kafka至湖仓版（推荐）
增量同步所需ACU数 指定任务运行的Job型资源组ACU数。最小ACU数为2，最大ACU数为Job型资源组可用计算最大资源数。建议多指定一些ACU数，可以提升入湖性能及任务稳定性。说明 创建数据同步任务时，使用Job型资源组中的弹性资源。数据同步...
通过消费组读取文本日志进行模板匹配
高级参数 参数 说明 初始化窗口数量 文本分析作业冷启动（日志积累与算法准备）所需的窗口数。日志相似聚类算法在初始化的若干个窗口内只进行日志积累与算法准备，在后续的时间窗口中才对积累的日志进行异常检测。更多信息，请参见 如何...
配置API输入组件
读取JSON路径 非必填，填写JSON路径后可读取数组数据，不填写则读取单条数据。请求次数 支持 一次请求 和 多次请求。一次请求：只进行一次请求。多次请求：根据指定循环的参数，进行多次请求。请求参数：需要在Parameters或Body中配置，...
推送数据
其中推送文档数据为如下所示JSON数组表示：注意：其中具体字段请自行参考 数据规范 进行添加或修改。1.新增数据（add）：/推送新增的item数据[{"cmd":"add","fields":{"item_id":"1","item_type":"article","title":"感动中国的大学生，今...
实时日志采集字段说明
说明 您可以自行选择投递下表字段，为了降低数据成本，建议仅选择实际所需的字段进行投递。单个日志类型下的所有投递任务共用一套字段。在一个任务下做的字段编辑会全局生效。例如用户访问日志默认勾选domain字段。如果用户在某一个任务...
配置API输入组件
读取JSON路径 非必填，填写JSON路径后可读取数组数据，不填写则读取单条数据。请求次数 支持 一次请求 和 多次请求。一次请求：只进行一次请求。多次请求：根据指定循环的参数，进行多次请求。请求参数：需要在Parameters或Body中配置，...
创建与管理数据模型
Reference（引用）：选择该类型后需要选择关联的表和字段，该引用字段的实际类型与关联字段的类型相同。其中，关联的表是当前版本限界上下文已经保存的数据模型，关联字段是关联表内的字段。Sequence（序列）：自增长序列，默认为Long类型...
混合查询最佳实践
使用向量检索，在定义字段时有位置要求，需要按照主键字段、命名空间字段（非必要）、向量字段的顺序创建。（如上图所示）4.索引结构 配置混合索引，混合索引选择“开启”，包含字段中配置主键、向量字段、稀疏向量下标、稀疏向量值：配置...
错误检查
字段的错误检查 针对字段的错误检查有很多类型，为了减少配置，我们在 src/api 中提供了封装方法 attrRules，方便对字段的错误检查配置。示例如下：import { API_VERSION,Category,attrRules,actionRules,FORMAT } from './api';export ...
系统管理
该场景，您需使用 逆向建模：物理表反向建模 功能，先将物理表生成模型，再编辑模型信息并重新发布为所需物理表。进入系统管理 进入智能数据建模页面。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据建模与开发>数据建模...
搜索增强
接口返回字段 接口返回字段是指搜索请求后的返回结果字段，可在索引配置字段中选择业务所需字段，此字段会在开放接口openapi中的fields字段返回。后续可应用于大模型多轮对话中的参考内容。是否自动更新 若数据源索引配置需要定期更新，则...
新建行为关系
在行为主体中选择您所需定义的主体及主体ID、字段名称等信息，系统将根据配置自动解析字段类型和值类型。您也可为主体填写相关的描述信息。创建主体，请参见 创建实体。说明 单击 添加主体属性 您可为主体添加多个对应属性信息。其中包括...
增量数据同步
根据字符串类型，将字符串分为时间字符串、整数字符串、浮点字符串以及字符串，您可根据该字段的实际数据进行选择。无 取数规则 非必填，只针对日期数据做取数规则，其中yyyy表示4位的年份、yy表示2位的年份、mm（MM）表示月、dd表示天、hh...
对接LDAP身份源
组映射属性 设置组映射属性字段，用于定义企业用户所归属的组关系。默认值：memberOf。说明 该字段非必选，如需填写，需与您在LDAP中设置的 组映射属性 一致。组过滤器 添加组过滤表达式，用于过滤不同分组的企业用户，以便您后续管控不同...
通过消费组读取文本日志进行模板发现
日志文本字段 选择待分析的日志字段，文本分析作业将拼接您所选择的字段的值，将其作为整体进行统计分析。如果下拉列表中不存在目标字段，您可手动输入。如果设置黑名单，算法会分析日志中所有字段除了设置的字段。如果设置白名单，算法会...
管理SLS日志的监控指标
您可以通过创建SLS日志的监控指标，将SLS日志接入云监控。SLS日志接入云监控后，您可以创建监控大盘...云监控默认复制目标监控指标的必填参数，您可以根据所需修改。单击 确定。界面提示监控指标创建成功，需要等待几分钟后才能产生监控数据。
通过数据同步功能同步SLS至湖仓版（推荐）
增量同步所需ACU数 指定任务运行的Job型资源组ACU数。最小ACU数为2，最大ACU数为Job型资源组可用计算最大资源数。建议多指定一些ACU数，可以提升入湖性能及任务稳定性。说明 创建数据同步任务时，使用Job型资源组中的弹性资源。数据同步...
filter子句
会在通过query子句查找到的文档进行进一步的过滤，以返回最终所需结果。语法说明 过滤条件格式为：field=value 过滤条件支持>、<、=、、>=、!in/notin 等常见条件运算符；以及+、-、*、/、&、^、|等算术运算符；过滤条件可以配置多个，通过...
filter子句
会在通过query子句查找到的文档进行进一步的过滤，以返回最终所需结果。语法说明 过滤条件格式为：field=value 过滤条件支持>、<、=、、>=、!in/notin 等常见条件运算符；以及+、-、*、/、&、^、|等算术运算符；过滤条件可以配置多个，通过...
长文档信息抽取
步骤一：数据准备 在「数据中心-数据集」中，用户可进行上传和管理模型任务所需数据。点击添加数据集进入上传界面，编辑数据集名称并上传相关业务数据。说明 长文档信息抽取自定义模型至少需要50张训练数据，才能获得相对较好的识别抽取...
长文档信息抽取
步骤一：数据准备 在「数据中心-数据集」中，用户可进行上传和管理模型任务所需数据。点击添加数据集进入上传界面，编辑数据集名称并上传相关业务数据。说明 长文档信息抽取自定义模型至少需要50张训练数据，才能获得相对较好的识别抽取...
查询语法
模糊查询是一种采样查询，查询机制如下所示：当您开启字段索引，且指定某个字段进行查询时，日志服务从该字段的索引数据中随机采样，返回部分结果并不是全量扫描底层数据。当您开启全文索引，且没有指定某个字段进行查询时，日志服务从全文...
数据集成服务
步骤一：新增表格存储数据源和MaxCompute数据源 此处以创建表格存储数据源为例介绍数据源的新增操作，请根据实际创建所需数据源。重要 当新增MaxCompute数据源时，只需在 新增数据源 对话框找到并单击 MaxCompute 后进行相应配置即可。进入...
常见问题
Elasticsearch Reader如何同步对象Object或Nested字段的属性？（例如同步object.field1）存储在ODPS的string类型同步至ES后，两侧缺少引号，如何处理？源端JSON类型的string是否可以同步为ES中的NESTED对象？源端数据为string"[1,2,3,4,5]...
集成Grafana告警
（可选）步骤三：编辑集成 ARMS告警管理预设了Grafana告警源与ARMS告警管理之间字段的映射，您也可以根据需要在 编辑集成 页面新增或修改字段的映射关系。此处操作将使用以下告警源作为示例。{"@timestamp":"2021-09-09T12:25:09.556Z",...
离线同步常见问题
可能原因2：等待数据集成任务执行资源 解决方案2：若日志出现长时间WAIT状态，说明当前任务运行所使用的独享数据集成资源组剩余可运行的并发数不足以运行当前任务。具体原因及解决方案详情请参见：为什么数据集成任务一直显示wait？说明 ...
智能搭建操作说明
选择数据集后，小Q会自动学习您的数据集，并生成推荐问题，您可以选择推荐问题进行数据探索，或直接输入您的分析诉求，比如您可以输入：“各区域商机数的总和”。输入完成后，点击发送，小Q将自动进行数据获取，并为您生成对应的图表。图表...
2024年3月28日V6.0产品更新公告
数据问答：反问顺序逻辑优化 功能描述：系统自动过滤了不适用于反问的数组型、范围型、计算列等部分字段，优化机器人反问问答效果。更新覆盖范围：通义版（体验版）、通义版（标准版）、通义版（企业版）、通义版（旗舰版）。数据问答：...
- 产品推荐
- 这些文档可能帮助您