日志字段详情
字段 说明_topic_日志主题 redis_audit_log：DB节点的审计日志 redis_proxy_audit_log：Proxy节点的审计日志 account 数据库账号名称 command 执行的Redis命令 db 数据库名称 extend_information 附加信息 instanceid Redis实例ID ip IP...
DMS控制台中执行数据变更任务时提示“Duplicate ...
DML语句 通过添加字段的别名进行变更：您可以参见以下SQL语句，通过 as 给相同的字段添加别名即可。insert into table_name(gmt_create,gmt_modified,.)select now()as gmt_create,now()as gmt_modified,.from XX 跳过行数校检进行变更：在...
管理数据库账号密码
连接数据库的具体操作步骤请参见 连接数据库集群。执行以下SQL语句来配置账号密码的过期时间。ALTER USER 'username'@'hostname' PASSWORD EXPIRE INTERVAL N DAY;其中，username 为目标账号名称。hostname 为目标账号所在的主机名称。N 为...
聚合函数
示例 将 etl_context 字段的值（map类型）聚合后，随机返回其中一个值（map类型）。字段样例 etl_context:{ project:"datalab-148*6461-cn-chengdu" logstore:"internal-etl-log" consumer_group:"etl-83*4d1965"consumer:"etl-b2d40ed*c8d...
LOB大字段独立冷存
本文介绍如何将一张表中的某个LOB字段从基表中分离出来并转为冷存，同时访问透明，以达到单张表中按字段维度进行冷热分离。操作步骤 创建包含大字段的表。这里以text类型为例，其余类型大字段使用方法类似。db01=>CREATE TABLE blob_table...
条件表达式
示例 判断 client_ip、host 两个字段的值是否相同。当不相同时，返回 client_ip 字段的值。查询和分析语句*|SELECT NULLIF(client_ip,host)查询和分析结果 TRY表达式 TRY表达式用于捕获异常信息，使得系统继续执行查询和分析操作。语法 TRY...
字段提取模式
分类 函数 mode的默认值 字段值赋值函数 e_set overwrite 字段值提取函数 e_regex fill-auto e_json fill-auto e_kv fill-auto e_csv、e_psv、e_tsv fill-auto e_kv_delimit fill-auto e_anchor overwrite e_syslogrfc overwrite 映射富化...
删除有约束的列
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于删除不同约束下字段的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型。删除主键（PRIMARY KEY）约束下的列 如果删除的 主键列 中包含下表中的字段类型...
创建元数据
在基于HBase、Elasticsearch或MongoDB数据源创建服务单元之前，需要先创建对应数据源中数据表的元数据，以实现通过元数据确定数据源中数据表的结构。后续您可以通过该元数据读取到对应数据源的数据。本文为您介绍如何创建HBase、...
数据探查
数据输入、合并、清洗加工、聚合和关联节点支持数据探查。本文为您介绍数据探查的操作。入口 您可以通过图示的方式进入数据探查界面。说明 合并、清洗加工、聚合和关联节点进入 数据探查 的方式同上。预览设置 数据探查支持快速采样、随机...
SLO CRD字段说明
本文介绍SLO CRD字段的相关说明。示例文件 以下示例文件将为default命名空间下的httpbin服务生成服务可用性SLO。以下示例代码中，目标值为99.9%，持续时间为30天，配置Page和Ticket两个等级的告警，添加了自定义标签和注解。apiVersion:...
LOD函数
字段表达式：lod_fixed{[customer_name]:MIN(DATE_FORMAT([buy_date],'%Y'))} 含义：求出每个用户最早的下单时间，粒度为年，粒度可以随意调整，只要使用符合您的数据库的语法的日期函数就可以。创建图表。本例中，我们创建一个线图。将上...
SHOW TABLES
SHOW TABLES语句用于展示数据库中满足查询条件的所有表。在使用CREATE TABLE语句建表前，您可以通过SHOW TABLES语句查看当前数据库已存在的表，避免重名报错。适用引擎 SHOW TABLES语法适用于宽表引擎和时序引擎。语法 show_tables_...
智能搭建操作说明
展示数据在不同类别下的小计数据“开启小计，按 渠道 汇总”添加目标 为您的KPI添加目标，以展示进度“帮我添加一个 十万 的目标”“帮我给 销售额 设置一个 十万 的目标值”修改组合图字段展示样式 修改字段的展示样式，可切换线、柱、面...
字段设置
拖拽 显示字段 某个字段的字段顺序或者单击，然后单击 向左移、向右移，可以调整字段在表格的排序。单击 显示字段 某个字段最右侧的 或者单击，然后单击 隐藏，可以去除当前显示字段。单击 清空，可以清除添加的显示字段，日志内容将展示...
字符串函数
字段样例 request_uri:/request/path-1/file-9 查询和分析语句（调试）*|SELECT split(request_uri,'/')查询和分析结果 示例2：使用正斜线（/）将 request_uri 字段的值拆分成3个子串，并返回子串的集合。字段样例 request_uri:/request/...
常见错误码参考
建议修改相关连接属性或者使用USE语句切换当前使用的Database。3024 HY000 Query execution was interrupted,maximum statement execution time exceeded 查询超时，请重试。若重试依然超时，请联系Lindorm技术支持寻求解决方法。3025 HY...
DMS分类分级扫描原理介绍
DMS分类分级扫描能够对数据库中的敏感数据进行检测，并自动为符合识别规则的字段打上相应的分类分级标签，还可以保护高敏感等级的字段，并将敏感字段直观地展示在识别结果中。本文介绍DMS敏感数据保护分类分级扫描功能的原理。原理介绍 DMS...
数组函数和运算符
示例 以数组形式返回 status 字段的值。查询和分析语句*|SELECT array_agg(status)AS array 查询和分析结果 array_distinct函数 array_distinct函数用于删除数组中重复的元素。语法 array_distinct(x)参数说明 参数 说明 x 参数值为array...
设置逻辑表DDL语句
DDL主要定义了数据表的表结构以及字段的数据类型，使应用程序操作数据库时，能正确的产生和提取数据类型和结构。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产...
SPL指令
SPL语句*|parse-json-path='$.body' content 输入数据 content:'{"body":{"a":1,"b":2}}' 输出结果 content:'{"body":{"a":1,"b":2}}' a:'1' b:'2' 示例3：指定字段值输出模式为preserve，对于已有字段，保留原始值。SPL语句*|parse-json-...
使用说明
如果上述语法中省略了[POLARDB_WRITE_NODE master_id]，那么创建数据库时就会参考 loose_innodb_mm_default_master_id 参数的值来指定创建数据库的RW节点。如果 loose_innodb_mm_default_master_id 参数的值为0，系统则随机指定一个RW节点...
设置逻辑表DDL语句
DDL主要定义了数据表的表结构以及字段的数据类型，使应用程序操作数据库时，能正确的产生和提取数据类型和结构。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 ...
RDS MySQL如何保证数据库字符编码正确
概述 本文主要介绍RDS MySQL如何保证数据库字符编码正确。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置与数据修改，...
Deduplication
不兼容的修改 新增、删除、修改partition by key或者partition by key涉及字段的计算逻辑发生变化，该修改属于不兼容修改。原始SQL。select a,b,c from(select*,row_number()over(partition by a order by proctime)as rk from MyTable)...
findOne
object):Promise请求参数 字段名 类型 必填 说明 query Object 否 数据库操作时的查询条件。options Object 否 控制项。options 参数定义：字段名 类型 必填 说明 skip Number 否 跳过的文档数量。sort Object 否 指定排序的字段，并使用 1...
配置流程
例如A表中包含字段1、字段2和字段3，B表中包含字段2、字段3和字段4，对两张表通过做JOIN操作后，需要输出字段2和字段3，则需要在目标库侧创建做JOIN操作后的C表，C表中包含字段2和字段3。由于ETL功能暂不支持全量数据同步，所以您只能对...
查询原始日志
在 原始日志 页签，您可以查看原始日志信息。...支持在过滤语句中插入 可选参数域，将对应字段的值作为过滤条件。例如单击输入${_topic_}，跳转后的日志库的查询语句中会拼接 AND 后查询。变量 暂不支持配置变量。单击 确认。
find
字段名 类型 必填 说明 query Object 否 数据库操作时的查询条件。options Object 否 控制项。options 参数定义：字段名 类型 必填 说明 limit Number 否 查询的文档数量限制，最大值和默认值均为500。skip Number 否 跳过的文档数量。sort...
使用数据实验室
您可以根据需求修改部分字段值及时间范围等配置，数据模拟任务会根据您的配置产生数据。目前提供网站访问日志和数据库审计日志两种场景。数据集：来自于各种场景的真实日志数据，目前提供新冠疫情数据集场景。操作步骤 此处以数据库审计...
EXECUTE
在一个数据库会话中，预备语句的名称必须唯一。语法 EXECUTE name[(parameter[,.])]参数 name 要执行的预备语句的名称。parameter 给预备语句的参数的实际值。这必须是一个能得到与该参数数据类型（在预备语句创建时决定）兼容的值的表达式...
通用参考
数据错误不会影响SPL整个执行过程，SPL语句仍会返回处理的结果，出错的字段的值为 null 值。可以根据实际情况忽略此类错误。运行超时 SPL语句中包含不同的指令，不同的指令在不同的数据场景下消耗的时间不同。当SPL整个语句的执行时间超过...
DataSource
示例 {"seperator":"|"} 结构 字段 类型 描述 seperator String 分隔符 KeyValueExtractor 从KV格式的来源字段中提取指定的键值，提取出来的键值作为目标表字段的内容，只能抽取某个key中的值。分隔符可以不填。示例 {"key":"my_field",...
配置行列自动分流
如果您的业务中，OLAP类型的查询与OLTP类型的查询是通过同一个应用程序访问数据库，此时如果要实现分流，您需要设置集群地址的读写模式，并开启自动分流功能。自动分流功能开启后，数据库代理基于业务流入的SQL语句的预估执行代价来实现...
配置SAP Table输入组件
如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入字段 移入到 未选的输入字段。RFC选择RFC_READ_TABLE以外的RFC。参数 描述 步骤名称 即SAP Table输入组件的名称。Dataphin自动...
配置SAP Table输入组件
如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入字段 移入到 未选的输入字段。RFC选择RFC_READ_TABLE以外的RFC。参数 描述 步骤名称 即SAP Table输入组件的名称。Dataphin自动...
DataSource
示例 {"seperator":"|"} 结构 字段 类型 描述 seperator String 分隔符 KeyValueExtractor 从KV格式的来源字段中提取指定的键值，提取出来的键值作为目标表字段的内容，只能抽取某个key中的值。分隔符可以不填。示例 {"key":"my_field",...
DataV6.0数据集介绍
介绍 DataV数据集支持多种数据源的接入，如数据库、Excel表格文件等，通过对数据的结构化存储和元数据的汇集整理，提供高效实用的数据建模能力，可用的算子包括常见的数据聚合函数、按不同时间粒度划分和地理信息处理等。创建 登录 DataV...
几何求交
本文介绍几何求交算子的使用方法。用途 几何求交算子用于计算主表与关联节点...如果2个来源节点中存在相同的字段名称或者字段代码，系统默认对重名的字段名称或者字段代码添加后缀进行重命名，用户也可以手动修改重名的字段名称或者字段代码。
统计聚合
字段值分组 根据一个字段的值对查询结果进行分组，相同的字段值放到同一分组内，返回每个分组的值和该值对应的个数。说明 当分组较大时，按字段值分组可能会存在误差。范围分组 根据一个字段的范围对查询结果进行分组，字段值在某范围内放...
- 产品推荐
- 这些文档可能帮助您