数据库返回“Data truncation:Truncated incorrect”...

问题描述 在DMS控制台中执行变更时,出现类似如下报错:Data truncation:Truncated incorrect XXX 问题原因 数据变更:表上的字段定义和执行的SQL类型不符合,常见的场景表上定义是字符串类型,SQL中用了数值类型的写法。结构变更:需要...

过滤处理

设置 字段 level,字段值 WARNING|ERROR,表示只采集 level 字段值为 WARNING 或 ERROR 的日志。设置 字段 content,字段值 .*05\/Jan\/2023.*,表示只采集 content 字段值包含 05/Jan/2023 的日志。过滤掉不符合条件的日志...

数据类型

您在创建索引时,可将字段数据类型设置text、long、double或JSON。本文介绍各个数据类型的配置示例及注意事项。text类型 如果您要查询和分析字符串类型的字段,需在配置索引时,将字段数据类型设置text,并开启统计功能。说明 开启...

控制台错误日志说明

索引重建错误 编号 含义 触发条件 7500 系统错误-7601 定时任务执行失败 定时索引重建执行失败 数据同步错误 错误码 报错内容 使用场景 触发条件 7301 文档主键不存在,请检查后重试 校验场景 字段值为null即触发 7304 文档主键值为空,...

日志字段详情

db_name 数据库名称 db_type 数据库类型,包括MySQL、PostgrepSQL。db_version 数据库版本 instance_id 集群ID lock_time 锁等待的耗时,单位:秒。owner_id 阿里云账号ID query_sql 慢日志SQL语句 query_time 查询耗时,单位:秒。region ...

控制台错误日志说明

索引重建错误 编号 含义 触发条件 7500 系统错误-7601 定时任务执行失败 定时索引重建执行失败 数据同步错误 错误码 报错内容 使用场景 触发条件 7301 文档主键不存在,请检查后重试 校验场景 字段值为null即触发 7304 文档主键值为空,...

从RDS MySQL数据库获取数据进行数据富化

content 字段为RDS MySQL数据库表中的字段,使用该字段的去匹配日志字段,支持正则匹配、完全匹配、模糊匹配等形式,具体匹配规则请参见 e_search。单行匹配 匹配到RDS MySQL数据库表中一行数据就返回。e_search_table_map(res_rds_mysql...

数据规范

物品详情表 物品详情表至少需要有两个数据字段,其中一个字段为 主键,同时也是 分片字段,其他字段为物品属性字段。表中的记录和物品一一对应,主键 为物品的唯一标识,因此 主键 必须是唯一的。主键 的字段类型必须为 STRING。其他物品...

异常类型说明

文本分析结果数据保存在名internal-ml-log的Logstore中,您可以通过该数据中的 result.type 字段和 result.anomaly_type 字段分析异常类型。更多信息,请参见 结果字段说明。判断条件 异常类型说明 result.type 字段值为anomaly_info ...

数据可视化展现

单击页面左侧 数据设置,类 字段为 gender, 字段为 pv。将 gender 字段拖拽到 类 中。将 pv 字段拖拽到 中,并在下拉框中选择 聚合>求和。点击右上角 保存 按钮即可保存图表。确认最终图表。男女星座访问次数分析 双击原始标题,...

GenerateMergedTable-获取合并后的宽表

从 0 开始 键表名,值为层级 result.fromTable.joinMap Object 外表连接信息 键表名,值为外表连接信息 result.fromTable.joinMap.*Object 外表连接字段信息 键为字段值为外表连接字段信息 result.primaryKey String 主键字段 ...

replaceOne

object):Promise请求参数 字段名 类型 必填 说明 filter Object 是 数据库操作时的过滤条件。doc Object 是 替换的目标文档。options Object 否 控制项。options 参数定义:字段名 类型 必填 说明 upsert Boolean 否 如果查找不到对应文档...

日志字段详情

db 数据库名。fail SQL执行是否出错。如果是MySQL实例或SQL Server实例,则执行成功时,字段值为0,除0之外的其他都表示失败。如果是PostgreSQL实例,则执行成功时,字段值为0000,除0000之外的其他都表示失败。client_ip 访问RDS实例...

Map映射函数和运算符

示例 日志服务数据加工日志中 etl_context 字段值和 progress 字段值map类型,您可以使用map_concat函数将这两个字段值合并一个Map。字段示例 etl_context:{ project:"datalab-148*6461-...

新建数据探查任务

使用场景 集成任务中来源表的核心字段为JSON类型,需要使用 get_json_object 函数提取关键字段信息后再同步到目标数据表。您可以为目标表创建一个自动数据探查任务,指定在该集成任务运行成功后触发探查,校验该核心字段的解析结果是否符合...

查询语法

long或double类型 只有设置字段数据类型long或double后,才能通过数值范围查询该字段。如果字段数据类型不被设置double、long或者查询时数值范围的语法错误,那么日志服务会按照全文查询方式进行查询,这样查询到的结果可能与...

结果字段说明

result_type 字段为 cluster_info 当 result_type 字段为 cluster_info 时,result 字段中包含日志类别信息,内容如下:"result":{"cluster_id":"xxxx","cluster_pattern":"xxxx","cluster_active_age":120,"cluster_alive_age":150,...

流程控制函数

函数示例 如果 content 字段值为 123,则先删除 age 字段和 name 字段,然后将 content 字段设置 ctx。原始日志 content:123 age:23 name:twiss 加工规则 e_if(e_search("content=123"),e_compose(e_drop_fields("age|name"),e_...

Sensors Data(神策)数据

示例"dataConverters":[{"type":"Str2BigDecimal"}]无 IfNull2Default 当字段值为null时,将字段值设置default参数中定义的常量,并支持根据IfNull2Default转换器中嵌套的转换器类型,进一步将字段常量转换目标数据类型。...

字段值映射处理

您在使用Logtail采集日志时,可以使用processor_dict_map插件进行字段值映射。本文介绍processor_dict_map插件的参数说明和配置示例。重要 表单配置方式:采集文本日志和容器标准输出时可用。JSON配置方式:采集文本日志时不可用。功能入口...

查询和分析JSON日志的常见问题

request 字段为订单请求信息,JSON格式。一个请求中包含一个用户的多个订单,订单中包含购买的商品和支付总价。response 字段为订单处理结果。请求成功时,response 字段为SUCCESS。请求失败时,response 字段为JSON格式,包含errcode...

管理问题数据

数据质量支持您保留数据质量监控过程中从数据表中发现的非预期数据,帮助您快速排查、定位问题,提升数据质量。本文您介绍如何管理数据质量监控过程中从数据表中发现的非预期数据。背景信息 问题数据数据质量支持在部分规则校验不通过...

如何降低索引流量费用?

例如:对 request_uri 字段设置了索引(text类型),字段值为/request/path-2/file-7,则字符串 request_uri 和/request/path-2/file-7 都会被计入在索引流量中。仅对关键字段设置索引 如果原始日志中包含了大量字段信息,其中只有部分字段...

配置MaxCompute输出

例如:配置MaxCompute表分区字段值来源源端字段A,当A字段值为aa时,实时同步会将数据写入到MaxCompute表对应的aa分区中,当A字段值为bb时,实时同步会将数据写入到MaxCompute表对应的bb分区中。单击工具栏中的 图标。

逻辑运算符

查询和分析语句*|SELECT status=200 AND request_method='GET' 查询和分析结果 SPL 如果status字段值为200且request_method字段值为GET,则返回true。否则返回false。SPL语句*|extend a=status=200 AND request_method='GET' SPL结果 OR...

updateMany

示例 在 users 集合中查找所有 name 字段值为jerry的记录,并将其 age 字段更新10。mpserverless.db.collection('users').updateMany({ name:'jerry' },{$set:{ age:10 } }).then(res=>{}).catch(console.error);在 users 集合中查找所有...

updateOne

示例 在 users 集合中查找 name 字段值为jerry的第一条记录,并将其 age 字段更新10。mpserverless.db.collection('users').updateOne({ name:'jerry' },{$set:{ age:10 } }).then(res=>{}).catch(console.error);在 users 集合中查找 ...

Kafka数据接入

如果 写入模式 update,选择 none 或 row 删除模式,当Value所有字段值空值时,数据作为脏数据处理。当Value部分字段值为空值时,自动忽略空值,将非空值写入 表格存储 数据表。选择 column 或 row_and_column 删除模式,当Value...

配置说明

Struct中选择的字段必须支持的数据类型,字段会根据数据类型映射表转换Tablestore数据类型写入数据表。Map中的类型也必须支持的数据类型,支持的数据类型同Struct,最终会被转换binary类型写入数据表。Kafka和Tablestore的数据...

导入MySQL数据

您可以将自建MySQL数据库或RDS MySQL数据库中的数据导入到日志服务,实现数据的查询分析、加工等操作。本文介绍导入MySQL数据的操作步骤。前提条件 已创建MySQL数据库,并已设置具备最小读权限的数据库账号。在MySQL数据库中添加白名单。请...

查看内置规则模板

去重后的count数与1天、1周和1个月前的样本(字段为个数)比较进行比较,即固定校检。空值个数,固定。取该字段的空值数与固定进行比较。说明 是否为空值,是通过转换为SQL的is null进行判断。空值个数/总行数,固定。空值的...

创建文件数据

数据字段 文件上传至数据库后,会以数据库表的形式存储,数据库字段名称 和 字段类型 生成数据库表的字段名和类型,而 文件字段上传文件的表头名,会变成数据库表的字段备注。您可以在文件上传时,修改 文件字段名、数据库字段名称 ...

新建查询控件

查询值字段 选项来源数据集中要与关联字段匹配的字段。显示名称字段 选项来源数据集中要进行筛选的字段,即查询控件中显示的字段。说明 当 显示名称字段 与 查询字段 一致时,选择 查询字段 后,系统将自动填入显示名称字段。...

日志字段详情

字段 说明_topic_日志主题,固定mongo_slow_log audit_type 日志类型,固定slowop coll 数据集合 db 数据库名称 docs_examined 文档扫描行数 instanceid MongoDB实例ID keys_examined 索引扫描行数 latency 消耗时间 optype 操作类别 ...

过滤日志

参数 类型 是否必选 说明 Include JSON Object 否 Key日志字段,Value字段值匹配的正则表达式。键对之间与关系。如果日志字段符合对应的正则表达式,则采集该日志。Exclude JSON Object 否 Key日志字段,Value字段值...

配置组件交互

id、city 数据库中的字段,test_id_3 为数据库中数据表的表名。API模式 https://api.test?id=:income&city=:mycity 说明 income 和 mycity 您配置的回调ID,id 和 city 数据库中的字段。高级功能 设置自定义字段 选择数字翻牌器...

新建普通维度逻辑表

引入字段表引入新字段。支持从 建表语句引入 和 从表引入。具体操作,请参见 为维度逻辑表引入字段。添加字段:支持添加 数据字段 和 分区字段,您可根据业务情况编辑字段的 名称、说明、数据类型、字段类别、关联维度、字段标准、字段...

查询和分析

字段值大小 单个字段值最大512 KB,超出部分不参与查询。如果单个字段长度大于512 KB,有一定几率无法通过关键词查询到日志,但数据仍然是完整的。操作并发数 单个Project支持的最大查询操作并发数100个。例如100个用户同时在同一个...

通用参考

可以直接与数字500做比较 SPL表达式null处理 产生null SPL处理数据过程中,如下两个场景将产生null:SPL表达式中使用到的字段在输入数据中不存在时,则将其null进行计算。SPL表达式计算过程中出现异常,其计算结果即null...

字符串函数

示例 将 region 字段和 request_method 字段拼接一个字符串。字段样例 region:cn-shanghai time:14/Jul/2021:02:19:40 查询和分析语句(调试)*|SELECT concat(region,'-',time)查询和分析结果 from_utf8函数 from_utf8函数用于将...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 云数据库 MongoDB 版 云数据库 RDS 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用