索引、属性、字段作用详解
通俗说就是数据库的名字 字段 在es中索引创建完了之后，是类型，类型之后，是字段 通俗说就是某个表里面的属性的名称 属性 字段的类型（string、int、double.）字段的类型（string、int、double.）OpenSearch：名词 OpenSearch解释 与关系...
Quick BI维度或度量字段如何重命名
产品名称 Quick BI 产品模块 仪表板 概述 本文主要介绍Quick BI中如何对报表中显示的数据字段重命名。问题描述 根据业务需求在报表显示的字段要重命名，但是不知道如何对仪表板中的度量字段进行重命名为自定义的别名？问题原因 没有找到...
手动新建逻辑表
通过手动新建逻辑表，建立您期望的数据表样式和字段，并支持将逻辑表物理化至云计算资源中，为后续...说明 删除逻辑表不会同时删除数据库中已生成的物理表。后续步骤 创建完逻辑表以后，需要将逻辑表物理化，更多信息，请参见 物理化逻辑表。
数据规范
物品详情表 物品详情表至少需要有两个数据字段，其中一个字段为 主键，同时也是 分片字段，其他字段为物品属性字段。表中的记录和物品一一对应，主键 为物品的唯一标识，因此 主键 必须是唯一的。主键 的字段类型必须为 STRING。其他物品...
手动新建逻辑表
通过手动新建逻辑表，建立您期望的数据表样式和字段，并支持将逻辑表物理化至云计算资源中，为后续...说明 删除逻辑表不会同时删除数据库中已生成的物理表。后续步骤 创建完逻辑表以后，需要将逻辑表物理化，更多信息，请参见 物理化逻辑表。
配置资产数据
本文档介绍配置资产数据的方法，以及资产数据面板的内容，包括数据接口、数据源、数据过滤器和数据轮询频次等。操作步骤 登录 DataV控制台。在 我的可视化 页面，单击您创建的可视化应用项目上方的 编辑 按钮。在画布编辑器页面，单击 图层...
创建逻辑模型：明细表
明细表用于存储大量能够体现业务活动状况的实际数据或详细数值，是数据聚合后依据某个维度生成的结果表。例如，分析产品销售情况，您可以创建销售明细表，用来存储产品维度（作为外键）、时间维度（作为外键）以及销售总量。本文为您介绍...
同步时源库为Oracle的注意事项及限制
如果同步的源数据库类型为自建Oracle，您需要在配置具体的同步任务前，参考本文的注意事项及限制，以保障数据同步任务的正常运行。源库为Oracle的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：说明 在库表结构同步过程中...
5.数据展示和修改
文本介绍如何进行字段数据的展示和修改。系统组件展示和修改数据 目前我们的组件还没有使用平台的数据，在此之前，我们先以系统组件为例，看下系统组件如何展示和修改数据。首先我们创建一个实体来表示业务数据。姓名字段是我们要展示和...
场景管理器
数据映射 当您需要自定义图表字段配置时，可以在 数据映射 模块设置不同的字段映射内容，将这些字段映射到组件对应的字段上。无需修改数据源中的字段，就可以实现数据的实时匹配。也可以单击 图标对字段分别样式配置。过滤器 打开 过滤器，...
数据脱敏
在数据集中设置需要脱敏的字段，系统将该字段中的敏感数据进行模糊化处理，使得该字段在仪表板、电子表格或自助取数中以脱敏的形式展示，保护数据安全。前提条件 已创建数据集，请参见 创建并管理数据集。脱敏规则及效果展示 说明 本文档仅...
配置图表数据
批量配置字段样式 ② 筛选数据 ③ 定时刷新数据 ④ 设置数据展示结果 ⑤ 新建计算字段 ⑥ 新建分组维度 ⑦ 新建占位符 ⑧ 复制转维度 ⑨ 编辑数据集 ⑩ 切换数据集 ⑪ 上传本地文件 ⑫ 新建数据集 批量配置字段样式 当有多个字段数据需要...
系统表
字段说明：字段 说明 schema 数据库名称。last_active_time 上次活跃时间。create_time 建立连接的时间。connection_id 连接ID。ip_port AnalyticDB for MySQL 接入层节点IP和端口号。access_ip 客户端IP。user 用户名。kepler_persist_...
配置图表数据区
您可以在数据加工页面，进行以下操作：切换数据集（①）编辑数据集（②）新建计算字段（③）新建分组维度（④）新建维度组（⑤）新建占位符（⑥）预览数据集中的数据（⑦）上传本地文件（⑧）新建数据集（⑨）可视化配置 在仪表板内完成...
搜索增强
是否关联文件数据 当接入数据源同时存在文件类型及数据库类型数据时，且“文件路径字段”和“文件类型字段”都是数据库中的字段，需要开启“关联文件数据”功能，可以参考最佳实践说明。开启后，系统会自动校验，若源数据表中字段和系统...
通用参考
status字段的初始类型为VARCHAR|where cast(status as BIGINT)>=500-将status字段的类型转为BIGINT，再进行比较 类型保持 在SPL处理数据过程中，使用extend指令对字段进行数据类型转换后，后续的处理逻辑将沿用转换后的数据类型。...
Quick BI数据集报错“Column 'xxx' cannot be ...
解决方案 根据报错提示的字段名称，或者批量排查（报错信息一次只报一个字段名称），找到已经不存在的字段（可能数据库里更新了表结构，也可能修改过建数据集的SQL，导致该字段被删除，或者改了其他名字），删除该字段，然后保存后再预览...
填报控件
说明 通过 数据集 方式创建日期字段的默认格式YYYYMMDD，日期控件 的默认格式为YYYY-MM-DD，报表内日期格式不同时将会执行失败，若您需要达成格式一致，请参考下图：报表左侧悬浮栏内，单击 编辑数据集表格，选中 日期字段 中 选项，在 ...
自定义KV模板
数据版式固定：业务数据类型多，但每一类型数据字段明确可标识且Key-Value位置固定，例如学生证、结婚证、银行转账单等资质审核、财务报销、业务数据结构化等场景。相关链接 OCR文档自学习：控制台入口 自定义KV模板开发指南：在线调试，...
自定义KV模板
数据版式固定：业务数据类型多，但每一类型数据字段明确可标识且Key-Value位置固定，例如学生证、结婚证、银行转账单等资质审核、财务报销、业务数据结构化等场景。相关链接 OCR文档自学习：控制台入口 自定义KV模板开发指南：在线调试，...
使用限制
3.40282e+038 DOUBLE+-1.79769e+308 LITERAL 65535个字节 TEXT 65536个词 SHORT_TEXT 100字节，超过后截断 LITERAL_ARRAY 字段长度总体不能超过65535个字节（算上元素之间的2字节的系统内置分隔符），如果超过，则会截断到最大满足长度限制...
数据上传
DataWorks的数据上传功能支持将本地文件、数据分析的电子表格、OSS文件等数据上传至MaxCompute、EMR Hive、Hologres等引擎进行分析及管理，为您提供便捷的数据传输服务，助力您快速实现数据驱动业务。本文为您介绍如何使用数据上传功能上传...
字段加工
用途 字段加工算子可以将节点的数据进行逻辑加工，然后作为输出字段在之后的节点使用。适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 是 使用说明 加工逻辑 对于需要加工的字段，需要输入字段...
多轮对话搜索
是否关联文件数据 当接入数据源同时存在文件类型及数据库类型数据时，且“文件路径字段”和“文件类型字段”都是数据库中的字段，需要开启“关联文件数据”功能，可以参考最佳实践说明。开启后，系统会自动校验，若源数据表中字段和系统...
配置威胁检测规则
在威胁检测数据库匹配指定字段，如果命中返回true。NOT_IN_IP_DATASET：与数据集的主键进行匹配。需要指定数据集的主键为IP类型字段，支持IP地址和CIDR格式。IN_IP_DATASET：与数据集的主键进行匹配。需要指定数据集的主键为IP类型字段，...
动态文本组件
日期格式 填写要求参照dateformat（日历时间）要求 说明 当内容字段选择扩展属性A~Z时，请确保商品属性中对应扩展属性被填写，且按照Timestamp（时间戳）数据格式要求填写 换行特性 由于字段内容长度由不同商品属性决定，且价签显示空间...
线热力层（v2.x版本）
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
在数据管理DMS中执行SQL语句时报“Incorrect prefix ...
问题描述 通过数据管理DMS对使用InnoDB引擎的MySQL实例创建或变更前缀索引（Index Prefixes）时，系统提示以下错误。Incorrect prefix key;the used key part isn't a string,the used length is longer than the key part,or the storage ...
常见问题
可以排查数据集中新建计算字段的表达式中是否引用了其他计算字段，注意计算字段表达式中只能使用数据库中原始字段，不能引用之前创建的计算字段，您也可以使用前计算字段的表达式来代替。日期类型的字段，在不转换文本的情况下是否支持...
使用限制
字段相关 项 值 INT64-2^63~2^63-1 FLOAT+-3.40282e+038 DOUBLE+-1.79769e+308 LITERAL 65535个字节 TEXT 65536个词 SHORT_TEXT 100字节，超过后截断 LITERAL_ARRAY 字段长度总体不能超过65535个字节（算上元素之间的2字节的系统内置分隔符...
字段分析
列表页上，默认是展示每个字段的概要信息，包括字段名、总数、占比数、唯一数、均值或平均长度（对于text类型字段是展示平均长度，对于long、double类型字段是展示均值），以及Top值的分布情况。单击每个字段左侧的，可以查看每个字段分析...
0002-00000408
以上示例中该字段取值为 1，即字符长度为1，不符合该字段字符长度要求。解决方案 确保 Authorization 字段完整且计算正确。GET/test.txt HTTP/1.0 Date: Tue,20 Dec 2022 08:48:18 GMT Host:oss-example.oss-...
结构设计
校验某些字段是否存在 保存编辑，校验字段 新增字段，禁止字段名为关键字 新增字段，字段必须填写备注 新增字段，限制字段名大小写 原有表新增非空字段必须明确指定默认值 原有字段，可空改为非空必须明确指定默认值 限制新增主键字段必须...
新功能发布记录
2020年6月 新功能/特性 简要概述 类别 文档 支持同步数据到Hologres 支持同步数据到Hologres 数据同步 创建同步Hologres 兼容Kafka 可以使用原生Kafka客户端将数据写入DataHub 开发指南 兼容Kafka Canal插件 使用canal将MySql的增量数据...
Canal
canal-json.database.include 选填(none)String 一个可选的正则表达式，通过正则匹配Canal记录中的database元字段，仅读取指定数据库的changelog记录。正则字符串与Java的 Pattern 兼容。canal-json.table.include 选填(none)String 一个可...
配置LogHub（SLS）输入
背景信息 LogHub（SLS）实时同步读取插件，会自带以下元数据字段：LogHub（SLS）实时同步字段 数据类型 说明_time_STRING SLS保留字段：_time_写入日志数据时指定的日志时间，unix时间戳，单位为秒。source_STRING SLS保留字段：_source_...
离线同步常见问题
实例ID形式添加数据源：在数据库名后拼接，格式为 database?com.mysql.jdbc.faultInjection.serverCharsetIndex=45 。修改数据库相关的编码格式为utf8mb4。例如，在RDS控制台修改RDS的数据库编码格式。说明 设置RDS数据源编码格式命令：set...
查询及分析日志
通过实时查询与分析采集的日志数据，您可以准确把握网络活动的具体情况，并识别出流量的异常情况，从而实现安全监控的加强和安全事件响应效率的提升。本文将指导您如何运用查询和分析语句操作日志分析工具，并展示如何查阅和理解查询结果。...
计算列配置
计算列配置规则 配置内容 新增计算列时，需要配置以下内容：英文字段名：若数据源为数据库，即数据库中的字段名称；若数据源为表格文件，指根据表格模板填写的英文字段名称或系统根据表格文件翻译的英文名称。字段业务含义：是对字段所表示...
数据建模
字段值长度准确性校验 对应分区，字段值长度与期望的固定值进行比较，全部符合规则则通过。比较方式默认为。字段类型准确性校验 取表字段的字段类型元数据与期望的类型进行比较，符合规则则通过。标准字典值校验 对应分区，字段值与对应...
- 产品推荐
- 这些文档可能帮助您