常见问题
可以排查数据集中新建计算字段的表达式中是否引用了其他计算字段，注意计算字段表达式中只能使用数据库中原始字段，不能引用之前创建的计算字段，您也可以使用前计算字段的表达式来代替。日期类型的字段，在不转换文本的情况下是否支持...
配置敏感数据分类分级
分类：提供了多种敏感字段类型并定义了敏感级别，后续可通过敏感字段类型识别您的数据是否为敏感数据及数据的敏感程度如何。若内置的分类分级无法满足您的业务需要，则您可自定义分类分级。DataWorks支持编辑原内置模板中的分类分级，或...
增量数据同步
通过选择已注册的数据源端数据和目标端，实现增量任务自动建表的方式创建离线同步周期任务，本文介绍如何创建MySQL to MaxCompute离线增量数据同步周期调度的任务。前提条件 已新建工作组“信息中心（xxzx）”，具体操作，请参见 新建工作...
数据加工
说明 转换为日期字段时，支持以下3种日期类型：日期：仅日期格式，例如，yyyy-MM-dd。日期时间：日期+时间格式；例如，yyyy-MM-dd HH:mm:ss。时间：仅时间格式，例如，HH:mm:ss。您也可以自定义日期格式。值替换 在 字段列表 视图下，修改...
管理Schema
在Milvus中，Schema定义了向量数据库中数据的组织结构，包括字段名称和类型等。通过定义Schema来管理和查询数据，以支持高效的搜索和分析操作。本文为您介绍Collection和字段的Schema定义以及如何在Milvus中创建Schema。前提条件 已在本地...
数据可视化展现
操作前，请先将 dt 字段设置为日期 yyyyMMdd。城市注册人数排行榜分析 选择图标类型与数据。本场景选择 堆叠条形图，Y轴 字段为 region，X轴 字段为 计数（uid）。设置字段信息。在图示位置 设置字段信息，将 region 改为 省份，计数(uid)...
字段操作
本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时，ALTER TABLE DDL 字段操作支持的转换范围。总览 ALTER TABLE tbl_name[alter_option[,alter_option].]alter_option:{ ADD[COLUMN]col_name column_definition[FIRST...
事件检查函数
函数列表 类型 函数 说明 基本方法 e_has 判断日志字段是否存在。e_not_has 判断日志字段是否存在。支持和其他函数组合使用。相关示例，请参见 调用函数清洗数据。表达式函数 e_search 提供一种简化，类似Lucene语法的事件搜索方式。支持和...
管理敏感数据
涉敏字段-数据类型分布：可查看数据库中敏感字段的数据类型分布。数据类型即根据数据语义对数据进行的分类。默认包含如下分类：一级分类：个人信息、企业信息、位置信息等。二级分类：手机号、邮箱、银行卡等。说明 用户可自定义新的数据...
开放搜索
无法将分词字段类型配置为属性字段，例如TEXT、SHORT_TEXT等都无法配置，只支持将数值字段类型及不分词字段类型配置为属性字段，例如INT、INT_ARRAY、FLOAT、FLOAT_ARRAY、DOUBLE、DOUBLE_ARRAY、LITERAL、LITERAL_ARRAY等字段类型。...
DocumentClient类
String appName,String tableName)参数描述 参数名称 类型 描述 docsJson String 此docsJson为用户push的数据，此字段为JSON类型的字符串 appName String 应用名 tableName String OpenSearch表名 异常描述 OpenSearchException ...
新建数据模版
当消息中间件作为数据源时，需要通过创建数据模版来解释消息中间件中消息的结构。本文介绍如何新建数据模版。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产...
新建数据模版
当消息中间件作为数据源时，需要通过创建数据模版来解释消息中间件中消息的结构。本文介绍如何新建数据模版。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产...
索引结构
支持创建为索引字段的类型 INT，INT_ARRAY，TEXT，SHORT_TEXT，LITERAL，LITERAL_ARRAY，TIMESTAMP，GEO_POINT 不支持创建为索引字段的类型 FLOAT，FLOAT_ARRAY，DOUBLE，DOUBLE_ARRAY 支持创建为属性字段的类型 INT，INT_ARRAY，LITERAL，...
索引结构
支持创建为索引字段的类型 INT，INT_ARRAY，TEXT，SHORT_TEXT，LITERAL，LITERAL_ARRAY，TIMESTAMP，GEO_POINT 不支持创建为索引字段的类型 FLOAT，FLOAT_ARRAY，DOUBLE，DOUBLE_ARRAY 支持创建为属性字段的类型 INT，INT_ARRAY，LITERAL，...
事件判断
场景1：判断字段是否存在 原始日志 a:a_value b:/空字符串 SLS DSL编排 方案一（推荐）：采用 e_has 或 e_not_has。e_if(e_has("a"),e_set("has_a",true))e_if(e_has("b"),e_set("has_b",true))e_if(e_has("c"),e_set("has_c",true))e_if(e...
账户接口
函数原型 public MychainBase<ReplyTransactionReceipt>createAccount(CreateAccountRequest request)请求参数 参数 必选 类型 说明 request true CreateAccountRequest 创建账户的请求 返回字段 返回字段 字段类型 说明 result ...
Range范围查询
数值分析索引在做范围查询时，区间值后面的数字需要大于或等于前面的值，否则会报语法错误（6112,Query clause error）GEO_POINT字段类型精度范围为，经度：180~180，纬度-90~90 在ha3 schema场景下，range索引支持个数：独享型支持8个，...
Range范围查询
字段类型 说明 系统限制 INT int64类型整数,支持INT类型数据的范围查询。最多只能有4个字段为该类型。TIMESTAMP 大于等于0的整数时间戳，单位为毫秒（存储支持毫秒，查询精度只到秒级，后3位数值默认为000）。提供时间戳类型数据的范围查询...
导入MySQL数据
您可以将自建MySQL数据库或RDS MySQL数据库中的数据导入到日志服务，实现数据的查询分析、加工等操作。本文介绍导入MySQL数据的操作步骤。使用限制 目前仅支持：华东1（杭州）、华东2（上海）、华北1（青岛）、华北2（北京）、华北3...
行业算法版表结构
DOUBLE,BOOLEAN,DATETIME,STRING,DECIMAL,MAP,ARRAY,TINYINT,SMALLINT,INT,FLOAT,CHAR,VARCHAR,DATE,TIMESTAMP,BINARY,INTERVAL_DAY_TIME,INTERVAL_YEAR_MONTH,STRUCT 行业算法版表的字段类型与数据库表的字段类型的对应关系 行业算法版表 ...
OpenSearch-高性能检索版表结构
DOUBLE,BOOLEAN,DATETIME,STRING,DECIMAL,MAP,ARRAY,TINYINT,SMALLINT,INT,FLOAT,CHAR,VARCHAR,DATE,TIMESTAMP,BINARY,INTERVAL_DAY_TIME,INTERVAL_YEAR_MONTH,STRUCT OpenSearch表的字段类型与数据库表的字段类型的对应关系 OpenSearch表 ...
监控指标接口
单位毫秒 返回字段 返回字段 字段类型 说明 queryNodeMetricsStatusResponse QueryNodeMetricsStatusResponse 响应结果数据 QueryNodeMetricsStatusResponse，具体参数见下表。返回字段 字段类型 说明 info MetricsAccInfo 交易的统计指标 ...
监控指标接口
单位毫秒 返回字段 返回字段 字段类型 说明 queryNodeMetricsStatusResponse QueryNodeMetricsStatusResponse 响应结果数据 QueryNodeMetricsStatusResponse，具体参数见下表。返回字段 字段类型 说明 info MetricsAccInfo 交易的统计指标 ...
配置条件级联
条件级联配置支持同源配置和非同源配置：级联配置项 支持的筛选类型 同源级联配置 下拉列表且来源于 单个数据集 树形下拉 日期选择且来源于 数据集字段 非同源级联配置 下拉列表且来源于 单个数据集 日期选择且来源于 数据集字段 日期级联...
配置并管理实时同步任务
TABLE_NAME_DEST：目的端表名称 TABLE_NAME_SRC：源端表名称 编辑目标表 默认根据源端生成目标表结构，可能存在字段类型转换，即若目标端数据库中没有与源端一致的数据类型时，同步任务在自动创建目标表时，将自动为源端字段匹配目标端可...
创建逻辑模型：应用表
应用表是面向具体业务场景时，用于组织相同时间周期、相同维度的多个原子指标、派生指标或统计粒度的统计数据，为后续的业务查询，OLAP分析，数据分发等提供基础。本文为您介绍如何创建应用表。前提条件 已创建数据分层。数据分层是将相同...
配置HDFS输入组件
同步HDFS数据源的数据至其他数据源的场景中，您需要先配置HDFS输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置HDFS输入组件。前提条件 已创建HDFS数据源，如何创建，请参见 创建HDFS数据源。进行HDFS输入组件属性...
配置Greenplum输入组件
同步Greenplum数据源的数据至其他数据源的场景中，您需要先配置Greenplum输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置Greenplum输入组件。操作步骤 请参见 离线管道组件开发入口，进入离线管道脚本的开发页面...
配置Greenplum输入组件
同步Greenplum数据源的数据至其他数据源的场景中，您需要先配置Greenplum输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置Greenplum输入组件。操作步骤 请参见 离线管道组件开发入口，进入离线管道脚本的开发页面...
数组和嵌套类型
嵌套类型字段在写入数据表时为字符串类型，对应到多元索引嵌套字段类型的格式为JSON对象的数组，例如[{"tagName":"tag1","score":0.8},{"tagName":"tag2","score":0.2}]。重要 即使只有一个子行，也必须按照JSON数组的格式构造字符串。单层...
算子功能详解
KKV类型trigger表的trigger字段默认为右键字段（sk字段），新增“加权字段”，选择Trigger表中的其他属性字段（非STRING和非RAW类型），字段内容可作为后续召回排序的加权分使用。Recall召回 召回算子，唯一，且不可删除。支持召回表类型：...
创建逻辑模型：汇总表
汇总表用于组织一个数据域下相同时间周期、相同维度的多个派生指标的统计数据，为后续的业务查询，OLAP分析，数据分发等提供基础。本文为您介绍如何创建汇总表。前提条件 已创建数据分层。数据分层是将相同功能作用的表挂载至统一的数据层...
配置API输入组件
配置API输入组件后，可以读取API数据源中的数据至Dataphin，进行数据集成与数据开发。本文为您介绍如何配置API输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建API数据源。具体操作，请参见 创建API数据源。进行API...
配置API输入组件
配置API输入组件后，可以读取API数据源中的数据至Dataphin，进行数据集成与数据开发。本文为您介绍如何配置API输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建API数据源。具体操作，请参见 创建API数据源。进行API...
数据集组合
本文为您介绍如何创建数据集组合并用数据集组合创建图表。背景介绍 数据集组合 和 数据集关联 的区别：数据集关联：先关联数据，再进行聚合。当您的多张数据表关联性很强，在许多业务场景中都需要关联在一起进行数据分析时，建议您在数据集...
查询和分析JSON日志的常见问题
将某个字段设置为JSON类型后，如果对JSON对象中的某个叶子节点有进一步的分析需求，可以为叶子节点建立索引，这样可以加快叶子节点的查询和分析速度，但同时也会产生额外的索引费用。日志服务支持JSON对象中的叶子节点建立索引，但不支持...
创建和管理领域对象映射
说明 目前仅支持对基础数据类型且类型完全相同的字段进行映射。创建领域对象和数据对象的对象映射 登录BizWorks，在 选择平台 下拉列表中选中 建模平台。单击页面右上角 图标或其文本框区域，在下拉列表中单击目标项目名称后，单击 建模 页...
算子
AnalyticDB MySQL版 在创建分布式表时需要通过 Distributed By 来设置分布字段，Join key是否为分布字段涉及到数据的重分布类型。关于数据重分布的详情，请参见 RemoteExchange。Join算子包含了以下属性。属性 说明 Criterias Join条件，...
创建和管理结构对象映射
说明 目前仅支持对基础数据类型且类型完全相同的字段进行映射。新建结构对象映射 登录BizWorks，在 选择平台 下拉列表中选中 建模平台。单击页面右上角 图标或其文本框区域，在下拉列表中单击目标项目名称后，单击 建模 页签。在 建模 导航...
- 产品推荐
- 这些文档可能帮助您