01模型添加质量规则
已给逻辑表“ods_base_yhkh_demo_di”的对应字段关联标准数据元，具体操作，请参见 配置逻辑表关联字段标准。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择工作组。左侧导航栏，...
配置离线数据集成节点
功能特性 不限制来源表和目标表数据库类型。支持字段映射，包含修改源表和目标表字段的命名和类型映射。可配置并发迁移数据。支持通过WHERE语句，对迁移数据进行预过滤。支持前置及后置SQL语句，在导入数据前后实现数据处理。使用限制 系统...
行业算法版表结构
DOUBLE,BOOLEAN,DATETIME,STRING,DECIMAL,MAP,ARRAY,TINYINT,SMALLINT,INT,FLOAT,CHAR,VARCHAR,DATE,TIMESTAMP,BINARY,INTERVAL_DAY_TIME,INTERVAL_YEAR_MONTH,STRUCT 行业算法版表的字段类型与数据库表的字段类型的对应关系 行业算法版表 ...
OpenSearch-高性能检索版表结构
DOUBLE,BOOLEAN,DATETIME,STRING,DECIMAL,MAP,ARRAY,TINYINT,SMALLINT,INT,FLOAT,CHAR,VARCHAR,DATE,TIMESTAMP,BINARY,INTERVAL_DAY_TIME,INTERVAL_YEAR_MONTH,STRUCT OpenSearch表的字段类型与数据库表的字段类型的对应关系 OpenSearch表 ...
逻辑表表达式
数据库及联表规则 规则 举例说明 相同名称规则 db_[00-31].test：在db_00到db_31数据库下都定义test表。平均分配规则 db_[00-31].test[0000-1023]：在db_00到db_31数据库下一共存在1024张表。枚举规则 规则 举例说明 简单枚举 test_[1,3,6,...
从RDS MySQL数据库获取数据进行数据富化
time:1563436326 data:123 city:nanjing province:jiangsu 加工规则 根据指定的RDS MySQL数据库表中的字段值（例如 content 字段的值）去匹配日志字段，其中指定的RDS MySQL数据库表中的字段值为Key-Value形式，Key对应日志字段，Value为正...
DB-IN
DB-IN算法组件从所选数据源内选表选字段。计算逻辑原理 根据用户填写的数据源连接信息，调用选择数据源的接口获取表字段schema。使用流程说明 先在“数据源管理”页定义好数据源连接信息，然后将组件拖入画布，选择相应数据源的表字段。...
关联数据
管理对象组 对象是指数据库中特定表和字段的集合。对象组功能可以帮您管理数据库中表和字段的集合。如果自定义规则需要对固定的数据库对象生效，您可以通过新增对象组，直接在自定义规则中使用新增对象组。以下步骤介绍如何新增对象组。...
DataSource
instance-id","dbName":"my_db","dbTableName":"my_table","dbUser":"my","dbPassword":"my_passwd","filter":"","autoSync":true } 结构 字段 类型 描述 instanceId String 实例ID dbName String 数据库名 dbTableName String 数据库表名 ...
DataSource
instance-id","dbName":"my_db","dbTableName":"my_table","dbUser":"my","dbPassword":"my_passwd","filter":"","autoSync":true } 结构 字段 类型 描述 instanceId String 实例ID dbName String 数据库名 dbTableName String 数据库表名 ...
MongoDB数据导入
返回结果：+-+|CAST(_id AS string)|+-+|641002ad883a73eb0d7291a7|+-+说明 如果要将ObjectId字段导入到 AnalyticDB MySQL 中，需要先创建用于存储ObjectId字段的数据库和数据表，具体操作，请参见 导入MongoDB非嵌套文档 中的步骤5~7。...
数据源插件说明
OpenSearch中的数据，既支持通过API/SDK/上传界面的方式导入，也支持直接从已有的云数据库进行同步。如果选择通过API或SDK来上传数据，可以参照API手册直接上传，不支持本文中的插件配置。如果选择同步云端数据的方式，则需要将数据源的...
数据源插件说明
OpenSearch中的数据，既支持通过API/SDK/上传界面的方式导入，也支持直接从已有的云数据库进行同步。如果选择通过API或SDK来上传数据，可以参照API手册直接上传，不支持本文中的插件配置。如果选择同步云端数据的方式，则需要将数据源的...
数据类型映射
多元索引的字段值来源于数据表中同名字段的值，两者的数据类型必须相匹配，多元索引字段数据类型与数据表中字段数据类型的匹配关系请参见下表。注意 表中的类型必须一一对应，否则数据会被当做脏数据丢弃，尤其是Geo-point和Nested拥有各自...
质量规则模板类型
有效性 字段格式校验 用于识别表达式或者正则表达式对单字段的格式进行校验。字段长度校验 用于对单字段的长度进行校验。字段值域校验 用于对单字段的取值范围进行校验。码表参照对比 支持对单字段是否在码表中进行判断。数据标准码表参照...
质量规则模板类型
有效性 字段格式校验 用于识别表达式或者正则表达式对单字段的格式进行校验。字段长度校验 用于对单字段的长度进行校验。字段值域校验 用于对单字段的取值范围进行校验。码表参照对比 支持对单字段是否在码表中进行判断。数据标准码表参照...
FieldSchema
重要 字段名称必须与数据表中的字段名称相同。field_type FieldType 是 字段类型。更多信息，请参见 数据类型映射。重要 多元索引的字段类型必须与数据表中字段类型相匹配。analyzer string 否 分词器类型。默认值为单字分词。当字段类型为...
配置Kafka输出组件
配置Kafka输出组件，可以将外部数据库中读取数据写入到Kafka，或从大数据平台对接的存储系统中将数据复制推送至Kafka，进行数据整合和再加工。本文为您介绍如何配置Kafka输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道...
配置Kafka输出组件
配置Kafka输出组件，可以将外部数据库中读取数据写入到Kafka，或从大数据平台对接的存储系统中将数据复制推送至Kafka，进行数据整合和再加工。本文为您介绍如何配置Kafka输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道...
数据上传
DataWorks的数据上传功能支持将本地文件、数据分析的电子表格、OSS文件等数据上传至MaxCompute、EMR Hive、Hologres等引擎进行分析及管理，为您提供便捷的数据传输服务，助力您快速实现数据驱动业务。本文为您介绍如何使用数据上传功能上传...
查看及管理逻辑表下游对象
逻辑表的下游对象，指引用当前逻辑表字段生成的原子指标和业务限定。本文为您介绍如何查看及管理逻辑表的下游对象。逻辑表下游对象入口 请参见 规范建模入口，进入 规范建模 页面。按照下图操作指引，选择您需查看及管理下游对象的逻辑表，...
查看及管理逻辑表下游对象
逻辑表的下游对象，指引用当前逻辑表字段生成的原子指标和业务限定。本文为您介绍如何查看及管理逻辑表的下游对象。逻辑表下游对象入口 请参见 规范建模入口，进入 规范建模 页面。按照下图操作指引，选择您需查看及管理下游对象的逻辑表，...
元数据
背景信息 元数据（字典）是属于数据库本身的一些数据，包含数据库名、数据库字符集、表名、表的大小、表的记录行数、表的字符集、表的字段、表的索引、表的描述、字段的类型、字段的精度、字段的描述等。所有信息均来源于 information_...
多选
多选为基础控件，选项菜单中可选择多个数据，用于数据 选项较多 且需要同时选择多个值的场景。应用场景 多选 控件常用于数据选项较多的场景。例如 满意度调研表。效果图 控件配置 基础配置 配置项 描述说明 ①显示标题：选择是否显示下拉多...
设置逻辑表质量规则
通过设置逻辑表质量规则并运行质量检测计划后，您可以查看逻辑表质量检查结果，方便用户掌握当前逻辑表的质量状况，您可以通过可视化方式与自定义SQL方式制定表级与字段级质量规则。本文以可视化方式为例介绍如何设置逻辑表表规则和字段...
设置逻辑表质量规则
通过设置逻辑表质量规则并运行质量检测计划后，您可以查看逻辑表质量检查结果，方便用户掌握当前逻辑表的质量状况，您可以通过可视化方式与自定义SQL方式制定表级与字段级质量规则。本文以可视化方式为例介绍如何设置逻辑表表规则和字段...
单选
④数据字段：下拉菜单选择所选数据表中的 某一个数据字段。⑤默认值：根据设置 数据字段内容 进行下拉选择。⑥自动关联字段ID值：选择是否自动关联字段ID值，勾选后即配置控件 的选项展示名称 关联 对应的ID值字段。来源于 选择 数据集。①...
管理字段
如果已经建立数据标准，您可以拖动数据标准树上的数据标准到一张表上，完成添加字段操作。编辑字段 DDM提供三种编辑字段的方式：右键单击模型树上目标表的一个字段，弹出的菜单中选择 重命名。您还可以点击 属性 进入字段编辑器对字段进行...
下拉单选
③表字段名：基于该数据填报创建的表里面的对应字段名称。说明 字段名或表名必须以字母开头，支持字母、数字、下划线（_），最大长度为40个字符。④填写提示：设置控件输入时的 提示信息。例如 请选择客户类型。⑤描述信息：自定义控件的...
CTR预估模型
id字段有效（能与应用表的item关联上）最近一天60%以上的行为数据rn字段有效（能与搜索日志request_id关联上）最近一天60%以上的行为数据bhv_time字段有效（时间戳格式正确）最近一天60%以上的行为数据bhv_time是当天的（代表上报无延迟）l...
数据建模
物理化：支持将已存在的逻辑表物理化到数据库，并对物理化执行结果信息进行展示。质量规则配置：支持可视化与自定义SQL方式制定表级与字段级质量规则，并提供手工创建逻辑表字段时通过关联数据元自动生成质量规则的功能。一致性：支持当前...
Quick BI报错“column xxx is ambiguous”
产品名称 Quick BI 产品模块 数据集、仪表板 问题描述 数据集预览报错，报错内容是“column xxx is ambiguous”问题原因 添加计算字段时，字段名是手动填写的，数据集又有表关联的操作，关联的表里的某个字段与原表字段名重复，无法识别...
功能简介
物理化：支持将已存在的逻辑表物理化到数据库，并对物理化执行结果信息进行展示。表关系配置：支持建立多个表之间的关联关系，并提供关联关系编辑功能。质量规则配置：支持可视化与自定义SQL方式制定表级与字段级质量规则，并提供手工创建...
功能简介
物理化：支持将已存在的逻辑表物理化到数据库，并对物理化执行结果信息进行展示。表关系配置：支持建立多个表之间的关联关系，并提供关联关系编辑功能。质量规则配置：支持可视化与自定义SQL方式制定表级与字段级质量规则，并提供手工创建...
什么是自定义集成
目前系统支持解析标准的JSON数据，解析完成后，字段支持应用至流转规则与告警卡片。核心能力 灵活的接入能力、支持流转规则字段配置与告警内容富化 灵活的接入能力：可将各种监控系统的告警事件推送至运维事件中心，并支持数据自动解析。...
算子功能详解
KKV类型trigger表的trigger字段默认为右键字段（sk字段），新增“加权字段”，选择Trigger表中的其他属性字段（非STRING和非RAW类型），字段内容可作为后续召回排序的加权分使用。Recall召回 召回算子，唯一，且不可删除。支持召回表类型：...
导入数据至维表
创建完成维表后，您可以在维表中直接写入数据，也可以导入电子表格、本地CSV文件和Excel文件的数据至维表，为后续数据分析做准备。前提条件 已创建完成一个维表，详情请参见 创建维表。操作步骤 在 维表 页面，单击 全部维表 下相应的 文件...
端到端图搜解决方案
图片存储于OSS 模板选择“向量：图片搜索”模板后，系统默认生成4个预置字段id（主键）、cate_id（类目字段）、vector（向量字段）、vector_source_image（存储图片路径的字段），用户选择MaxCompute数据源后，从数据源同步的字段，展示在...
查看审计日志
在日志服务控制台查看审计日志 日志服务存储了数据库审计系统审计到的数据库操作日志，在数据库审计系统查看到的审计日志来源是日志服务。您可以在日志服务控制台查看和下载数据库审计服务创建的Project和Logstore中记录的审计日志数据。...
配置SAP Table输入组件
RFC_READ_TABLE是SAP系统自带的RFC函数，用于读取SAP数据库表的结构和数据。参数 描述 步骤名称 即SAP Table输入组件的名称。Dataphin自动生成步骤名称，您也可以根据业务场景修改。不超过64字符。数据源 可选取Dataphin中所有SAP Table...
- 产品推荐
- 这些文档可能帮助您