数据集成侧同步任务能力说明
说明 以业务数据库数据同步到MaxCompute数据仓库为例，当有大量的数据存储在数据库系统里，需要将数据库中的全量及增量数据同步到MaxCompute进行数仓分析时，数据集成传统方式是通过全量同步或者依赖数据库表中的 modify_time 等字段进行...
从RDS MySQL数据库获取数据进行数据富化
说明 日志字段的值和RDS MySQL数据库表字段的值进行等值匹配时，如果RDS MySQL数据库表字段存在多个相同的值（例如RDS MySQL数据库表有多个值为 1 的 cid 字段。e_table_map函数只获取匹配到的第一行数据。e_table_map函数只支持单行匹配，...
如何在报表中展示图片？
目标数据集中存在图片字段时，Quick BI支持在数据集中切换图片类型字段，并在制作仪表板时，将图片字段展示在报表中。前提条件 您已连接数据源，请参见 连接阿里云MySQL数据源。您已创建数据集，且目标数据集中存在图片字段，请参见 创建并...
Quick BI数据集新建计算字段在引用时，部分已创建的...
问题描述 Quick BI数据集新建计算字段在引用时，部分已...超过5层的新建计算字段可以在用户数据库创建该字段，或者在SQL创建数据集中以SQL代码的形式查询获得该字段。适用于 Quick BI 说明：本文档描述的功能场景已在公共云V4.4.3环境验证。
SPL指令
SPL语句*|parse-json-path='$.body' content 输入数据 content:'{"body":{"a":1,"b":2}}' 输出结果 content:'{"body":{"a":1,"b":2}}' a:'1' b:'2' 示例3：指定字段值输出模式为preserve，对于已有字段，保留原始值。SPL语句*|parse-json-...
物化视图和字段资产详情
本文为您介绍如何查看物化视图和字段的资产详情。使用限制 当计算引擎为StarRocks时，支持查看物化视图资产详情。物化视图详情 请参见 搜索数据，进入物化视图详情页面。编号 描述 ① 概要信息 为您展示表的类型、名称、负责人、描述、标签...
数据接口配置说明
配置字段默认数据 您可以为已添加的字段，配置字段的默认数据，作为字段的示例数据内容。可视化应用中查看并使用数据接口 在区块编辑器中配置完数据接口后，您可以在画布编辑器中使用区块时，查看到区块的所有数据接口信息，具体在可视化...
热力地图
说明 假设图表待添加的地理区域字段为 area，仅当显示 为红框标识时，表示该字段已切换为地理信息。有关各地区详细信息对照表请参见 国家省市区县标准名称列表。图表概述 使用场景 多用于空间分布的数据展示，例如行政区、地级市、街道、...
Quick BI如何设置自动用字段备注作为字段名
问题描述 数据库的建表语句已经给字段加了备注名称，希望创建数据集时，可以直接用该备注名称作为字段名 解决方案 需要修改工作空间的配置信息，个人空间与群空间配置入口不一样。要确认数据集是在哪个工作空间创建的，然后进入相应工作...
查询与分析日志的常见报错
解决方法 确认是否已为目标字段创建字段索引且开启统计功能。如果是，请执行下一步。如果不是，请先为目标字段创建字段索引且开启统计功能。具体操作，请参见 手动创建字段索引。执行该操作后，如果问题解决，则无需执行下一步。使用双引号...
用户行为表数据要求
答：从V4.4.0开始，为了配合实现上报的 事件 数据存储为用户行为表，将原行为对象类字段调整为行为属性类字段，已有的行为属性类字段不变。您仍可以沿用原来的用户行为表结构，已配置的用户行为表结构中的行为对象类字段将自动转为行为属性...
数据接口配置说明
配置字段默认数据 您可以为已添加的字段，配置字段的默认数据，作为字段的示例数据内容。可视化应用中查看并使用数据接口 在区块编辑器中配置完数据接口后，您可以在画布编辑器中使用区块时，查看到区块的所有数据接口信息，具体在可视化...
用户属性管理
ID Mapping 已实现将跨来源渠道的数据中的同一个用户识别出来，为其赋予Quick Audience中的唯一身份标识QAID，将其名下的数据拉通。导入用户标签表时，通过从拉通后的数据获取用户属性信息，并确立解决数据冲突的规则，实现构建用户属性...
数据规范
物品详情表 物品详情表至少需要有两个数据字段，其中一个字段为 主键，同时也是 分片字段，其他字段为物品属性字段。表中的记录和物品一一对应，主键 为物品的唯一标识，因此 主键 必须是唯一的。主键 的字段类型必须为 STRING。其他物品...
查看敏感数据血缘（公测）
DataWorks的数据血缘功能支持可视化展示敏感数据的血缘关系，自动分析字段之间的异常关联关系、敏感数据识别结果异常的字段，帮助您梳理敏感数据的扩散情况及影响面，提高数据识别效率。本文为您介绍如何查看血缘关系图。背景信息 数据血缘...
修改任务字段生成重复字段
一、问题原因 情况一：当在管理后台或者项目中修改自定义字段内容（不包括字段名称）时，选择「同步修改所有引用该字段的场景」，此时出现的结果为：1、使用场景的项目中，修改者拥有修改字段权限，则新字段内容会直接覆盖旧字段；...
日志字段详情
db_name 数据库名称 db_type 数据库类型，包括MySQL、PostgrepSQL。db_version 数据库版本 instance_id 集群ID lock_time 锁等待的耗时，单位：秒。owner_id 阿里云账号ID query_sql 慢日志SQL语句 query_time 查询耗时，单位：秒。region ...
UpdateQualityCheckData-更新随录数据
更新会话随录数据（三方业务字段），便于更多业务维度统计和查询。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出...
文本向量场景快速入门
vector字段的高级配置：（注：如果选择“已有向量数据”，该字段的配置保持为空即可）{"vector_model":"ops-text-embedding-000","vector_modal":"text","vector_source_field":"vector_source_text"} vector_model：向量模型，目前支持中...
创建多元索引
例如有一张数据表有5个字段，分别为id、name、age、city、sex，需要按照name、age或city查询数据时，有两种创建多元索引的方式。方法一：一个字段建立一个多元索引 按照name、age或city字段分别创建多元索引，名称分别为name_index、age_...
日志字段详情
db 数据库名。fail SQL执行是否出错。如果是MySQL实例或SQL Server实例，则执行成功时，字段值为0，除0之外的其他值都表示失败。如果是PostgreSQL实例，则执行成功时，字段值为0000，除0000之外的其他值都表示失败。client_ip 访问RDS实例...
replaceOne
object):Promise请求参数 字段名 类型 必填 说明 filter Object 是 数据库操作时的过滤条件。doc Object 是 替换的目标文档。options Object 否 控制项。options 参数定义：字段名 类型 必填 说明 upsert Boolean 否 如果查找不到对应文档...
自定义集群API Server证书SAN
如果您有特殊的代理访问或跨域访问需求，可以通过控制台为新建集群或已有集群自定义SAN字段。前提条件 已创建 ACK托管集群、ACK专有集群 或 ACK Serverless集群。具体操作，请参见 创建Kubernetes托管版集群、创建Kubernetes专有版集群 或 ...
自定义集群API Server证书SAN
如果您有特殊的代理访问或跨域访问需求，可以通过控制台为新建集群或已有集群自定义SAN字段。前提条件 已创建 ACK托管集群、ACK专有集群 或 ACK Serverless集群。具体操作，请参见 创建Kubernetes托管版集群、创建Kubernetes专有版集群 或 ...
findOneAndUpdate
object):Promise请求参数 字段名 类型 是否必选 说明 filter Object 是 数据库操作时的查询条件。update Object 是 数据库操作时的替换对象。options Object 否 控制项。options 参数定义：字段名 类型 是否必选 说明 sort Object 否 排序...
管理敏感数据
页面介绍 元数据信息汇总：可查看实例中数据库相关信息，包括 数据库数量、已扫描的 表数量、已扫描的 字段数量 以及 涉敏字段数量。涉敏字段-法案分布：可查看数据库中的敏感字段涉及哪些法案或政策，以及相关敏感字段的数量和分布情况。...
扫描（Scan）分析概述
SELECT avg(cast(latency AS bigint))AS '平均延时',api GROUP BY api 扫描分析模式下，日志服务通过扫描方式提取SQL语句中所有字段对应的日志，已有的字段索引不生效。例如已为 status 字段创建long类型的字段索引，如果在扫描模式下使用...
配置Salesforce输入组件
配置Salesforce输入组件后，可以读取Salesforce数据源中的数据至Dataphin，进行数据集成与数据开发。本文为您介绍如何配置Salesforce输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建Salesforce数据源。具体操作，请...
配置Salesforce输入组件
配置Salesforce输入组件后，可以读取Salesforce数据源中的数据至Dataphin，进行数据集成与数据开发。本文为您介绍如何配置Salesforce输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建Salesforce数据源。具体操作，请...
扩展字段
说明 注意：若有已配置在使用的 IdP 身份提供方进行账户导入，在添加新的必填字段，请务必前往【身份提供方】菜单添加字段映射，否则同步将失败。不可编辑。是否唯一 指定字段是否在当前实例内唯一，例如存储工号时可能应该勾选。不可编辑...
离线同步能力说明
数据集成的离线同步功能为您提供数据读取（Reader）和写入插件（Writer），方便您通过定义来源与去向数据源，并结合DataWorks调度参数使用，将源端数据库中全量或增量数据的同步至目标数据库中。本文为您介绍离线同步的相关能力。使用限制 ...
表格填报
选择 已有表 为对应的 控件 选择写入的 表字段名，将自动匹配表字段名的 字段描述、字段类型，您也可以自定义设置该字段是否为 主键。您可以 添加 和 删除 字段映射行 选择 新建表 您可以新建一张物理表，并自定义填写 表名、表字段名、...
字段操作
本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时，ALTER TABLE DDL 字段操作支持的转换范围。总览 ALTER TABLE tbl_name[alter_option[,alter_option].]alter_option:{ ADD[COLUMN]col_name column_definition[FIRST...
日志字段详情
字段 说明_topic_日志主题 redis_slow_log：DB节点的慢日志 redis_proxy_slow_log：Proxy节点的慢日志 account 数据库账号名称 command 执行的Redis命令 db 数据库名称 extend_information 附加信息 instanceid Redis实例ID ip IP地址 is_...
整库离线同步至OSS
为目标字段添加附加字段 单击操作列的 编辑附加字段，可以为目标文件在源端字段的基础上增加字段并为字段赋值。支持手动赋值常量与变量。说明 仅在 文件建立方式 为 自动建文件 时，可以使用此功能。步骤五：同步规则设置 配置增量同步的...
通过日志服务导入至数仓版
左边文本框为日志字段名称，右边为AnalyticDB MySQL数据库表中的字段。说明 Timestamp类型的字段映射精确到秒级别。例如日志时间为2022-01-05 10:12:13.145，投递到AnalyticDB MySQL后，投递结果为2022-01-05 10:12:13。投递开始时间 配置...
创建索引或约束支持的字段类型
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于不同约束支持的字段类型不兼容的场景。主键（PRIMARY KEY）字段类型 通过 CREATE TABLE DDL 创建 PRIMARY KEY 时，MySQL 数据库和 OceanBase 数据库 MySQL 租户支持的字段类型...
配置流程
例如A表中包含字段1、字段2和字段3，B表中包含字段2、字段3和字段4，对两张表通过做JOIN操作后，需要输出字段2和字段3，则需要在目标库侧创建做JOIN操作后的C表，C表中包含字段2和字段3。由于ETL功能暂不支持全量数据同步，所以您只能对...
有约束的列修改类型
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改不同约束下的列的字段类型的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型、短横线（-）表示没有、all 表示全部类型。主键（PRIMAEY KEY）约束下...
有约束的列修改长度
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改不同约束下的列的字段长度的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型、短横线（-）表示没有。主键（PRIMARY KEY）约束下字段长度的修改 ...
- 产品推荐
- 这些文档可能帮助您