数据接口配置说明
本文介绍区块内部的数据接口的配置的方法，帮助您理解区块的数据接口功能。在区块编辑器内，您可以单击区块编辑器右上角的 图标，在 数据接口设置 页签中支持如下数据接口配置操作。切换模式 在对话框上方可以切换数据接口模式，可选 视图...
同步 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...
本文为您介绍如何同步 RDS PostgreSQL 实例的数据至 OceanBase 数据库 Oracle 租户。前提条件 数据传输已具备云资源访问权限。详情请参见 数据传输迁移角色授权。已为源端 RDS PostgreSQL 实例创建专用于数据同步项目的高权限账号。详情请...
增量数据同步
通过选择已注册的数据源端数据和目标端，实现增量任务自动建表的方式创建离线同步周期任务，本文介绍如何创建MySQL to MaxCompute离线增量数据同步周期调度的任务。前提条件 已新建工作组“信息中心（xxzx）”，具体操作，请参见 新建工作...
03配置逻辑表关联字段标准
通过关联数据标准中的标准字段，实现字段值的统一和规范化，帮助您管控治理后数据的一致性和数据质量，本文介绍如何配置逻辑表字段，关联标准字段。前提条件 已新建工作组“信息中心(xxzx)”，具体操作，请参见 新建工作组。已创建数据元...
如何设计时序数据表
时序数据表可以为您提高查询和存储性能，本文介绍如何根据时序数据的来源和场景建立时序数据表。时序数据示例 时序数据建模至关重要，需要仔细分析数据来源的特性和查询的场景，建立合理的数据表，以便达到最佳的存储和查询性能。以下图的...
通过自定义模型识别
该功能通常用于发现您的数据资产中与该特征内容相似的数据。本文为您介绍如何生成自定义的数据识别模型。使用限制 DataWorks不支持对数据量小于10条，并且数据长度小于4大于40的样本字段进行模型训练。DataWorks不支持对包含中文字符（包括...
批量创建质量规则
一致性：包含 单表字段值一致性比较、单表字段统计值一致性比较、单字段业务逻辑一致性比较、两表字段值一致性比较、两表字段统计值一致性比较、两表字段业务逻辑一致性比较 和 跨源两表字段统计值一致性比较。稳定性：包含 表稳定性校验、...
批量创建质量规则
一致性：包含 单表字段值一致性比较、单表字段统计值一致性比较、单字段业务逻辑一致性比较、两表字段值一致性比较、两表字段统计值一致性比较、两表字段业务逻辑一致性比较 和 跨源两表字段统计值一致性比较。稳定性：包含 表稳定性校验、...
DataV区块编辑器介绍
您也可以修改Tab列表的值，单击 测试，查看改变后的效果。同时，您也可以在发布后，前往画布编辑器内查看效果。说明 您可以通过 代码模式 完成数据接口的设置。您可以通过单击 新增数据接口 按键，新增一个数据接口。设置事件接口 将组件的...
设置逻辑表质量规则
维度类：适用于选择的字段已关联了维度后的规则，包括字段长度和字段值类型的校验。规则类型 字段的质量规则类型。包括：空值率 唯一率 重复率 空值数量 最大值 最小值 唯一值 和重复值。高级选项 说明 目前仅MaxCompute、Hive、AnalyticDB...
设置逻辑表质量规则
维度类：适用于选择的字段已关联了维度后的规则，包括字段长度和字段值类型的校验。规则类型 字段的质量规则类型。包括：空值率 唯一率 重复率 空值数量 最大值 最小值 唯一值 和重复值。高级选项 说明 目前仅MaxCompute、Hive、AnalyticDB...
操作流程
配置逻辑表关联标准字段 通过关联数据标准中的标准字段，实现字段值的统一和规范化，帮助您管控治理后数据的一致性和数据质量。具体操作，请参见 配置逻辑表关联字段标准。设置逻辑表DDL语句 通过DDL设置，设置逻辑表在各个云计算资源下的...
操作流程
配置逻辑表关联标准字段 通过关联数据标准中的标准字段，实现字段值的统一和规范化，帮助您管控治理后数据的一致性和数据质量。具体操作，请参见 配置逻辑表关联字段标准。设置逻辑表DDL语句 通过DDL设置，设置逻辑表在各个云计算资源下的...
数据扫描和识别
DSC 扫描数据库类型和数据表类型数据源中的字段名称和字段值，同时根据字段名称和值综合判断该数据是否为敏感数据。例如：年龄数据。如果只通过字段值无法判断数据是否敏感，DSC 会结合数据源列中的字段名称和对应的数值来综合判断。首次...
多选
①来源于数据集：选择 数据集 后可支持数据集内 数据字段 选择您所需要的选项。②数据集：下拉菜单选择当前空间中的 某一个数据集。③数据字段：下拉菜单选择所选数据表中的 某一个数据字段。④默认值：根据设置 数据字段内容 进行下拉选择...
配置OceanBase输出组件
选择Dataphin系统已配置的数据源，且数据源需同时具备以下两个条件：数据源的类型与输出组件的类型一致。执行 属性配置 的账号具有该数据源的同步写权限，如果没有权限，则需要申请数据源权限，详情请参见 申请、续期和交还数据源权限。...
配置TDH Inceptor输出组件
对于没有同步写权限的数据源，您可以单击数据源后的 申请，申请数据源的同步写权限。具体操作，请参见 申请数据源权限。如果您还没有TDH Inceptor类型的数据源，单击 新建，创建数据源。具体操作，请参见。表 选择数据同步中输出数据的目标...
同步任务修改
DataHub 页面现在已经支持同步字段修改，用户可以在页面上进行同步字段的修改，无需重启。同步任务字段修改 DataHub 页面现在已经支持同步字段修改，用户可以在页面上进行同步字段的修改，无需重启。具体步骤如下：在数据同步页签，点击...
添加宜搭数据源
在对话框左上角的 数据集 列表中选择一个目标数据集，选中后在下方 字段 列表处系统会默认排列当前选中数据集内的所有字段。拖拽某个数据字段到右侧的图表字段映射下方对应的映射字段中。单击映射字段右侧的 图标，选择配置数据字段聚合...
散点层
本文介绍散点层各配置项的含义。图表样式 散点层是3D地球的子组件，支持独立的样式和数据配置，包括散点的大小、颜色和类型以及经纬度等，能够以散点的形式表现地理...再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。
事件处理流
动作配置 待提取字段：location 提取正则表达式：([a-zA-z]+-[a-zA-z]+)-(.*)填充的字符：region、datacenter 执行结果 匹配更新 当系统检测到事件的指定字段中存在某段内容时，就将设置的字段值填充到目标字段中。场景 告警字段："message...
使用数据实验室
日志服务数据实验室为您提供各种场景的模拟日志数据及各种...您可以调整日志的字段值、时间范围等配置，重新导入数据。单击 删除，删除场景。在删除场景时，您可以选择是否要同步删除Logstore及相关报表。删除场景后，将停止数据模拟任务。
通过控制台使用多元索引
在 索引详情 对话框，单击 数据生命周期 后的 修改。在 数据生命周期 悬浮框，修改数据生命周期后，单击 修改ttl。数据生命周期最低为86400秒（一天）或者-1（永不过期），单位为秒。同时多元索引的TTL值必须小于或等于数据表的TTL值。删除...
新建查询控件
通过查询控件可以生成一个或多个查询条件，帮助您查询单个或多个图表中的数据，一个仪表板中可以添加多个查询控件，但只支持一个查询控件置顶。前提条件 已创建好仪表板。请参见 新建仪表板 和 可视化图表概述。背景信息 查询条件 生效模式...
填报控件
默认值：设置进度条中默认显示值，默认为0 内容 起始值：设置进度条初始值，默认起始值为0，设置起始值时需要 低于目标值。目标值：设置进度条最终值，默认目标值为100，设置目标值时需要 高于起始值。步长：设置进度条在每次更新时的跳跃...
删除有约束的列
MySQL 数据库的字段类型 是否允许执行删除 OceanBase 数据库 MySQL 租户的字段类型 是否允许执行删除 INT 允许 INTEGER 不允许 TINYINT 允许 TINYINT 不允许 SMALLINT 允许 SMALLINT 不允许 MEDIUMINT 允许 MEDIUMINT 不允许 BIGINT 允许 ...
甜甜圈层
本文介绍甜甜圈层各配置项的含义。图表样式 甜甜圈层是3D地球的子组件，支持独立的样式配置，包括甜甜圈的半径、大小颜色和提示框配置等。样式面板 搜索配置：单击 ...再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。
数据源插件说明
literal_array字段类型：{“tags”:[“a”,”b”,”c”]} 或 int_array字段类型：{“tags”:[1,2,3]} MultiValueSpliter 将来源字段按照分隔符分割成多个值，分割后的内容作为目标表字段的内容，目标表字段必须是配置为ARRAY类型的字段（若...
创建全域数据表质量规则
一致性：包含 单表字段值一致性比较、单表字段统计值一致性比较、单字段业务逻辑一致性比较、两表字段值一致性比较、两表字段统计值一致性比较、两表字段业务逻辑一致性比较 和 跨源两表字段统计值一致性比较。稳定性：包含 表稳定性校验、...
配置Trace链路追踪
自定义Trace字段由客户端生成，网关会透传给后端，并记录在用户的 `CustomTraceId` 字段，且网关会以该字段的值作为TraceId向链路追踪平台上报日志信息，前提条件是该字段的值符合标准的TraceId格式，即16位或32位的十六进制数。如果客户端...
创建数据表质量规则
一致性：包含 单表字段值一致性比较、单表字段统计值一致性比较、单字段业务逻辑一致性比较、两表字段值一致性比较、两表字段统计值一致性比较、两表字段业务逻辑一致性比较 和 跨源两表字段统计值一致性比较。稳定性：包含 表稳定性校验、...
创建全域数据表质量规则
一致性：包含 单表字段值一致性比较、单表字段统计值一致性比较、单字段业务逻辑一致性比较、两表字段值一致性比较、两表字段统计值一致性比较、两表字段业务逻辑一致性比较 和 跨源两表字段统计值一致性比较。稳定性：包含 表稳定性校验、...
创建数据表质量规则
一致性：包含 单表字段值一致性比较、单表字段统计值一致性比较、单字段业务逻辑一致性比较、两表字段值一致性比较、两表字段统计值一致性比较、两表字段业务逻辑一致性比较 和 跨源两表字段统计值一致性比较。稳定性：包含 表稳定性校验、...
查看并管理明细及汇总表实例
其中 优先展示必选字段 为保障数据质量，Dataphin根据字段逻辑及上游节点的数据变化判断出的必须纳入重跑范围的字段。说明 为了保障数据一致性与正确性，已选字段所属物化节点内包含的所有字段、及连带字段归属的其他物化节点包含的字段，...
设计阶段
设计工作包含数据探查和系分设计两部分：数据探查旨在了解来源数据的数据形态，例如数据质量、数据分布等。结合业务场景，帮助分析和判断需求实现的可行性以及找出潜在的数据问题和风险。系分设计则包括表设计、Mapping设计和调度设计等最...
查看并管理明细及汇总表实例
其中 优先展示必选字段 为保障数据质量，Dataphin根据字段逻辑及上游节点的数据变化判断出的必须纳入重跑范围的字段。说明 为了保障数据一致性与正确性，已选字段所属物化节点内包含的所有字段、及连带字段归属的其他物化节点包含的字段，...
主副指标卡
从最右侧 数据 栏下方，拖拽字段到 图表 栏 字段 页签的配置框中，完成组件展示数据的配置。注意 所选字段必须是相同指标类型的数据。参数 说明 主指标 添加数值型字段，展示对应字段的数据。主指标仅支持添加一个字段。副指标 筛选 添加...
数据源插件说明
literal_array字段类型：{“tags”:[“a”,”b”,”c”]} 或 int_array字段类型：{“tags”:[1,2,3]} MultiValueSpliter 将来源字段按照分隔符分割成多个值，分割后的内容作为目标表字段的内容，目标表字段必须是配置为ARRAY类型的字段。...
ST_ImportObj
true false obj_data_column 字符串 主表数据字段。obj_data my_data obj_id_column 字符串 主表数据ID字段。obj_id my_id 主表结构如下：字段 类型 说明 备注 id serial 唯一ID。主键。[obj_id_column]text 数据ID。字段名可指定。默认为...
ST_ImportObj
true false obj_data_column 字符串 主表数据字段。obj_data my_data obj_id_column 字符串 主表数据ID字段。obj_id my_id 主表结构如下：字段 类型 说明 备注 id serial 唯一ID。主键。[obj_id_column]text 数据ID。字段名可指定。默认为...
- 产品推荐
- 这些文档可能帮助您