业务指标趋势
[{"value":12,"base":0 },{"value":1,"base":10 },{"value":10,"base":7 },{"value":16,"base":110 },{"value":37,"base":279 }]设置 id 字段的映射字段为 value，content 字段的映射字段为 base。选择样式面板，打开轮播功能，间隔时间...
周期任务补数据
选择字段 如果您为 明细及汇总表任务补数据，则需要选择补数据的字段。详细说明如下：如果主键或来源表变更，为了保障数据一致性和正确性，仅支持选择全表补数据模式。如果主键或来源表未发生变更，您可以选择全表补数据模式或指定字段补...
配置值转化
（不等于）、>（大于）、>=（大于等于）、<（小于）、（小于等于）、isNull（为空）、isNotNull（不为空）。输入用于条件判断的具体 条件值。（可选）单击 添加且条件，配置 条件操作符 和 条件值。说明 一个条件分支中的多个条件是且关系...
配置OSS输入组件
null值 将要表示为空的字段填入文本框，如果源端存在则将对应的部分转换为空。压缩格式 文本压缩类型，默认不填写（即不压缩）。系统支持的压缩格式包括：zip gzip bzip2 lzo lzo_deflate 首行内容类型 选择文本的首行内容类型。首行内容...
配置OSS输入组件
null值 将要表示为空的字段填入文本框，如果源端存在则将对应的部分转换为空。压缩格式 文本压缩类型，默认不填写（即不压缩）。系统支持的压缩格式包括：zip gzip bzip2 lzo lzo_deflate 首行内容类型 选择文本的首行内容类型。首行内容...
RTMP视频流播放器
数据映射 当您需要自定义图表字段配置时，可以在 数据映射 模块设置不同的字段映射内容，将这些字段映射到组件对应的字段上。无需修改数据源中的字段，就可以实现数据的实时匹配。也可以单击 图标对字段分别样式配置。过滤器 打开 过滤器，...
步骤条
数据映射 当您需要自定义图表字段配置时，可以在 数据映射 模块设置不同的字段映射内容，将这些字段映射到组件对应的字段上。无需修改数据源中的字段，就可以实现数据的实时匹配。也可以单击 图标对字段分别样式配置。过滤器 打开 过滤器，...
HttpFile数据源
说明 HttpFile Reader在读取数据时，需要指定字段分割符，如果不指定默认为英文逗号（,），界面配置中也会默认填写为（,）。如果分隔符不可见，请填写Unicode编码。例如，\u001b、\u007c。是,lineDelimiter 读取的行分隔符。说明 当 ...
MySQL数据源
MySQL数据源为您提供读取和写入MySQL的双向通道，本文为您介绍DataWorks的MySQL数据同步的能力支持情况。支持的MySQL版本 离线读写：支持MySQL 5.5.x、MySQL 5.6.x、MySQL 5.7.x、MySQL 8.0.x，兼容 Amazon RDS for MySQL、Azure MySQL。离...
单张图片
如果该字段为空，DataV会读取配置中的 背景图 或 矢量图 进行展示。url（可选）设置单击后跳转页面的URL，会覆盖掉 超链接 中的配置。如果该字段为空，DataV会读取配置中的 超链接 进行跳转。数据项配置 说明 数据源 组件的数据源中通过 ...
数据规范
物品详情表 物品详情表至少需要有两个数据字段，其中一个字段为 主键，同时也是 分片字段，其他字段为物品属性字段。表中的记录和物品一一对应，主键 为物品的唯一标识，因此 主键 必须是唯一的。主键 的字段类型必须为 STRING。其他物品...
新建和管理公共标准属性
当选择 是否可为空字符串 属性时，用于对单字段是否是空字符进行校验，如果该属性值配置为 是，则自动创建一条 字段空字符串校验 的质量监控规则，需手动配置校验规则；如果属性值为 否，则校验规则自动填充为 异常行数。说明 是否可为空值...
新建和管理公共标准属性
当选择 是否可为空字符串 属性时，用于对单字段是否是空字符进行校验，如果该属性值配置为 是，则自动创建一条 字段空字符串校验 的质量监控规则，需手动配置校验规则；如果属性值为 否，则校验规则自动填充为 异常行数。说明 是否可为空值...
SPL指令
重要 如果目标字段与输入数据中字段重名，则直接使用新的类型以及值将其覆盖。sql-expr SQLExpr 是 数据处理表达式。重要 关于null值处理，请参见 SQL表达式null值处理。示例 示例1：使用计算表达式。extend Duration=EndTime-StartTime ...
推送数据
如果想对某条数据的某个字段的值做删除操作，可以update该字段为none，不要update为空。内容字段 内容字段为文档的有效信息，请按照 数据规范 填写，请注意冷启动版与其他版本数据规范不同。推送请求 一次请求可以包含一个数据表的多个文档...
新建数据探查任务
数据探查可以帮助您快速了解数据概况，提前评估数据可用性和潜在风险，您可对数据表进行全量探查、抽样探查。本文为您介绍如何新建数据探查任务。前提条件 需开通数据质量功能模块才可使用数据探查功能。使用限制 当计算引擎为AnalyticDB ...
新建数据探查任务
数据探查可以帮助您快速了解数据概况，提前评估数据可用性和潜在风险，您可对数据表进行全量探查、抽样探查。本文为您介绍如何新建数据探查任务。前提条件 需开通数据质量功能模块才可使用数据探查功能。使用限制 当计算引擎为AnalyticDB ...
告警监控规则数据结构
如果是高级模式且所选的告警策略未配置动态行动策略，则设置 actionPolicyId 为空字符串。repeatInterval String 是 重复等待时间。例如5m、1h等。useDefault Boolean 是 兼容字段，固定为false。参考数据 告警严重度 告警严重度 取值 ...
BigQuery数据源
where 条件不配置或为空时，则视作不过滤。否 无 partition 配置分区信息，可以同步特定的分区，支持一次同步多个分区。否 无 splitPk 如果已经指定了分区，则 splitPk 字段不生效。如果指定 splitPk，表示您希望使用 splitPk 代表的字段...
配置HDFS输出组件
同步其他数据源的数据至HDFS数据源的场景中，完成源数据的信息配置后，需要配置HDFS输出组件的目标数据源。本文为您介绍如何配置HDFS输出组件。前提条件 已创建HDFS数据源，如何创建，请参见 创建HDFS数据源。进行HDFS输入组件属性配置的...
映射富化函数
例如：数据表名为test，且设置加工规则为 output_fields=["province","pop"]，output_table_name="table_name"，如果数据表test中匹配到数据列["province","pop"]，则输出字段为 province:xxx,pop:xxx,table_name:test。encoding String 否...
MaxCompute数据源
注意事项 如果目标表列没有配置和源端的列映射，则同步任务执行完成后，此列值为空，即使此目标列建表时指定了默认值，列值仍为空。支持的字段类型 支持MaxCompute的1.0数据类型、2.0数据类型、Hive兼容数据类型。不同数据类型版本支持的...
DELETE
如果结果集为空，则将目标记录或变量的内容设置为 null。仅当在 SPL 程序中使用 DELETE 命令时，才能指定 RETURNING BULK COLLECT INTO collection[,.]子句。如果将多个 collection 指定为 BULK COLLECT INTO 子句的目标，则每个 ...
配置条件分发流程组件
如果分发条件为空时，则默认结果为true。输出字段 为您展示输出字段。单击 字段管理：选择某个字段后，单击 图标，将 未选的输入字段 移入到 已选的输入字段。选择某个字段后，单击 图标，将 已选的输入字段 移入到 未选的输入字段。同时您...
OSS数据源
重要 准备OSS数据时，如果数据为CSV文件，则必须为标准格式的CSV文件。例如，如果列内容在半角引号（"）内，需要替换成两个半角引号（""），否则会造成文件被错误分割。离线写 OSS Writer实现了从数据同步协议转为OSS中的文本文件功能，OSS...
配置API输出组件
配置API输出组件，可以将外部数据库中读取的数据写入到API，或从大数据平台对接的存储系统中将数据复制推送至API，进行数据整合和再加工。本文为您介绍如何配置API输出组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建API...
配置API输出组件
配置API输出组件，可以将外部数据库中读取的数据写入到API，或从大数据平台对接的存储系统中将数据复制推送至API，进行数据整合和再加工。本文为您介绍如何配置API输出组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建API...
配置HDFS输入组件
同步HDFS数据源的数据至其他数据源的场景中，您需要先配置HDFS输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置HDFS输入组件。前提条件 已创建HDFS数据源，如何创建，请参见 创建HDFS数据源。进行HDFS输入组件属性...
查看数据探查报告及探查记录
若该字段为 主键（或不可为空值的字段）且是 文本型，探查结果存在Null值记录数和空字符串记录数，建议您为该字段配置 字段空值校验 或 字段空字符串校验 的质量监控规则，避免阻断下游业务正常使用。唯一值统计 为您统计该字段的唯一值...
查看数据探查报告及探查记录
若该字段为 主键（或不可为空值的字段）且是 文本型，探查结果存在Null值记录数和空字符串记录数，建议您为该字段配置 字段空值校验 或 字段空字符串校验 的质量监控规则，避免阻断下游业务正常使用。唯一值统计 为您统计该字段的唯一值...
配置Amazon S3输入组件
配置Amazon S3输入组件后，可以读取Amazon S3数据源中的数据至Dataphin，进行数据集成与数据开发。本文为您介绍如何配置Amazon S3输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建Amazon S3数据源。具体操作，请参见 ...
配置Amazon S3输入组件
配置Amazon S3输入组件后，可以读取Amazon S3数据源中的数据至Dataphin，进行数据集成与数据开发。本文为您介绍如何配置Amazon S3输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建Amazon S3数据源。具体操作，请参见 ...
创建同步ElasticSearch
Type不可以为空。对于ES5，DataHub同步数据时，将会以用户选择作为Type的列的值作为一条数据的type，如果选择多列，则多列的值会以“|”分割作为一条数据的type。选择作为Type属性列的字段不能为null。对于ES6，DataHub同步数据时，将会以...
识别规则及识别方式
开启空值补偿后，如果抽样的字段全是空值，会再次进行一次非空采样，采样成功进入识别流程，采样失败则该字段不进行识别。开启后会提升识别的准确率，但可能也会导致识别成本上升，请根据业务需求判断是否需要开启。运行项目 安全识别任务...
分类玫瑰图（v4.x版本）
字段为空时，系统会将组件数据中的 s 字段值作为系列字段映射值进行显示。如果不为空，您需要保证数据返回的顺序。系列显示：数据系列的显示名称，可自定义。填充色 此系列下饼图的填充颜色。系列映射：打开开关，数据中包含系列 s 值时...
文本向量场景快速入门
vector字段的高级配置：（注：如果选择“已有向量数据”，该字段的配置保持为空即可）{"vector_model":"ops-text-embedding-000","vector_modal":"text","vector_source_field":"vector_source_text"} vector_model：向量模型，目前支持中...
配置API输入组件
配置API输入组件后，可以读取API数据源中的数据至Dataphin，进行数据集成与数据开发。本文为您介绍如何配置API输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建API数据源。具体操作，请参见 创建API数据源。进行API...
配置API输入组件
配置API输入组件后，可以读取API数据源中的数据至Dataphin，进行数据集成与数据开发。本文为您介绍如何配置API输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建API数据源。具体操作，请参见 创建API数据源。进行API...
配置数据识别规则
帮助您识别组织内的敏感数据，对于识别结果不准确的数据，您可以 手动修正数据，并在 敏感数据概况 模块为您展示最近的通过数据识别规则命中的、按照项目细分的全部敏感字段分布情况，数据识别规则的使用逻辑如下图所示。说明 对CDH引擎中...
关系网络
如果此参数的值为空，节点显示为默认的圆形。name：设置节点的标签名。type：设置节点的类型，可以在配置面板的 标签类别名 中配置。数据中的type值为 group1 的节点，其样式使用 标签类别名 为 group1 的配置。links 设置连接线，包含以下...
- 产品推荐
- 这些文档可能帮助您