创建多元索引
使用CreateSearchIndex接口在数据表上创建一个多元索引。一个数据表可以创建多个多元索引。前提条件 已初始化Client。具体操作，请参见 初始化。已创建数据表，且数据表的数据生命周期（timeToLive）必须为-1，最大版本数（maxVersions）...
查看数据探查报告及探查记录
数据探查任务运行结束后，您可查看不同字段数据类型生成的数据探查报告以及探查后字段的统计分布结果。本文为您介绍如何查看数据探查报告和探查记录。前提条件 需开通数据质量功能模块才可使用数据探查功能。权限 说明 超级管理员和运营...
查看数据探查报告及探查记录
数据探查任务运行结束后，您可查看不同字段数据类型生成的数据探查报告以及探查后字段的统计分布结果。本文为您介绍如何查看数据探查报告和探查记录。前提条件 需开通数据质量功能模块才可使用数据探查功能。权限 说明 超级管理员和运营...
创建多物理表服务单元
注意事项 只有当主物理表与非主物理表中某字段值和字段类型相同时，后续基于该多物理表服务单元创建的API才可以实现联合数据查询，否则无法实现联合数据查询。步骤一：选择服务单元类型 在Dataphin首页，单击顶部菜单栏 服务。系统默认进入...
查询和分析JSON日志的常见问题
首先，在查询和分析JSON日志时，如果数据量很大或结构复杂但相对固定，并且您对查询分析性能有要求时，建议对JSON叶子节点建立字段索引，然后再进行查询分析。如果数据量比较小，出于成本考虑，您可以不对JSON叶子节点建立字段索引，而是...
识别规则及识别方式
说明 自动继承开启后，下游会根据字段血缘关系自动继承直接上游字段的敏感等级，同时根据默认脱敏规则的配置，以实现对新增数据的自动保护，减少手动配置成本，也能更大程度上保证关联数据识别结果一致性和相关性。继承场景 支持选择 识别...
通过向导模式配置离线同步任务
说明 当源端某字段未与目标端字段进行映射时，源端该字段数据将不会同步到目标端。支持同名映射、同行映射。在使用过程中，您还可以：为目标字段赋值：通过 添加一行 的方式，为目标表添加常量、变量。例如，‘123’，'${变量名}'。说明 在...
创建多元索引
使用CreateSearchIndex接口在数据表上创建一个多元索引。一个数据表可以创建多个多元索引。前提条件 已初始化Client。具体操作，请参见 初始化。已创建数据表，且数据表的数据生命周期（TimeToLive）必须为-1，最大版本数（MaxVersions）...
名词解释
插件 为了在导入过程中进行一些数据处理，系统内置了若干数据处理插件，可以在定义应用结构或者配置数据源时选择。源数据 原始数据，包含一个或多个源字段。源字段 组成源数据的最小单元，包含字段名称和字段值，可选数据类型请参见 ...
ARRAY
使用指定的值构造ARRAY数组。...c0|+-+|[k11,86,k21,15]|[k12,97,k22,2]|[k13,99,k23,1]|+-+相关函数 ARRAY函数属于复杂类型函数，更多对复杂类型数据（例如ARRAY、MAP、STRUCT、JSON数据）的处理函数请参见 复杂类型函数。
创建电子表格
入口四：从数据集列表中创建 入口五：从 数据集编辑 页面中创建 入口四和入口五从已有数据集新建电子表格后，右侧数据面板会直接基于这个数据集加载对应的维度和度量，直接拖拽至字段区域即可。说明 入口三 可以选择 空白新建（新版）或 ...
新建离线物理表
数据类型 选择表字段数据类型。支持类型如下：常用：string、bigint、double、datetime、timestamp、decimal。文本：varchar、char。数值：int、smaIlint、tinyint、float。时间：date。MaxCompute计算引擎支持datetime。其他：boolean、...
新建离线物理表
数据类型 选择表字段数据类型。支持类型如下：常用：string、bigint、double、datetime、timestamp、decimal。文本：varchar、char。数值：int、smaIlint、tinyint、float。时间：date。MaxCompute计算引擎支持datetime。说明 Hadoop计算...
数据过滤器
数据过滤器用于过滤出数据源中的数据。通过数据过滤器可以将接口（数据分析服务、自定义接口或服务开发工作台）返回的数据转换成您所需要的内容，并展示在Web可视化组件上。本文介绍数据过滤器的使用方法。过滤方法 过滤方法支持数据过滤...
MAP_FROM_ARRAYS
将ARRAY数组 a 和 b 组合成一个MAP对象。命令格式 map,V>map_from_arrays([string,]array<K><a>,...相关函数 MAP_FROM_ARRAYS函数属于复杂类型函数，更多对复杂类型数据（例如ARRAY、MAP、STRUCT、JSON数据）的处理函数请参见 复杂类型函数。
名词解释
插件 为了在导入过程中进行一些数据处理，系统内置了若干数据处理插件，可以在定义应用结构或者配置数据源时选择。源数据 原始数据，包含一个或多个源字段。源字段 组成源数据的最小单元，包含字段名称和字段值，可选数据类型请参见 应用...
多元索引最佳实践
本文从数据表设计、多元索引设计、多元索引使用三个方面介绍了使用多元索引的最佳实践。数据表相关设计实践 主键设计 Tablestore数据表根据分区键进行Range范围分区，主键的设计会影响多元索引的同步速度和部分场景下的查询水平拓展。主键...
手动修正数据
本文将为您介绍如何在手动修正数据页面，对规则识别不准确的数据进行手动修正。说明 手动修正的数据结果，在第2天才会生效展示。背景信息 DataWorks支持您对数据识别规则识别不准确的敏感数据进行手动修正，手动修正数据的使用逻辑如下图所...
配置值转化
如果需要输出原始字段数据，则用${字段名称} 表示。您可以单击 添加条件分支，配置多个条件分支。说明 一个值转化节点中：最多包含10个条件分支。不同条件分支间按从上到下顺序匹配，如果有多个分支匹配，节点会按照第一个匹配到的分支进行...
创建多元索引
使用CreateSearchIndex接口在数据表上创建一个多元索引。一个数据表可以创建多个多元索引。前提条件 已初始化Client。具体操作，请参见 初始化。已创建数据表，且数据表的数据生命周期（TimeToLive）必须为-1，最大版本数（MaxVersions）...
场景管理器
动作 动作 说明 请求场景管理器 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如场景管理器配置了API数据源为 https://api.test ，传到 请求场景管理器 动作的数据为 { id:'1'}，则最终请求接口为 ...
属性设置器
用于获取字段数据的场景，支持设置静态数据、模板字符串。属性配置示例：{ name:'text',title:'文本内容',defaultValue:'文本',setter:{ type:'data-bind-field',props:{ supportStaticType:['char','text'],supportStaticDefaultValues:[{...
多元索引
为数据表创建多元索引后，您可以通过Tablestore CLI查看多元索引列表、查看多元索引信息、使用多元索引查询数据以及删除多元索引。创建多元索引 创建一个多元索引。命令格式 create_search_index-n search_index_name 配置项说明请参见下表...
中国国家边界（v4.x版本）
请求热力值数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如中国国家边界配置了API数据源为 https://api.test ，传到 请求热力值数据接口 动作的数据为 { id:'1'}，则最终请求接口为 ...
排序和翻页
使用多元索引查询数据时，通过预先定义排序方式或者查询时指定排序方式，您可以按照指定排列方式获取到返回数据。当返回结果行数较多时，通过使用跳转翻页或者连续翻页可以快速定位到所需数据。使用场景 分类 使用方式 功能 使用场景 排序 ...
图标散点层（v4.x版本）
请求数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如图标散点层配置了API数据源为 https://api.test ，传到 请求数据接口 动作的数据为 { id:'1'}，则最终请求接口为 https://api.test?id=1 。切换...
配置ClickHouse输入组件
同步ClickHouse数据源的数据至其他数据源的场景中，您需要先配置ClickHouse输入组件读取的数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置ClickHouse输入组件。前提条件 在开始执行操作前，请确认您已完成ClickHouse数据源...
线热力层（v1.x版本）
color（可选）线热力层支持数据优先的渲染，如果您配置了 color（线颜色）、weight（线宽）、dashArray（虚线）等字段，那么会优先使用这些属性来对关联的线进行渲染。表 2.配置项说明 配置项 说明 受控模式 打开开关，资产初始化状态下不...
SQL其他常见问题
但您需要注意，MaxCompute支持的DECIMAL类型数据的最大长度为38位，但实际业务处理过程中如果数据存储为最大长度，在数据处理过程中很容易出现数据溢出问题，建议调小数据长度。新创建的MaxCompute项目不支持数据类型自动隐式转换，如何...
手动新建逻辑表
通过手动新建逻辑表，建立您期望的数据表样式和字段，并支持将逻辑表物理化至云计算资源中，为后续的表加工和使用做基础。本文介绍如何手动新建逻辑表。前提条件 已新建目录，具体操作，请参见 新建模型目录。操作步骤 登录 数据资源平台...
手动新建逻辑表
通过手动新建逻辑表，建立您期望的数据表样式和字段，并支持将逻辑表物理化至云计算资源中，为后续的表加工和使用做基础。本文介绍如何手动新建逻辑表。前提条件 已新建目录，具体操作，请参见 新建模型目录。操作步骤 登录企业数据智能...
配置离线数据集成节点
支持前置及后置SQL语句，在导入数据前后实现数据处理。使用限制 系统在计算数据量过大且缺失主键的表时，会导致内存溢出或内存耗尽（OOM）。周期调度节点最近一次运行成功后，若连续运行失败10次及以上，离线集成任务直接执行失败，且不会...
iframe
本文介绍iframe全量选择时各配置项的含义。图表样式 iframe支持自定义配置iframe链接内容以及页面关闭按钮的样式配置，适用于将网页嵌入可视化应用中进行显示。...再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。
多行文本
再根据需要在蓝图编辑器配置页面的数据处理节点中更改对应样式的字段值。案例演示 本案例将词云组件中的内容获取并展示到多行文本组件中。登录 DataV控制台。选择任一数据看板，单击 编辑，进入画布编辑器页面。添加 词云 和 多行文本 两个...
SPL概述
字段赋值表达式，直接对字段赋值例如 level='INFO'，或者将正则表达式的提取结果赋值给字段例如 msg=regex_extract(content,'\S+')。SQL表达式 数据计算表达式返回值，例如 cast(status as int)>=500。output 处理结果中的输出字段。例如|...
中国国家边界（v3.x版本）
动作 动作 说明 请求热力值数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如中国国家边界配置了API数据源为 https://api.test ，传到 请求热力值数据接口 动作的数据为 { id:'1'}，则最终请求接口为 ...
查看敏感数据血缘（公测）
DataWorks的数据血缘功能支持可视化展示敏感数据的血缘关系，自动分析字段之间的异常关联关系、敏感数据识别结果异常的字段，帮助您梳理敏感数据的扩散情况及影响面，提高数据识别效率。本文为您介绍如何查看血缘关系图。背景信息 数据血缘...
二维图标层（v3.x版本）
动作 动作 说明 请求数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如二维图标层配置了API数据源为 https://api.test ，传到 请求数据接口 动作的数据为 { id:'1'}，则最终请求接口为 ...
数据集成侧同步任务能力说明
背景信息 实际业务场景下，数据同步通常不能通过一个或多个简单离线同步或者实时同步任务完成，而是由多个 离线同步、实时同步 和 数据处理 等任务组合完成，这就会导致数据同步场景下的配置复杂度非常高。为了解决上述问题，DataWorks提出...
单选
单选为基础控件，直接单击进行选择，在表单中使用非常广泛。应用场景 单选用于数据选项较少可直接罗列展示进行选择的场景。例如 性别、收入类型 等。效果图 控件配置 基础配置 配置项 描述说明 ①显示标题：选择是否显示单选控件标题，支持...
- 产品推荐
- 这些文档可能帮助您