配置项常见问题
数据系列 很多基础二维组件（如折线图、柱状图等）都支持多个不同系列的系列展示，您只需在配置面板的 数据 页签中配置不同的 s 字段即可。配置项系列 支持多系列的组件（如折线图、柱状图等），在 配置 页签中，一般都会有 数据系列 的...
如何基于LSM-tree架构实现一写多读
本文主要阐述如何基于LSM-tree结构的存储引擎实现数据库的一写多读能力。LSM-tree数据库引擎 LSM-Tree全称是Log Structured Merge Tree，是一种分层、有序，面向磁盘设计的数据结构，其核心思想是利用磁盘批量的顺序写要比随机写性能高的...
通过EXPLAIN和EXPLAIN ANALYZE分析执行计划
EXPLAIN ANALYZE 您可以通过 EXPLAIN ANALYZE 命令查看查询的分布式执行计划以及实际执行代价，包括执行耗时、内存使用量，输入输出数据量等。语法 EXPLAIN ANALYZE;示例 EXPLAIN ANALYZE SELECT count(*)FROM nation,region,customer ...
CREATE FUNCTION.AGGREGATE USING type_name
调用流程如下：处理大型聚合上下文 当使用外部语言（如C或Java）实现类型方法时，每次调用实现类型方法时，都必须在 数据库 服务器进程和外部函数的语言环境之间来回传递聚合上下文。传递大型聚合上下文会对性能产生不利影响。为避免这种...
架构
一旦现有的数据被拷贝完，工作者会进入到同步模式，主应用进程会流式传递在使用标准逻辑复制拷贝初始数据期间发生的任意改变，这会确保表被带到一种已同步的状态。一旦同步完成，该表的复制的控制权会被交回给主应用进程，其中复制会照常...
功能简介
在数据中台建设过程中，搭建核心处理平台，并根据相关标准要求，将源数据或治理后的数据，按照“全面、高效、统筹”的共享原则，“低延时”、“精准化”地传递给用户，方便更多应用消费数据，实现数据价值。协同管控各种组织机构，为智慧化...
大数据安全治理的难点
通常，大数据系统中的工作流涉及多部门、多责任人且跨系统的数据，如何才能协调好这些业务系统准时、保质保量地产出数据，避免出现因业务系统宕机/脏数据导致数据延时产出、产出脏数据，关乎到企业数据业务的连续性问题甚至高层的信任问题...
统一服务
在数据中台建设过程中，搭建核心处理平台，并根据相关标准要求，将源数据或治理后的数据，按照“全面、高效、统筹”的共享原则，“低延时”、“精准化”的传递给用户，方便更多应用消费数据，实现数据价值。协同管控各种组织机构，为智慧化...
功能简介
在数据中台建设过程中，搭建核心处理平台，并根据相关标准要求，将源数据或治理后的数据，按照“全面、高效、统筹”的共享原则，“低延时”、“精准化”地传递给用户，方便更多应用消费数据，实现数据价值。协同管控各种组织机构，为智慧化...
赋值节点
赋值节点下游获取赋值节点结果集outputs时，需要根据outputs具体情况，以${参数名} 的格式，使用 一维数组 或 二维数组 的方式在代码中获取赋值节点传递的结果集、或结果集中的指定数据。赋值节点使用流程 配置赋值节点：定义outputs结果集...
公告
新增支持OpenGauss数据源、SAP Table数据源、StarRocks数据源、Hudi数据源、Doris数据源、Greenplum数据源。资产质量新增跨源两表字段统计值一致性的质量规则模板，用于跨数据源的数据对比；有效性/字段格式校验的规则模板增加like表达式；...
PyODPS参数传递
本文为您介绍如何在DataWorks中进行PyODPS参数的传递。前提条件 请提前完成如下操作：已 开通MaxCompute。已 开通DataWorks。在DataWorks上完成业务流程创建，本例使用DataWorks简单模式。详情请参见 创建业务流程。操作步骤 准备测试数据...
全局变量配置
本文介绍全局变量在蓝图编辑器的使用方法。说明 全局变量功能为7.0版本产品新增功能，请根据 新版控制台 环境进行操作。前提条件 已登录DataV控制台 已进入蓝图编辑器 操作步骤 将需要的 图层节点 ...预览或发布当前数据看板，查看交互效果。
使用逻辑组合
本文介绍在蓝图编辑器中如何使用逻辑组合。说明 逻辑组合功能为7.0版本产品新增功能，请根据 新版控制台 环境进行操作。前提条件 已登录DataV控制台 已进入蓝图编辑器 操作步骤 将需要的 图层节点 ...预览或发布当前数据看板，查看交互效果。
解析函数
type=docx","query":"filename=python3.docx","fragment":"urllib",} 示例2：设置 allow_fragments 为False，返回结果中的 fragment 参数值为空。原始日志 content:https://username:username@example.com:8083/hello/asdah/;type=docx?...
数据接口配置说明
本文介绍区块内部的数据接口的配置的方法，帮助您理解区块的数据接口功能。在区块编辑器内，您可以单击区块编辑器右上角的 图标，在 数据接口设置 页签中支持如下数据接口配置操作。切换模式 在对话框上方可以切换数据接口模式，可选 视图...
数据接口配置说明
本文介绍区块内部的数据接口的配置的方法，帮助您理解区块的数据接口功能。在区块编辑器内，您可以单击区块编辑器右上角的 图标，在 数据接口设置 页签中支持如下数据接口配置操作。切换模式 在对话框上方可以切换数据接口模式，可选 视图...
区域下钻热力层（v2.x版本）
使用同样的方式可配置其他省市级的下钻区域数据，数据的规律为 国家>省或直辖市>地市级>区县级，即上一级必须包含下一级的区域数据（adcode和位置数据等）才可下钻。映射数据接口：参见 区域热力层数据。交互 表 1.交互说明 交互 说明 当...
实现时间戳联动
本文档以 时间器 组件和 通用标题 组件之间...串行数据处理 节点负责将上游抛出的事件内容进行加工处理，传递给 通用标题 组件作为请求时的 query 参数，也就是替换掉第二步操作中填写的 变量名。单击页面右上角的 预览 图标，预览展示结果。
Runtime Filter
本文介绍 云数据库 SelectDB 版 提供的Runtime Filter的使用方式和注意事项，作为您进行Join优化的参考。概述 Runtime Filter为某些Join查询在运行时动态生成过滤条件，来减少数据的扫描计算，避免不必要的I/O和网络传输，从而加速查询。它...
产品优势
完成业务复杂规则 高安全、高性能 支持TEE、零知识证明等可验证隐私计算，完成对区块链数据的存在性认证，生成认证证明，保障链上数据隐私，降低跨链认证的复杂度，提高通讯效率 便捷接入、高效协同 可视化控制台快速注册区块链，便捷的...
使用OSS Foreign Table导出数据
AnalyticDB PostgreSQL版 支持通过OSS Foreign Table（简称OSS FDW）导出数据到OSS。支持的文件格式 OSS FDW目前仅支持导出如下格式的数据文件：支持导出CSV、TEXT格式的非压缩文本文件。支持导出CSV、TEXT格式的GZIP压缩文件。支持导出ORC...
数据风险点监控
本文为您介绍在线数据风险点监控和离线数据风险点监控。在线数据风险点监控 在线业务系统的数据生成过程中必须确保数据质量，根据业务规则对数据进行监控。说明 MaxCompute本身未提供相应的监控工具，您可以借助DataWorks进行监控。详情请...
组复制简介
特性 组复制 半同步复制 异步复制 数据可靠性★数据一致性 保证主备数据一致性 不保证 不保证 全局事务一致性 支持 不支持 不支持 数据 强 可靠性 组复制的数据强可靠性来源于Paxos协议的多数派原则，即当多数派收到事务的Binlog后，事务...
功能优势
当您的数据库中有数据需要被保护时，可以使用RDS MySQL全密态数据库功能，该功能提供的加密解决方案能够在遵守数据保护法规的前提下保障您的数据安全，使被保护数据免受未授权访问。本文将详细介绍RDS MySQL全密态数据库功能的优势，帮助您...
概述
背景信息 随着国家对数据安全和个人敏感信息的加强监管，原子化的数据安全能力无法满足监管要求，国家标准和行业标准逐渐提出数据全生命周期的安全保障的需求，传统的三方安全加固和客户端加密都在客户成本、架构改造、数据库性能等带来了...
Tunnel命令常见问题
java.io.IOException:Error writing request body to server 产生原因 这是上传数据到服务器时产生的异常，通常是因为上传过程中的网络连接断开或超时导致的：当您的数据源并非是本地文件，需要从数据库等地方获取时，数据在写入的过程中还...
FTP Check节点
背景信息 FTP Check节点的典型应用场景：当DataWorks调度系统中的任务需要访问一个外部数据库时，但由于该数据库的相关数据写入任务不在DataWorks中，DataWorks无法知道该数据库何时完成写入任务并可以被访问。如果DataWorks读取未写入完成...
验证数据压缩能力
表创建成功后，在 order 表单中，建立存储过程，并随机插入 20,000 行数据，查看租户资源的使用大小，并与 MySQL 数据库的数据进行比较。说明 由于条件限制，本教程仅 20,000 行数据为例，如您时间充裕，可尝试插入 10,000,000 数据，数据...
使用全局变量
本文档介绍全局变量的4种用法，作为静态值传递、作为变量引用异步值传递、作为交互事件参数传递、过滤器引用。说明 全局变量功能为7.0版本产品新增功能，请根据 新版控制台 环境进行操作。前提条件 已登录DataV控制台 已进入画布编辑器 已...
URL函数
url_extract_fragment函数 url_extract_fragment(x)从URL中提取Fragment信息。url_extract_host函数 url_extract_host(x)从URL中提取Host信息。url_extract_parameter函数 url_extract_parameter(x,parameter name)从URL的查询部分中提取...
数据处理
数据处理类节点包括串行数据处理节点。本文介绍在蓝图编辑器中，配置数据处理类节点的方法。串行数据处理节点 串行数据处理 节点，是使用串行方式来处理一个事件。使用场景：例如，小数0.835要转换成整数百分比83%，可经过：单位转换（83.5...
回收表碎片空间
当在MySQL数据库中频繁地执行INSERT、UPDATE和DELETE语句，会导致数据在磁盘上不再连续存储，形成碎片化的存储空间（即碎片空间）。碎片空间的存在会导致数据库性能下降。常规的回收表空间碎片操作（例如Optimize Table回收表空间）可能会...
使用指南
本文将为您介绍如何使用跨链服务控制台，包括注册区块链、跨链授权（包括账本数据访问、合约消息推送）的相关操作流程，以及如何进行权限查看、合约消息查看等。注册区块链 注册您的区块链是开始跨链连接的第一步。注册区块链后，跨链数据...
离线同步数据质量排查
如果写出数据和目标存储已有数据发生数据约束（主键冲突、唯一键约束、外键约束等），数据库则使用来源数据update更新目标表已有数据行，在目标表存在多个数据约束的情况下，数据替换可能会失败并产生脏数据 如果写出数据和目标存储已有...
管理数据
企业管理员使用数据域可以基于业务属性、组织架构、数据特征等维度对数据资产进行分类管理。通过将拥有共同属性的数据资产集中到同一个数据域中，管理员可以高效管理数据资产及资产中的敏感数据。本文介绍首次使用数据域功能的具体操作。...
用户价值
数据资源平台为用户提供了一站式数据资产定义、生产、管理与服务平台，提供企业级数据资产构建能力和一致性使用体验，助力客户快速构建数据智能平台，实现数据资源统一管理，挖掘潜在规律，优化业务决策，让大数据真正的驱动客户业务。...
数据上传
DataWorks的数据上传功能支持将本地文件、数据分析的电子表格、OSS文件等数据上传至MaxCompute、EMR Hive、Hologres等引擎进行分析及管理，为您提供便捷的数据传输服务，助力您快速实现数据驱动业务。本文为您介绍如何使用数据上传功能上传...
查看敏感数据识别结果
敏感数据识别任务扫描完成后，您可以查看敏感数据识别结果。数据安全中心支持以 数据对象、数据库实例为基本单位查看敏感数据的扫描结果。本文介绍如何查看数据对象、数据库实例的敏感数据识别结果。查看数据对象的识别结果 说明 您可以在 ...
数据传输与迁移概述
MaxCompute提供多种渠道，以便您从业务系统或外部数据源写入数据到MaxCompute，或者从MaxCompute写出数据到外部系统或外部数据源。数据传输渠道 SDK-Tunnel渠道 外表（湖仓一体）JDBC渠道 场景数据写入MaxCompute 离线数据批量写入（数据...
- 产品推荐
- 这些文档可能帮助您