功能特性
开通敏感数据保护 管理敏感数据 管理分类分级模板 管理识别模型 新增脱敏算法 数据水印 可用于数据的散布或分发过程中追溯源头，其包含水印嵌入和水印提取。水印嵌入是指将标识信息嵌入到数据或文件中，使其具备一定的标识度；水印提取是指...
蓝图编辑器精选案例实战
如何通过合并请求进行数据分发 在画布编辑器页面，选择 全部资产 栏，单击添加需要配置交互的组件至画布编辑器中，以 通用标题、多行文本 和 数字翻牌器 组件为例。选择通用标题组件，在右侧数据配置面板单击配置数据源，按照如下方法设置...
创建DataHub项目
阿里云流数据处理平台DataHub是流式数据（Streaming Data）的处理平台，提供对流式数据的发布（Publish），订阅（Subscribe）和分发功能，让您可以轻松构建基于流式数据的分析和应用。前提条件 您已经完成了 创建RDS MySQL数据库表。操作...
目标Logstore无数据怎么处理？
您将数据加工结果分发至目标Logstore后，如果目标Logstore中无数据，可参见本文解决。场景一：加工语句中的存储目标与创建数据加工任务页面中的存储目标不一致 名为website_log的Logstore中有5000条数据，其中SourceIP为192.0.2.54的数据有...
MaxCompute数据迁移至OSS
本文为您介绍如何使用...fileFormat":"csv","nullFormat":"null","object":"qweee.csv","writeMode":"truncate"},"stepType":"oss"}],"type":"job","version":"2.0"} 在OSS控制台中查看新增的表数据。详情请参见 控制台下载文件。
基本概念
当写入分布式表时，数据会被自动分发到集合中的各个本地表中；当查询分布式表时，集合中的各个本地表都会被分别查询，并且把最终结果汇总后返回。云数据库ClickHouse 的表从存储引擎上，可以分为单机表、复制表两种类型。类型 说明 区别 ...
MaxCompute数据迁移至OTS
order":{"hops":[{"from":"Reader","to":"Writer"}]},"setting":{"errorLimit":{"record":"0"},"speed":{"throttle":false,"concurrent":1,"dmu":1 } } } 在表格存储控制台中查看新增的表数据。登录 表格存储控制台。在左侧导航栏上，单击...
冷数据归档常见问题
为什么PolarDB控制台导航栏中没有冷数据归档这个菜单？申请开启冷数据归档功能成功后，会有一定的延迟，等待几分钟刷新页面后即可出现冷数据归档菜单。冷数据文件的格式是什么？目前支持CSV、IBD 和ORC格式。如何判断当前表或分区是否归档...
并行查询Hint语法
参数 说明 strategy 数据分发策略，包括：PQ_ONEPHASE：数据根据分组键分发到多个worker中，一次性并行完成分组聚集操作。PQ_TWOPHASE_GATHER：数据在现有worker中完成局部聚集，再汇总到Leader上完成最终汇总。PQ_TWOPHASE_HASH：数据在...
常见问题
支持的数据库部署位置（接入方式）阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...
数据脱敏
对分发的数据添加水印，不会影响分发数据的正常使用。仅支持从RDS中提取水印。水印功能具有以下特点：安全性：数据水印不会因为数据改动而导致水印信息丢失，保障数据水印被准确鉴别。透明性：在原始数据中嵌入水印标记信息且不易被察觉，...
通过DataV展示数据
在 设置数据源 面板中，选择 数据源类型 为 数据库，已有数据源 为第一步中创建的数据源。在 SQL 脚本编辑区域，输入以下SQL语句。SELECT count(*)/100 as value FROM target_table where dts_operation_flag='I' 单击 数据响应结果 右侧的...
关系图
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据建模，在下拉框中选择对应工作空间后单击 进入数据建模。进入关系图。在智能数据建模页面，单击顶部菜单栏的 关系图，进入关系图页面。首次使用关系图的用户，可通过如下入口...
什么是蓝图编辑器
无 左侧规则器模板 管理：统一在 DataV控制台首页我的数据代码片段管理 中进行管理代码片段。添加：在逻辑节点右侧 配置 面板中的 处理方法 数据编辑框内右键单击，可将之前保存为模板的代码片段导入直接应用。无 节点编程界面右下角的预览...
恢复数据
前提条件 实例已产生备份集，您可以在GDB控制台中，获取当前实例的数据备份信息。更多信息，请参见 查看备份文件列表。注意事项 数据恢复仅支持将备份数据恢复至另一个新建GDB实例中，不支持将备份数据恢复至当前实例。操作步骤 登录 图...
数据保护伞入门
当一列非空数据中，满足上述识别条件的数据大于指定阈值时，则命中该规则，会将该数据识别为当前类型的敏感数据。本文示例阈值配置为50%，即当某列数据中，满足上述条件的数据超过50%时，则将其识别为敏感数据。配置完成后，单击 发布使用...
DataWorks数据服务对接DataV最佳实践
如下所示：关系型数据库：RDS、DRDS、MySQL、PostgreSQL、Oracle和SQL Server 分析型数据库：AnalyticDB NoSQL数据库：TableStore和MongoDB 登录 DataWorks控制台，单击左侧导航栏的 数据服务，在下拉框中选择对应工作空间后单击 ...
只读节点Online Promote
Replica节点在内存中通过日志回放得到的数据信息，在OnlinePromote的过程中需要确认哪些数据可以写入共享存储。Replica节点在内存中回放WAL日志时，缓冲区淘汰方法和不刷脏的特性与主库节点截然不同，OnlinePromote过程中应该如何处理。...
添加区块链服务数据源
本文档为您介绍在DataV中添加区块链服务数据源的方法，以及相关参数配置说明。使用阿里云区块链服务（Blockchain as a Service，简称BaaS），您可以通过REST API调用智能合约，查询链上信息，也可以查询区块及交易信息。前提条件 已准备好...
配置自定义区域右下角组件数据
可视化应用创建完成后，您可以通过以下方式配置全国疫情分布可视化应用中右下角自定义区域内组件的数据。前提条件 已完成可视化应用的创建，详情请参见 创建可视化应用。参见 快速选中自定义区域面板内组件，选择自定义区域右下角面板内的...
配置自定义区域右下角组件数据
可视化应用创建完成后，您可以通过以下方式配置全国疫情分布可视化应用中右下角自定义区域内组件的数据。前提条件 已完成可视化应用的创建，详情请参见 创建可视化应用。参见 快速选中自定义区域面板内组件，选择自定义区域右下角面板内的...
添加日志服务SLS数据源
本文档介绍在DataV中添加日志服务SLS数据源的方法，以及相关参数配置说明。日志服务（Log Service，简称SLS）是针对实时数据的一站式服务。前提条件 已准备好待添加的日志服务SLS数据源。添加日志服务SLS数据源操作步骤 登录 DataV控制台。...
数据水印
水印嵌入方式（必选）您可选择如下嵌入方式：数据水印：是指将标识信息通过一定方式嵌入到数据中，该水印信息数据使用者难以察觉。文件水印：是指将标识信息通过一定方式嵌入到文件中，该水印信息数据使用者可以直接看到。数据水印信息/...
调优集群性能
TopN算子 云原生数据仓库 AnalyticDB MySQL 版 在进行TopN计算时（例如SQL中有 ORDER BY id LIMIT m,n），当 m 较大时，云原生数据仓库 AnalyticDB MySQL 版 中的TopN算子会缓存较多数据在内存中，以完成最终的全局排序，这个过程会消耗较...
CLB释放和挂载
当您在使用ClickHouse集群实例进行大规模数据处理并希望确保高效负载均衡时，云数据库ClickHouse集群会默认为您挂载CLB。挂载CLB后，ClickHouse集群将实现自动故障转移，通过健康检查分配流量至正常节点，确保集群高可用。挂载CLB属于依赖...
发展历程
MaxCompute通过全国首批大数据平台稳定性认证，被证明为韧性型系统。深度参与和推动全球大数据领域标准化建设 MaxCompute代表阿里巴巴计算平台，成为国际TPC（Transaction Processing Performance Council）委员会大数据评测标准BigBench的...
使用DMS数据追踪进行恢复
DMS的数据追踪功能可以快速按需找到目标时间段内的相关更新，并生成逆向回滚语句，追踪完的数据可批量生成回滚脚本，通过数据变更工单最终执行到数据库中完成数据的修复。当误操作受影响的数据量在10万以内时，您可使用该方法进行数据恢复...
厂商产线烧录设备证书
准备工作 设备厂商获取物联网平台颁发的设备证书后，需部署一个证书分发服务器，开发相应的服务端API和设备信息数据库表，用于分发设备证书信息。证书分发服务器的开发方案，请参见 设备从厂商云服务端获取证书。证书烧录方案 编程器、烧录...
权限管理
管理控制台_数据分发_管理 可以访问并设置「管理控制台_数据分发」模块，设置数据分发目的地及分发的数据内容。数据权限 数据权限名称 权限说明 管理控制台_${组织名称}_组织管理 可以在「管理控制台」查看此组织及组织下全部应用的信息...
创建逻辑模型：汇总表
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据建模，在下拉框中选择对应工作空间后单击 进入数据建模。在 智能数据建模 页面的顶部菜单栏，单击 维度建模，进入 维度建模 页面。创建汇总表。在 维度建模 页面，鼠标悬停至 ...
创建逻辑模型：应用表
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据建模，在下拉框中选择对应工作空间后单击 进入数据建模。在 智能数据建模 页面的顶部菜单栏，单击 维度建模，进入 维度建模 页面。创建应用表。在 维度建模 页面，鼠标悬停至 ...
名词解释
能力包括单个形态（以单个API、API+控制台的前端应用、数据模型类服务的形态展现）和组合形态（以一组API、一组数据模型、一组前端应用的形态展现）AIoT数字行业引擎 面向行业领域由多个AIoT开放能力预先组合构成的实例组合，数字行业引擎...
Binlog日志服务
多流服务不是默认开通的，需通过控制台手动开通，对于同一个 PolarDB-X 实例，可支持同时开通多个多流服务，每个多流服务中支持多个流，不同服务之间是完全隔离的，可设置不同的拆分数量、不同的数据拆分级别、不同的参数规则等，可根据...
重要组件
由于多个主机的数据库实例需要访问块存储上的同一份数据，常用的Ext4等文件系统不支持多点挂载，PolarDB数据库团队自行研发了专用的用户态文件系统，提供常见的文件读写查看接口，支持类似O_DIRECT的非缓存方式读写数据，还支持数据页原子...
从PolarDB MySQL版同步至Datahub
阿里云流式数据服务DataHub是流式数据（Streaming Data）的处理平台，提供对流式数据的发布、订阅和分发功能，让您可以轻松构建基于流式数据的分析和应用。通过数据传输服务（Data Transmission Service，简称DTS），您可以将 PolarDB ...
添加ClickHouse数据源
本文档介绍在DataV中添加ClickHouse数据源的方法，以及相关参数配置说明。前提条件 已准备好待添加的ClickHouse数据源。通过内网添加数据源操作步骤 登录 DataV控制台。在 我的数据 页签中选择 数据源管理，单击 添加数据。从 类型 列表中...
回刷设备数据
对设备进行设备分发，或对产品进行实例迁移操作后，需要获取设备被分发前或实例被迁移前，设备上报的数据。使用限制 最多回刷过去30天的设备历史数据。回刷数据成功后，会覆盖原有数据。前提条件 已开启设备数据备份。具体操作，请参见 ...
安装Agent
Agent程序是数据库审计系统提供的功能插件，您需要在用户终端、目标数据库服务器或连接数据库的应用服务器上安装Agent，用于将数据库访问流量转发到审计系统。本文介绍安装及卸载Agent的具体操作。安装位置 根据待审计的数据库类型，您需要...
Stream Load
负责接收数据并分发数据到其他数据节点，导入完成后返回结果。基本原理 Stream Load通过HTTP协议提交导入命令。如果提交到FE节点，则FE节点会通过HTTP Redirect指令将请求转发给某一个BE节点，您也可以直接提交导入命令给某一指定BE节点。...
数据建模诊断
复制表会在实例的每个存储节点保存一份完整的表数据，您在使用其他表和复制表JOIN时，不需要在网络间对复制表进行重分发，从而提升查询的性能，但是复制表在写入数据时会存在写入放大的问题，影响 AnalyticDB MySQL版 整体写入性能。...
- 产品推荐
- 这些文档可能帮助您