识别任务说明
文件或表扫描限制 为了避免数据源中文件或表过大影响整体扫描进度，数据安全中心对可以扫描的文件大小或表的字段大小做了限制，请您在进行敏感数据扫描前了解以下规则：结构化数据（RDS MySQL、RDS PostgreSQL、PolarDB等）、大数据...
分组聚合查询优化
分组聚合流程 AnalyticDB for MySQL 是分布式数据仓库，其分组聚合查询默认分为两步：完成数据的局部（PARTIAL）聚合。局部聚合节点只需要占用少量内存，聚合过程为流式过程，数据不会堆积在局部聚合节点上。局部聚合完成后，数据根据分组...
新建Paimon数据源
通过新建Paimon数据源能够实现Dataphin读取Paimon的业务数据或向Paimon写入数据。本文为您介绍如何新建Paimon数据源。权限说明 仅支持具备新建数据源权限的账号进行新建。更多信息，请参见 数据源权限说明。使用限制 Paimon数据源不支持以...
配置跨库Spark SQL节点
任务编排中的跨库Spark SQL节点，主要针对各类跨库数据同步和数据加工场景，您可以通过编写Spark SQL，完成各种复杂的数据同步或数据加工的任务开发。前提条件 支持的数据库类型：MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、...
设置列索引的排序键
总体流程如下：将所有的数据块进行两两分组，挑选出多个数据范围重合度较高的数据块组。将每个数据块组进行归并排序，生成两个有序的数据块。重复执行步骤2，直到所有的数据块有序排列。参数说明 您需要在数据库中设置下表中参数的值，来...
使用数据集成迁移数据到AnalyticDB MySQL 2.0
数据集成是阿里集团对外提供的稳定高效、弹性伸缩的数据同步平台，致力于提供复杂网络环境下、丰富的异构数据源之间数据高速稳定的数据移动及同步能力。支持的数据源类型 数据集成提供丰富的数据源支持，如下所示：文本存储（FTP/SFTP/OSS/...
窗口函数
qcut 将分组数据按顺序切分成n片，并返回当前切片值。如果切片不均匀，默认增加第一个切片的分布。nth_value 返回分组中的第n个值。cume_dist 计算分组中值小于等于当前值的行数占分组总行数的比例。各个窗口函数支持的参数说明如下。rank...
新建参数分组
本文介绍新建参数分组的详细操作。前提条件 已新建与应用版本对应的用例库版本。...【数据类型】字符串【取值范围】2～15任意字符【字符类型】中文、英文、大小写、数字、下划线 单击 确定，保存参数分组信息，新建参数分组在左侧列表显示。
混合存储型（已停售）
与 Redis社区版 不同，Tair 混合存储型整合了内存和磁盘二者的优势，在提供高速数据读写能力的同时满足了数据持久化的需求。说明 混合存储型已停止售卖，更多信息，请参见【通知】Redis混合存储型实例停止售卖。推荐选择 持久内存型 实例。...
新建租户
租户的总可使用资源=单节点分配资源量*资源分布节点数*副本数量 字符集 在 UTF8MB4、GBK 中选择数据库要用的字符集。时区 设定时区信息。访问 VPC 选择 ECS 所在网络的专有网络 ID。如果没有合适的 VPC，请根据页面提示创建一个 VPC，详情...
流程控制-AB测试组件
AB测试组件可以通过测试比较方案的效果，帮助...若AB测试节点的结束条件设置了进入AB测试的最大总人数，则可能有部分用户未参与随机分组的AB测试，此时可在右上角选择展示 全部用户 的数据，或选择 测试用户 仅展示参与了AB测试的用户的数据。
什么是云数据库 Memcache 版
云数据库 Memcache 版是基于内存的缓存服务，支持海量小数据的高速访问。云数据库 Memcache 版可以极大缓解对后端存储的压力，提高网站或应用的响应速度。云数据库 Memcache 版支持 Key-Value 的数据结构，兼容 Memcached 协议的客户端都可...
分组取出每组数据的前N条
本文将为您介绍如何对数据进行分组，取出每组数据的前 N 条数据。示例数据 目前的数据，如下表所示。empno ename job sal 7369 SMITH CLERK 800.0 7876 SMITH CLERK 1100.0 7900 JAMES CLERK 950.0 7934 MILLER CLERK 1300.0 7499 ALLEN ...
设置白名单
为保障 云数据库ClickHouse 数据库的安全稳定，系统默认禁止所有IP地址访问 云数据库ClickHouse 集群。在开始使用 云数据库ClickHouse 集群前，您需要将客户端的IP地址或IP地址段添加到 云数据库ClickHouse 的白名单中。本文介绍如何设置白...
垂直分组柱状图
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
GroupByField
在多元索引统计聚合中表示字段值分组，用于根据一个字段的值对查询结果进行分组，相同的字段值放到同一分组内，返回每个分组的值和该值对应的个数。请求数据结构 message GroupByField { optional string field_name=1;optional int32 size...
分组柱图（v3.0以下版本）
分组柱图是柱状图的一种，支持根据数据类目自动分组展示，能够更加清晰智能地展示各类别之间和各类别内部的数据差异，但在可视化应用中所占空间较大。本文介绍分组柱图各配置项的含义。配置 重要 本文介绍v3.0以下版本的分组柱图的配置项，...
分组柱状图
图表样式 分组柱状图是柱状图的一种，支持根据数据类目自动分组展示，能够更加清晰智能地展示各类别之间和各类别内部的数据差异，但在数据看板中所占空间较大。样式面板 搜索配置：单击 样式 面板右上角的搜索配置项图标，可在搜索配置面板...
设置白名单
为保障 云数据库ClickHouse 数据库的安全稳定，系统默认禁止所有IP地址访问 云数据库ClickHouse 集群。在开始使用 云数据库ClickHouse 集群前，您需要将客户端的IP地址或IP地址段添加到 云数据库ClickHouse 的白名单中。本文介绍如何设置白...
分组柱状图（v3.0及以上版本）
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
算子级别诊断结果
聚合算子聚合度低 过滤条件没有下推 Join存在数据膨胀 Join的右表过大 存在Cross Join 扫描算子读取字段个数较多 表扫描数据量倾斜 索引不高效 聚合算子聚合度低 问题 聚合算子的聚合度一般指GROUP BY分组聚合操作中的输入数据量和输出数据...
产品功能
您也可以通过 TSDB 产品控制台的数据查询功能进行数据分组、降采样、空间聚合的可视化数据查询展现。数据管理 数据时效设置 您可以通过控制台或者 API 设置数据的有效期。数据时效开启并设置完成后，系统对于定义的过期数据将立即标记失效...
监控与报警
HBase增强版使用云监控（开箱即用的企业级开放型一站式监控解决方案）实现系统的监控与报警。本文介绍如何配置监控和配置报警。监控 HBase增强版使用新版云监控，以实例为粒度组织和展示监控数据。目前有两种方式来查看某个HBase增强版实例...
怎么配置业务监控
四、列值分组 列值分组等同于SQL中的GroupBy功能，Group表示分组，By表示按分组列的值进行分组。列值分组的选值规则同黑白名单一致，按手动划选区域定位关键字。通过选取规则获取到的列值进行分组，用于抽象成为分组列如时间、数值、结果等...
混合存储型（已停售）
云原生内存数据库Tair 混合存储型整合了内存和磁盘二者的优势，在提供高速数据读写能力的同时满足了数据持久化的需求。说明 混合存储型已停止售卖，更多信息，请参见【通知】混合存储型实例停止售卖，推荐选择 持久内存型 实例。简介 图 1....
聚合优化和执行
基本概念 聚合操作（Aggregate，简称Agg）表示按照GROUP BY指定列对输入数据进行聚合的计算，或者不分组对所有数据进行聚合的计算。PolarDB-X 支持以下聚合函数：COUNT SUM AVG MAX MIN BIT_OR BIT_XOR GROUP_CONCAT 本文介绍均为不下推的...
新功能发布记录
OceanBase 数据库之间的数据迁移 支持 TiDB 数据库至 OceanBase 数据库 MySQL 租户的结构迁移、全量迁移、增量同步、全量校验和反向增量 迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户 支持 PolarDB-X 1.0 数据库至 OceanBase ...
用户价值
数据资源平台为用户提供了一站式数据资产定义、生产、管理与服务平台，提供企业级数据资产构建能力和一致性使用体验，助力客户快速构建数据智能平台，实现数据资源统一管理，挖掘潜在规律，优化业务决策，让大数据真正的驱动客户业务。...
数据集成概述
数据集成是基于Dataphin构建的简单高效的数据同步平台，致力于提供具有强大的数据预处理能力、丰富的异构数据源之间数据高速稳定的同步能力。背景信息 面对各行各业对大数据的应用，数据集成会有很多的诉求，包括能够简单高效的配置大量...
在EMR上使用Sqoop与数据库同步数据时的网络配置
云数据库RDS Sqoop是用map任务同步数据，可以在任意节点上运行，而Sqoop任务需要配置连接RDS的内网地址来连接，所以，需要确保EMR集群的内网IP在RDS白名单里。EMR集群和RDS需要在同一个VPC网络内，以便于可以直接访问RDS地址。如果在不同的...
API概览
本产品（数据湖构建/2020-07-10）的OpenAPI采用 ROA 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，可...
项目分组管理
项目分组管理功能可以将已经创建的三维城市构建器项目进行分组归类，使得三维城市构建器项目变得有序且功能性一目了然。本文为您介绍项目分组管理功能的使用方法。操作步骤 登录 DataV控制台。在 三维城市构建器 页面，单击 我的分组 右侧...
项目分组管理
项目分组管理功能可以将已经创建的三维城市构建器项目进行分组归类，使得三维城市构建器项目变得有序且功能性一目了然。本文为您介绍项目分组管理功能的使用方法。操作步骤 登录 DataV控制台。在 三维城市构建器 页面，单击 我的分组 右侧...
分组功能&移动功能
分组管理功能可以将已创建的可视化应用进行分类，使可视化应用变得有序和方便管理。本文为您介绍DataV分组管理功能的使用方法。操作步骤 登录 DataV控制台。在 我的可视化 页面，单击 我的分组 右侧的+。在分组名称编辑框内，输入分组名，...
数据集成概述
数据集成是基于Dataphin构建的简单高效的数据同步平台，致力于提供具有强大的数据预处理能力、丰富的异构数据源之间数据高速稳定的同步能力。背景信息 面对各行各业对大数据的应用，数据集成会有很多的诉求，包括能够简单高效的配置大量...
新功能发布记录
开启安全访问代理 接入达梦数据库 新增 全面直接接入达梦数据库（DM），包括数据导入、数据查询、数据变更、数据导出、数据服务与数据可视化等功能。支持的数据库类型与功能 数据类目 新增 对表进行分类，便于管理人员、开发人员及运维人员...
ModifySecurityIps
SecurityIPList String 是 127.0.0.1,192.168.0.0 白名单分组里的IP列表，多个IP白名单间用英文逗号（,）分隔。ModifyMode String 是 1 白名单修改模式，取值范围如下：0：覆盖修改白名单分组；1：新增白名单分组；2：删除白名单分组。返回...
新建数据源
相关操作 在数据源添加成功后，在 数据源管理 页面，可对数据源进行以下操作：操作 说明 查看数据源详情 在数据源列表，单击目标数据源 操作 列的 更多，选择 查看详情，查看数据源的基本信息和数据对象的表结构信息。编辑数据源 在数据源...
新建数据源
相关操作 在数据源添加成功后，在 数据源管理 页面，可对数据源进行以下操作：操作 说明 查看数据源详情 在数据源列表，单击目标数据源 操作 列的 更多，选择 查看详情，查看数据源的基本信息和数据对象的表结构信息。编辑数据源 在数据源...
添加 MySQL 数据源的白名单
本文为您介绍如何添加 RDS 实例、PolarDB 实例、VPC 内自建数据库和数据库网关类型 MySQL 数据源的白名单。背景信息 MySQL 数据源的实例类型包括 RDS 实例、PolarDB 实例、VPC 内自建数据库、数据库网关 和 公网 IP 自建数据库。公网 IP 是...
- 产品推荐
- 这些文档可能帮助您