默认数据交换是通过 JSON。所有返回的结果都使用标准的 HTTP 响应代码,并使用特定的格式返回错误。下表列出了 TSDB 提供的与数据读写和管理相关的所有 API。关于如何使用每个 API 的具体说明,请点击描述中提供的链接查看相应文档。API ...
迁移分组评估结果 迁移分组是迁移数据库包含的应用的最小子集,迁移单个应用分组不会对其他分组的数据库节点产生数据依赖。迁移分组包括 应用节点 以及 数据库节点。单击应用节点可以查看单个应用节点的评估改造内容。单应用评估主要分为...
若您需要在SQL变更或结构设计中快速载入多个数据库,可以创建一个数据库分组,将多个数据库环境、引擎类型相同的数据库绑定成为一个分组。本文介绍如何创建数据库分组。背景信息 当您的业务部署在多个地域,且存在多个数据库时,您每次做...
数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
说明 DataWorks工作空间和数据源不在同一地域或不在同一个阿里云主账号下,您还需通过 VPN网关 或 高速通道 等方式,将独享资源组绑定的VPC与数据源所在VPC网络打通,并手动添加路由指向目标数据库IP,保障两个网络间可达。详情请参见 配置...
说明 资源组是在单个云账号下将一组相关资源进行统一管理的容器,一个资源只能归属于一个资源组,详情请参见 资源分组和授权。配置VPC网络和交换机。网络类型固定为 VPC 专有网络,无需选择。请确保 PolarDB 与需要连接的ECS创建于同一个...
说明 资源组是在单个云账号下将一组相关资源进行统一管理的容器,一个资源只能归属于一个资源组,详情请参见 资源分组和授权。配置VPC网络和交换机。网络类型固定为 VPC 专有网络,无需选择。请确保 PolarDB 与需要连接的ECS创建于同一个...
步骤1:完成基础配置 基础配置包括购买集群的基础需求(计费类型、地域可用区)以及集群所需的基础资源(数据库引擎、集群计算规格、数据库代理、存储)。完成基础设置后,单击 下一步:集群配置。前往 PolarDB集群购买页面。选择 计费类型...
步骤1:完成基础配置 基础配置包括购买集群的基础需求(计费类型、地域可用区)以及集群所需的基础资源(数据库引擎、集群计算规格、数据库代理、存储)。完成基础设置后,单击 下一步:集群配置。前往 PolarDB集群购买页面。选择 计费类型...
实时数据消费功能包含高速数据导入API和实时数据源消费两部分,可实现数据直接写入Segment(分片单元),避免通过COPY或INSERT方式造成的Master写入负载高的问题,也可实现使用 AnalyticDB PostgreSQL版 单产品直接消费Kafka数据。...
保障资源组与数据源之间网络连通后,您还需保障资源组与数据源之间不会因为白名单的限制而无法进行数据访问,例如,部分数据源设置白名单后会不允许白名单外的IP访问,您需要将资源组的IP添加至数据源的白名单中。本文为您介绍白名单相关...
说明 DataWorks工作空间和数据源不在同一地域或不在同一个阿里云主账号下,您还需通过 VPN网关 或 高速通道 等方式,将独享资源组绑定的VPC与数据源所在VPC网络打通,并手动添加路由指向目标数据库IP,保障两个网络间可达。详情请参见 配置...
分组聚合流程 AnalyticDB for MySQL 是分布式数据仓库,其分组聚合查询默认分为两步:完成数据的局部(PARTIAL)聚合。局部聚合节点只需要占用少量内存,聚合过程为流式过程,数据不会堆积在局部聚合节点上。局部聚合完成后,数据根据分组...
在多元索引统计聚合中表示获取统计聚合分组中的行,用于在对查询结果进行分组后获取每个分组内的一些行数据,可实现和MySQL中ANY_VALUE(field)类似的功能。请求数据结构 message TopRowsAggregation { optional int32 limit=1;optional ...
建议您向一个云监控中已经存在的应用分组推送自定义监控数据,云监控应用分组是针对多种云产品的逻辑分组,向一个已存在的应用分组推送自定义监控数据将使您在需要使用云监控等相关功能时保留扩展的能力。云监控会自动聚合您上报到云监控的...
在IPsec-VPN连接传输数据的过程中,将使用AES、DES等算法加密数据,使用SHA、MD5等哈希函数进行身份认证,使用DH分组进行密钥交换。您在创建IPsec连接时可以指定加密算法、认证算法和DH分组,关于IPsec-VPN连接具体支持的加密算法、认证...
加密解密流程 所有加密解密操作均在内存中进行,内存中的数据是明文,磁盘中的数据是密文,这可以避免因磁盘被盗而产生的数据泄露问题,同时数据库的使用方式保持不变,没有适配成本。数据库启动时会从KMS获取KEK,从而解密DEK,解密后的...
qcut 将分组数据按顺序切分成n片,并返回当前切片值。如果切片不均匀,默认增加第一个切片的分布。nth_value 返回分组中的第n个值。cume_dist 计算分组中值小于等于当前值的行数占分组总行数的比例。各个窗口函数支持的参数说明如下。rank...
数据集成是稳定高效、弹性伸缩的数据同步平台,致力于提供复杂网络环境下、丰富的异构数据源之间高速稳定的数据移动及同步能力。使用限制 数据同步:支持且仅支持结构化(例如RDS、DRDS等)、半结构化、无结构化(OSS、TXT等,要求具体同步...
节点分组是某些拥有共同特性和数据出口的终端节点组合。凭证分配给节点分组后,分组内的节点可使用凭证接入网络。本文介绍创建节点分组、配置数据出口、添加节点入网和查看节点分组的上下行数据的全流程。背景信息 创建节点分组时,需要...
数据是由特定的环境产生的,这些环境因素包括生产者、时间、系统等,从而造成了同一个语义的数据,有多种不同的定义方法,给后期进行数据汇集和整合带来障碍。因此,数据处理的前奏就是数据标准化,数据标准作为一个统一的数据共识,在标准...
当您需要应对数据库磁盘IO性能瓶颈时,云数据库RDS PostgreSQL的通用云盘IO加速功能为您提供了一个高效的解决方案。本文档将详细介绍该技术的优势、适用场景和工作原理,帮助您在面临大规模或频繁数据读写需求时显著提升数据库性能。背景 ...
EMR Workflow的数据源中心支持配置数据源,以满足不同的数据存储和访问需求。本文为您介绍如何创建、编辑和删除数据源。使用限制 数据源所在的集群和运行工作流时选择的集群需要在同一VPC下。创建数据源 进入数据源中心页面。使用阿里云...
敏感数据识别 说明 从企业纷繁复杂的数据体系中找出重要、敏感的数据是敏感数据防护的关键,DataWorks支持管理员通过智能方式识别敏感数据。数据保护伞服务 此安全检测项为您检测哪些数据分级目前没有配置数据识别规则。未配置数据识别规则...
数据分组 设置组件数据分组的样式。可选 多组数据 和 两组对比。单击 图标,控制数据分组的显隐。说明 打开数据分组后,数据中需要配置两组及以上的trace字段。漏斗形状 漏斗的形状样式,可选 漏斗 和 金字塔 样式。说明 仅在开启 数据分组...
自动抽样数据 自动抽样到的数据是随机的,所以适用于对采集到的数据没有限制的场景。针对HBase、MySQL、MaxCompute、DataHub、Kafka数据源支持自动抽样数据,您可单击 自动抽样,进行抽样数据。说明 Kafka中支持json、csv、canal-json、...
适用场景 DataWorks智能建模可助力企业构建自身建模能力,挖掘企业的数据资产价值,例如:海量数据的标准化管理 企业业务越庞大数据结构就越复杂,企业数据量会随着企业业务的快速发展而迅速增长,如何结构化有序地管理和存储数据是每个...
删除源数据是通过无锁变更的方式进行,稳定快速,不会产生大事务。源数据会缓存在本地临时表中,如遇特殊情况,可以迅速恢复。如何查询已归档的数据 支持在DMS控制台查询已归档的数据。支持通过对应的数据库引擎查询已归档数据。指定归档...
自动抽样数据 自动抽样到的数据是随机的,所以适用于对采集到的数据没有限制的场景。针对HBase、MySQL、MaxCompute、DataHub、Kafka数据源支持自动抽样数据,您可以单击 自动抽样,进行抽样数据。说明 Kafka中支持json、csv、canal-json、...
在调用API时,为了防止资源组不能正常访问数据源,您需要在数据源中配置IP白名单,从而确保资源组的网络连通性。本文为您介绍不同资源组类型对应的IP白名单或其获取方式,以及在数据源中配置IP白名单时的注意事项。获取白名单IP地址:公共...
数据是在客户端时,用户用自己的密钥加密后发送给云数据库的。数据库无法直接接触到数据密钥,因此无法在非受信环境外解密并泄漏数据。全密态数据库如何保证密文数据还能被数据库处理?当数据需要被处理时,客户端通过远程证明确认服务端...
数据是在客户端时,用户用自己的密钥加密后发送给云数据库的。数据库无法直接接触到数据密钥,因此无法在非受信环境外解密并泄漏数据。全密态数据库如何保证密文数据还能被数据库处理?当数据需要被处理时,客户端通过远程证明确认服务端...
若您需要通过 AnalyticDB PostgreSQL版 访问外部异构数据源(HDFS、Hive和JDBC)时,可以使用异构数据源访问功能将外部数据转换为 AnalyticDB PostgreSQL版 数据库优化后的格式进行查询和分析。功能说明 外部数据源管理提供高性能的结构化...
空间数据管理页面内提供了我的主页、我的项目、我的数据和空间档案四大功能模块,用户可以在这里创建项目,上传数据和添加模型等。本文为您介绍空间数据管理页面的结构与功能,帮助您快速使用空间构建平台。进入空间构建平台 空间构建平台...
数据服务访问RDS实例情况说明 为了更好地保障用户通过DataWorks数据服务访问RDS实例的安全性,新增数据源 时,选择的数据源类型不同(实例模式、连接串模式),在DataWorks数据服务中封装API时将会有不同的提示和建议,详情如下:数据源...
空间数据管理页面内提供了我的主页、我的项目、我的数据和空间档案四大功能模块,用户可以在这里创建项目,上传数据和添加模型等。本文为您介绍空间数据管理页面的结构与功能,帮助您快速使用空间构建平台。进入空间构建平台 空间构建平台...
数据安全中心DSC根据为不同行业预先定义的敏感数据关键字段,扫描MaxCompute、OSS、阿里云数据库服务(RDS、PolarDB-X、PolarDB、OceanBase、表格存储等)和自建数据库中的数据,通过敏感数据规则,判断和打标敏感数据,为数据安全审计、...
当您使用云数据库RDS MySQL并需要提升数据处理速率和降低访问延迟时,阿里云为您提供了缓存数据持久化的高效方案,该解决方案通过整合云数据库Redis与RDS、云数据库Memcache与RDS协同工作,确保数据的高速访问和持久化存储,具备高吞吐、低...
PolarDB MySQL版 是阿里巴巴自研的云原生HTAP数据库。PolarDB MySQL版 100%兼容原生MySQL的多个版本,包括MySQL 5.6、MySQL 5.7和MySQL 8.0。PolarDB MySQL版 的企业版基于云原生架构、计算存储分离、软硬件一体化设计,为用户提供具备超高...
云下私有数据库 有两种方式访问云下私有数据库,一种是绑定弹性IP(EIP)访问数据库的公网地址,一种是将云下数据库通过高速通道和VPC网络互联。绑定EIP 如果云下私有数据库可以通过公网访问,则创建一个VPC网络类型的EMR集群。创建后如果...