使用DataWorks数据服务生成API
在 新增数据源 弹出框中，单击 大数据存储 模块下的 Lightning。在 新增Lightning数据源 弹出框中，输入 数据源名称、Lightning Endpoint 等相关信息，完成后单击 测试连通性，连通性测试通过后即可完成数据源的创建。说明 参考 配置 JDBC ...
影响查询性能的因素
如果查询需要处理的数据量较大，就可能会长时间占用大量的资源，导致整体查询效率降低，进而影响最终的查询效果。此外，如果 AnalyticDB MySQL版 中表存储的数据量较大，那么在执行索引过滤、明细数据读取等操作时也会出现相互争抢磁盘I/O...
表分布定义
数据倾斜会导致部分计算节点存储的数据过多，查询负载大，查询耗时变长。因此请不要选择bool类型、时间日期类型的列作为分布键。选择经常作为查询条件的列作为分布键，可以实现按分布键进行节点裁剪。您可以选择一个或多个列作为分布键，...
查询物理表数据
数据查询提供通过SQL查询预览数据资源，为开发人员和数据应用人员提供全面直观的数据呈现。本文介绍如何查询物理表数据。前提条件 已新建云计算资源，具体操作，请参见 新建云计算资源。操作步骤 登录企业数据智能平台。在页面左上角，单击...
创建数据脱敏场景
在 数据分析 通过 SQL查询 功能查询数据时，查询的敏感数据会按照配置的脱敏规则进行脱敏。说明 EMR引擎暂不支持使用数据开发展示脱敏，Hologres引擎暂不支持使用数据开发/数据地图展示脱敏。数据分析展示脱敏 在 数据分析 通过 SQL Notes ...
INSERT INTO
数据流表支持写入新的数据行，本文介绍通过DML语句将值插入流表中。语法 INSERT INTO[catalog_name.][db_name.]stream_name VALUES values_row[,values_row.]values_row:(val1[,val2,.])参数说明 参数 是否必选 说明 catalog_name 否 目标...
通用数据开发
说明 上图中，虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示：数据产生：业务系统每天会产生大量结构化的数据，存储在业务系统所对应的数据库中，包括MySQL、Oracle和RDS等类型。数据收集与存储：您需要同步...
新建SQL查询
查询数据 支持项目数据和数据源。项目数据：即查询当前项目计算源的数据。数据源：即查询数据源的数据。包括MySQL和Oracle数据源。查询数据源数据需要选择对应数据源。若无可选数据源，可以单击+新建数据源 进行新建。单击 确定，完成SQL...
新建SQL查询
查询数据 支持项目数据和数据源。项目数据：即查询当前项目计算源的数据。数据源：即查询数据源的数据。包括MySQL和Oracle数据源。查询数据源数据需要选择对应数据源。若无可选数据源，可以单击+新建数据源 进行新建。单击 确定，完成SQL...
查询物理表数据
数据查询提供通过SQL查询预览数据资源，为开发人员和数据应用人员提供全面直观的数据呈现。本文介绍如何查询物理表数据。前提条件 已新建云计算资源，具体操作，请参见 新建云计算资源。操作步骤 登录 数据资源平台控制台。在页面左上角，...
引擎功能
数据查询 支持通过SQL进行数据查询，兼容基于OpenTSDB协议的查询API等方式进行数据查询。用户也可以通过产品控制台的数据查询功能进行数据分组、降采样、空间聚合等可视化数据查询展现。数据管理 数据库管理 时序数据的存储以Database为...
友盟数据分析
查询数据 服务开通成功之后，等待一段时间您就可以看到友盟自动为您的阿里云账号创建了一个名为 integration_biz_ump_databank 的数据库，这个数据库下面会有各种不同的数据明细表。您可以在DLA的 SQL执行 页面进行数据查询了。如果您要...
基本操作
Transaction Table2.0 支持更多能力，同时在DDL，DML和DQL以及数据管理上都...DDL操作 表操作 分区和列操作 CLONE TABLE 数据写入 SQL写入 Flink近实时写入 数据查询：Time travel查询与Incremental查询 数据合并：COMPACTION 数据备份与恢复
数据标准
数据是由特定的环境产生的，这些环境因素包括生产者、时间、系统等，从而造成了同一个语义的数据，有...说明 目前使用DDM进行数据建模可以进行逻辑建模和物理建模，但物理建模仅支持MaxCompute和Hive两种大数据引擎，不支持自定义数据源类型。
查询账单
本文介绍如何查看在使用DAS过程中产生的费用明细。消费类型说明 账单中存在两种消费类型，下表列出两种消费类型包含的具体费用，详细的费用说明，请参见 产品计费。...在 计费项 为 查询数据量 的消费明细中，查看数据查询的费用。
开发Dataphin数据源并加速数据查询
开发Dataphin数据源即将Dataphin中的逻辑表和物理表配置为供应用调用的Dataphin数据源，同时您可以为已开发的Dataphin数据源所在的计算空间添加Hologres加速计算源，以满足对查询速度有要求的业务场景。本文为您介绍如何开发Dataphin数据源...
云产品集成
大数据开发治理平台 DataWorks DataWorks 是一款为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台。您可以使用 DataWorks 添加 ApsaraDB For OceanBase 数据源，管理 OceanBase 数据库中的数据，通过数据集成...
新建及管理动态脱敏规则
动态脱敏是在不更改基础数据的情况下，仅改变最终展示的查询结果数据；脱敏规则用于管理脱敏的数据范围及具体的脱敏方式。本文为您介绍如何新建及管理动态脱敏规则。背景信息 动态脱敏规则常用于查询某些敏感的生产数据场景。对满足条件的...
新建及管理动态脱敏规则
动态脱敏是在不更改基础数据的情况下，仅改变最终展示的查询结果数据；脱敏规则用于管理脱敏的数据范围及具体的脱敏方式。本文为您介绍如何新建及管理动态脱敏规则。背景信息 动态脱敏规则常用于查询某些敏感的生产数据场景。对满足条件的...
心选市场售卖
本文介绍如何购买流数据服务Confluent商品。购买流程 在阿里云云市场流数据服务Confluent商品售卖页中点击“立即购买”，跳转至流数据服务Confluent集群创建管控页。在流数据服务Confluent集群创建管控页进行集群配置和商品购买。操作步骤 ...
数据归档至专属存储
注意事项 删除归档数据后，不可进行归档后查询数据、恢复已归档数据至源库操作。操作步骤 进入 数据归档工单列表 页面，视图 选择 工单视图。选择目标工单，单击 操作 列下的 详情。进入 数据归档工单列表 页面，在 执行 区域，单击目标...
集成与开发概览
离线集成是一种低代码的数据开发工具，您可以组合各类任务节点，形成数据流，通过周期调度运行达到数据加工、数据同步的目的，进而对在线数据库、数据仓库的数据进行加工处理并同步至目的端。流式ETL。更多信息，请参见 流式ETL。通过可视...
API概览
DescribeColumnsV2 查询数据资产表中列的数据V2 调用DescribeColumns接口查询数据安全中心连接授权的MaxCompute、RDS等数据资产表中列的数据。DescribeOssObjects 查询OSS的存储对象列表 调用本接口查询连接授权的OSS的存储对象列表。...
数据查询
本文介绍数据查询的相关问题。物理表查询支持的云计算资源类型包含哪些？物理表查询支持的云计算资源类型包含哪些？目前包含的有MaxCompute、RDS MySQL、PostgreSQL、AnalyticDB PostgreSQL、AnalyticDB MySQL 3.0、SQLServer、Oracle、...
查询并下载数据
根据项目的计算源或数据库SQL类型，编写查询数据的代码，单击 运行。如下图所示：查询语句执行成功后，可以在 结果 页签查看数据。下载结果数据 查询语句执行成功后，按照下图操作指引，可下载查询到的结果数据。支持完整数据下载或样例...
上海新能源汽车车辆基础数据
客户感言 2019年开始上海市新能源汽车大数据平台从自建Hadoop集群迁移至阿里云Lindorm+DLA Spark产品，有效解决了我们平台存储和计算的横向动态扩容瓶颈，同时借助其产品中间件LTS实现了我们平台数据的冷热分离，有效降低了数据存储成本，...
查询并下载数据
根据项目的计算源或数据库SQL类型，编写查询数据的代码，单击 运行。如下图所示：查询语句执行成功后，可以在 结果 页签查看数据。下载结果数据 查询语句执行成功后，按照下图操作指引，可下载查询到的结果数据。支持完整数据下载或样例...
使用DBLink跨库查询数据
PolarDB PostgreSQL版（兼容Oracle）提供了DBLink功能，您可以通过DBLink功能实现跨库查询数据。本文介绍如何通过DBLink跨库查询数据。前提条件 已创建源集群和目标集群。具体操作，请参见 创建PolarDB PostgreSQL版（兼容Oracle）集群。...
SQL限流（rds_ccl）
当您的数据库遇到高并发挑战或特定SQL语句资源消耗过高时，云数据库RDS PostgreSQL为您提供了SQL限流功能。该功能可以有效防止特定SQL语句导致的资源过度消耗，确保您的数据库系统稳定运行，更好地服务业务需求。背景 SQL限流是一种重要的...
SQL限流（rds_ccl）
当您的数据库遇到高并发挑战或特定SQL语句资源消耗过高时，云数据库RDS PostgreSQL为您提供了SQL限流功能。该功能可以有效防止特定SQL语句导致的资源过度消耗，确保您的数据库系统稳定运行，更好地服务业务需求。背景 SQL限流是一种重要的...
调用Dataphin数据源
操作流程 步骤一：查询并申请Dataphin数据源 在数据服务市场中，查询符合您业务场景的Dataphin数据源。查询到后申请该Dataphin数据源的调用权限。步骤二：调用Dataphin数据源 根据调用Dataphin数据源示例，进行调用Dataphin数据源。步骤一...
CREATE STREAM
数据流表仅支持新增数据，不支持更新数据和删除数据。本文介绍如何通过DDL语句创建流表。语法 CREATE STREAM[IF NOT EXISTS][catalog_name.][db_name.]stream_name({|<metadata_column_definition>}[,.n][][,.n])[COMMENT table_comment]...
数据源配置常见问题
本文介绍在DataV中连接数据源时，遇到的常见问题及相应的解决方法。数据库连接不成功，如何解决？请根据数据库的网络类型和所在地域，将相应的DataV服务器IP地址加入到您...优化数据库查询：例如根据常用SQL查询条件，建立相关索引加速查询。
数据源配置常见问题
本文介绍在DataV中连接数据源时，遇到的常见问题及相应的解决方法。数据库连接不成功，如何解决？请根据数据库的网络类型和所在地域，将相应的DataV服务器IP地址加入到您...优化数据库查询：例如根据常用SQL查询条件，建立相关索引加速查询。
开通消息引擎
在 选择数据引擎 部分，按需选择 流数据节点规格 与 流数据节点数量。创建实例后开通消息引擎 在 实例列表 点击对应实例，进入 实例详情 页面，在左侧菜单选择 流引擎 标签页，点击 立即开通 按钮。在购买页面按需选择 流数据节点规格 与 ...
PolarDB的高级脱敏
阿里云将 PolarDB MySQL版 集群代理（Proxy）的脱敏功能与 DMS 的敏感数据保护功能集成，当 DMS 识别到敏感数据后，会根据脱敏规则自动对数据进行脱敏，并实时同步到PolarDB的Proxy，最后通过应用程序等工具查询数据。高级脱敏功能具有但不...
入门概述
快速入门简要介绍了如何快速上手数据资源平台，包括不限于数据的接入、治理、建模等。本文介绍数据资源平台入门概述。快速使用说明 准备工作：在使用...查询数据：在数据查询模块中预览插入到物理表的表数据，具体操作，请参见 物理表查询。
API概览
DescribeDBInitializeVariable 查询数据库属性 查询PolarDB PostgreSQL版（兼容Oracle）或PolarDB PostgreSQL版数据库支持的字符集、排序规则等属性。ModifyDBDescription 修改数据库备注说明 修改PolarDB MySQL版数据库的备注说明。全球...
加速服务
数据服务支持对部分数据源表的查询提供加速能力，加速能力包含DataWorks数据服务提供的加速能力和MaxCompute本身支持的加速方案（MCQA）。通过使用加速服务，您可以在调用API时提高数据查询的速率和性能。本文为您介绍两种加速方案的使用...
数据查询
数据查询为用户提供对云计算资源中物理表基本情况的概览能力，帮助用户直观了解物理表基础信息、字段内容分布等情况，建立对数据表的宏观理解，为建立数据标准、定义数据模型、定义数据加工逻辑等工作提供基础依据。如果数据表格存储的是...
- 产品推荐
- 这些文档可能帮助您