DataWorks On CDP/CDH使用说明
二、数据建模与开发 模块 说明 相关文档 数据建模 数据建模是全链路数据治理的第一步，沉淀阿里巴巴数据中台建模方法论，从数仓规划、数据标准、维度建模、数据指标四个方面，以业务视角对业务的数据进行诠释，让企业内部实现“数同文”的...
Kafka实时入湖
本文为您介绍如何在数据湖构建（Data Lake Formation，简称DLF）中使用Kafka实时入湖任务将数据同步到数据湖中。重要 数据入湖功能已经停止更新，如果您有数据入湖需求请参考：数据入湖停止更新公告。前提条件 已开通数据湖构建服务，尚未...
常见问题
DAS企业版 V3超出最近7天的数据，采用的存储方式是冷数据存储，相较DAS企业版 V1数据的存储方式，数据没有全文索引等信息，并且底层采用snappy对数据进行高效压缩，所以数据量最多可降低为旧版的30%，从而极大降低了存储成本。如何查看企业...
DataWorks On MaxCompute使用说明
二、数据建模与开发 模块 描述 相关文档 数据建模 数据建模是全链路数据治理的第一步，沉淀阿里巴巴数据中台建模方法论，从数仓规划、数据标准、维度建模、数据指标四个方面，以业务视角对业务的数据进行诠释，让企业内部实现“数同文”的...
BigQuery数据迁移至MaxCompute
前提条件 类别 平台 要求 参考文档 环境及数据 谷歌云GCP 已开通谷歌BigQuery服务，并准备好环境及待迁移的数据集。已开通谷歌Cloud Storage服务，并创建存储分区（Bucket）。如果您没有相关环境及数据集，可参考如下内容准备：BigQuery：...
开通并配置OSS存储分析
EMR Doctor支持分析OSS上的数据，开通OSS存储分析功能可以帮助您进一步了解OSS存储资源的使用情况和健康状态，让您更好地治理存储在OSS上的数据。背景信息 OSS提供了存储清单功能，配置该功能后会定期为Bucket生成清单文件，清单文件中保存...
版本发布记录
计费项 数据字典 支持控制台配置数据字典，当业务中有常量数据或者业务数据可以划分为业务事实表和业务维度表，通过数据字典来替代维度表，直接查询字典获得维度数据，增加查询效率。数据字典 资源队列 解决开源版中单个大查询消耗资源过多...
最佳实践
RDS MySQL全密态数据库能够对数据库查询结果中的数据进行加密和脱敏保护，任何非授权人员均无法查看被保护数据明文内容。本文介绍如何通过全密态客户端驱动EncJDBC快速使用并验证RDS MySQL全密态数据库功能。前提条件 RDS MySQL实例的大...
Flink VVP+DLF数据入湖与分析实践
背景信息 阿里云实时计算Flink版是一套基于Apache Flink构建的实时大数据分析平台，支持多种数据源和结果表类型。Flink任务可以利用数据湖统一存储的优势，使用Hudi结果表或Iceberg结果表，将作业的结果输出到数据湖中，实现数据湖分析。在...
任务列表
内核小版本升级 内核大版本升级 迁移实例 开通SSL 开通TDE RDS PostgreSQL 任务列表管理的任务 任务 云盘 创建实例 支持 创建只读实例 支持 克隆实例 支持 一键上云 支持 升级数据库大版本 支持 升级数据库小版本 支持 重启实例 支持 调整...
生命周期管理介绍
功能说明 您可以通过生命周期管理对数据湖中的数据库、数据表配置数据管理规则，可以基于数据最后访问时间、分区值、分区/表最后修改时间、分区/表创建时间四种规则类型，对数据定期进行存储类型转换，从而节省数据存储成本。同时，可以...
任务列表
内核小版本升级 内核大版本升级 迁移实例 开通SSL 开通TDE RDS PostgreSQL 任务列表管理的任务 任务 云盘 创建实例 支持 创建只读实例 支持 克隆实例 支持 一键上云 支持 升级数据库大版本 支持 升级数据库小版本 支持 重启实例 支持 调整...
设置透明数据加密
在安全合规或静态数据加密等场景下，推荐使用透明数据加密TDE功能，对数据文件执行实时I/O加密和解密，通过在数据库层执行静态数据加密，阻止可能的攻击者绕过数据库直接从存储中读取敏感信息，有效提高数据库中敏感数据的安全性。...
C100售后支持相关问题
说明 如果服务器与数据库审计系统之间的网络无法连通，则一个数据库审计实例只能对一台服务器中的数据库进行审计。示例三，您在阿里云账号A下有5台服务器，阿里云账号B下也有5台服务器。您只需连通每台服务器与数据库审计系统之间的网络，...
常见问题
数据安全中心DSC根据为不同行业预先定义的敏感数据关键字段，扫描MaxCompute、OSS、阿里云数据库服务（RDS、PolarDB-X、PolarDB、OceanBase、表格存储等）和自建数据库中的数据，通过敏感数据规则，判断和打标敏感数据，为数据安全审计、...
任务列表
内核小版本升级 内核大版本升级 迁移实例 开通SSL 开通TDE RDS PostgreSQL 任务列表管理的任务 任务 云盘 创建实例 支持 创建只读实例 支持 克隆实例 支持 一键上云 支持 升级数据库大版本 支持 升级数据库小版本 支持 重启实例 支持 调整...
导出至OSS
云原生数据仓库AnalyticDB MySQL版 支持通过外表和INSERT INTO方式将 AnalyticDB MySQL版 数仓版（3.0）中的数据导出到对象存储OSS（Object Storage Service）中。将数据导出到OSS功能只支持CSV和Parquet格式文件。前提条件 在 对象存储 ...
极简模式控制台
本文介绍数据管理DMS控制台的极简模式，包含如何进入、退出极简模式以及注意事项。前提条件 开通 DMS 服务。功能优势 界面简洁、易上手、操作空间大。可以随时查找目标数据库实例，无需反复切换到控制台首页标签页。注意事项 新用户首次...
导入数据并查询
本文以数据文件存储在OSS中为例，介绍如何将OSS中的数据文件导入 AnalyticDB for MySQL 的 adb_demo 数据库中并进行查询。前提条件 通过以下步骤在OSS中创建存储 AnalyticDB for MySQL 数据的目录。开通OSS服务。详情请参见 开通OSS服务。...
设置透明数据加密TDE
对数据文件执行实时I/O加密和解密，确保敏感数据在写入磁盘之前进行加密，从磁盘读入内存时进行解密，阻止可能的攻击者绕过数据库直接从存储中读取敏感信息，有效提高数据库中敏感数据的安全性。使用TDE功能不会增加数据文件的大小，开发...
常见问题
本文为您介绍执行MaxCompute准备工作过程中的常见问题。问题类别 常见问题 开通MaxCompute DataWorks与MaxCompute的区别是什么？如何区分DataWorks工作空间和MaxCompute项目？开通MaxCompute服务时，如何根据本身数据存储量以及计算任务...
创建Oracle数据源
通过创建Oracle数据源能够实现Dataphin读取Oracle的业务数据或向Oracle写入数据。本文为您介绍如何创建Oracle数据源。背景信息 Oracle是一款可移植好、可靠性好、适应高、功能强大的关系型数据库。如果您使用的是Oracle，在对接Dataphin...
用自然语言实时查看BI报表
相关内容 相关文档 关于PolarDB for AI PolarDB for AI使用说明 PolarDB for AI算法介绍 通过AAT连接AI和数据库表 自然语言到数据库查询语言转义 通义千问大模型数据推理和交互 更多免费体验 您可以前往 PolarDB for AI：在数据库中通过SQL...
应急恢复
RDS MySQL提供应急恢复功能，该功能基于Copy Data Management（CDM）技术，通过开启DBS沙箱，您可以快速创建出应急数据库实例（本文称为沙箱实例），使备份数据快速可用。多个沙箱实例之间的读写不会互相影响，也不会影响源数据库，可用于...
应急恢复
RDS MySQL提供应急恢复功能，该功能基于Copy Data Management（CDM）技术，通过开启DBS沙箱，您可以快速创建出应急数据库实例（本文称为沙箱实例），使备份数据快速可用。多个沙箱实例之间的读写不会互相影响，也不会影响源数据库，可用于...
功能发布记录 2022年之前
提供的实时数据同步功能，可以将源端数据库中部分或全部表的数据变化实时同步至目标数据库中，实现目标库实时保持和源库的数据对应。利用解决方案可以实现全增量一体化同步。2021.4.15 全部地域。解决方案介绍 实时同步介绍 2020-07 功能...
NL2BI：用自然语言实时查看BI报表
相关文档 关于PolarDB for AI PolarDB for AI使用说明 PolarDB for AI算法介绍 通过AAT连接AI和数据库表 自然语言到数据库查询语言转义（NL2SQL）通义千问大模型数据推理和交互 更多免费体验 您可以前往 PolarDB for AI：在数据库中通过SQL...
使用流程
6 数据操作 根据需要进行数据操作，您可以插入一行数据、更新一行数据、读取一行数据、删除一行数据、导入数据或者导出数据。更多信息，请参见 数据操作。7 使用SQL查询数据 重要 只有支持SQL查询的地域才能使用该功能。SQL查询支持的地域...
创建实例
您可以通过 云原生多模数据库 Lindorm 控制台创建Lindorm实例。本文介绍创建Lindorm实例的步骤，以及创建过程中各个参数的含义。前提条件 已注册阿里云账号。具体操作请参见 注册阿里云账号。免费试用 阿里云提供免费试用 云原生多模数据库...
查看与减少数据备份
本文介绍如何在DBS中查看备份数据大小，同时提供减少备份的方法。查看备份大小 备份大小=全量数据备份的大小+增量数据备份的大小 登录 DBS控制台。单击左侧导航栏中的 备份计划，然后在上方选择目标地域。单击目标备份计划名称，进入 备份...
管理样本数据集
实例中不能存在与数据集同名的数据库 adb_sampledata_tpch，如果存在同名数据库，会导致数据集加载失败。数据集加载耗时约6~8分钟，数据集加载期间可能会影响实例的其它操作，例如新增节点、节点规格变配等。新建实例加载样本数据集 登录 ...
数据探索简介
运行查询 登录 数据湖构建控制台，在左侧菜单中选择 数据探索。左侧数据库/表区域，会列举出当前账户下所有元数据库和元数据表。您可以在此区域查看元数据表的基础信息，或者生成数据预览SQL语句。在右侧SQL编辑器区域，输入SQL语句。本...
开通LTS
LTS服务规模推荐 迁移数据量 同步服务节点配置 同步服务节点数 n核 8 GB 1 1T核 8 GB 2~5 10T核 8 GB 5以上 购买LTS 登录 HBase管理控制台。在 集群列表 页面，单击 创建BDS集群。按照界面提示设置以下购买参数。参数 说明 商品类型 选择 ...
Lindorm实时入湖建仓分析
DLA Lakehouse实时入湖方案利用数据湖技术，...常见问题 Q：为什么Lindorm中开通数据湖分析后，下拉选择入湖表没有显示已创建的表？A：目前数据湖分析仅支持有Schema的表，即Lindorm通过CQL创建的表。更多信息，请参见 Lindorm CQL操作文档。
集群实例工作台
说明 开通数据库代理服务 2.0 版本的集群暂不支持部署方案切换。节点分布 显示当前集群实例的节点分布。可用区 显示当前集群实例的可用区。CPU 架构 显示当前集群实例的 CPU 架构。存储类型 显示当前集群实例的存储类型。当存储类型为 ESSD...
冷数据归档常见问题
为什么PolarDB控制台导航栏中没有冷数据归档这个菜单？申请开启冷数据归档功能成功后，会有一定的延迟，等待几分钟刷新页面后即可出现冷数据归档菜单。冷数据文件的格式是什么？目前支持CSV、IBD 和ORC格式。如何判断当前表或分区是否归档...
数据备份
云数据库 OceanBase 控制台提供高可用、高性能的备份功能，支持针对 OceanBase 集群实例的数据备份。备份方式 OceanBase 支持以下两种备份方式：定期自动备份：通过预设的备份调度策略，定期自动备份。可设置按周或者按月固定时间启动全量...
读写AnalyticDB for PostgreSQL数据
语法示例3 msck repair database dla_adbpg_db 如果AnalyticDB for PostgreSQL中的表数据太大或者无法确认AnalyticDB for PostgreSQL的对应数据库中有哪些表时，您可以在DLA中执行以下SQL命令自动识别AnalyticDB for PostgreSQL对应数据库...
从PolarDB MySQL版同步至Elasticsearch
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据同步。在 同步作业列表 页面顶部，选择同步的目标实例所属地域。定位至已购买的数据同步实例，单击 配置...
产品优势
本文介绍 云原生多模数据库 Lindorm 与其他开源数据库的区别。背景信息 云原生多模数据库 Lindorm 兼容HBase、Cassandra、S3、TSDB、HDFS、Solr等多种标准接口，支持宽表、时序、对象、文本、队列、空间等多种数据模型，适用于日志、账单、...
- 产品推荐
- 这些文档可能帮助您