ECS实例说明
大数据型 使用本地SATA盘作存储数据，存储性价比高，是大数据量（TB级别的数据量）场景下的推荐机型。说明 Hadoop、Data Science、Dataflow和Druid类型的集群支持Core节点；Zookeeper和Kafka类型的集群不支持Core节点。本地SSD型 使用本地...
Salesforce on Alibaba Cloud 数据处理附录
二、定义 在本附录中：2.1“数据保护法律”：主要是指本协议生效前和生效后中国不时颁布生效的个人信息保护、数据合规相关的法律和法规，包括但不限于《网络安全法》《消费者权益保护法》《数据安全法》《个人信息保护法》（仅为本协议之...
数据库代理发布记录
本文主要介绍了 PolarDB MySQL版 数据库代理的版本更新记录。关于版本或者主动运维升级的相关问题，可加钉钉群咨询，群号：51685000218。版本管理机制 当前 PolarDB MySQL版 数据库代理有两个版本管理机制：新购版本：用户新购买的实例的...
功能特性
EMR on ECS 功能集 功能 功能描述 参考文档 集群管理 创建集群 您可以轻松构建和运行Hadoop、Spark、Hive、Presto等开源大数据框架，以进行大规模数据处理和分析等操作。创建集群 释放集群 在完成EMR集群任务后及时释放集群，可以释放资源...
Hadoop集群迁移至DataLake集群
本文将详细阐述如何将您已有的旧版数据湖集群（Hadoop），高效地迁移至数据湖集群（DataLake），以下分别简称“旧集群”和“新集群”。迁移过程将充分考虑旧集群的版本、元数据类型以及存储方式，并针对这些因素，提供适应新集群的迁移策略...
注册EMR集群至DataWorks
DataWorks支持基于EMR（E-MapReduce）计算引擎创建Hive、MR、Presto和Spark SQL等节点，实现EMR任务工作流的配置、周期性调度和元数据管理等功能，保障数据生产及管理的高效稳定。本文为您介绍如何在DataWorks注册同账号或跨账号的EMR集群...
控制台发布记录
2022-11-20 集群保护锁 新增全局只读节点 在产品系列为多主集群（库表）的集群中，您可以通过增加全局只读节点的方式，来读取集群中所有读写节点的数据，以处理跨节点的汇聚库请求，而无需额外配置数据同步和部署独立的集群资源来实现数据...
使用MirrorMaker 2（on Connect）跨集群同步数据
本文通过示例为您介绍如何使用MirrorMaker 2（简称MM2）on Kafka Connect跨集群同步数据。背景信息 使用场景 Kafka MM2适用于下列场景：远程数据同步：通过MM2，Kafka数据可以在不同地域的集群进行传输复制。灾备场景：通过MM2，可以构建...
新建集群
本文介绍如何新建 云数据库ClickHouse 集群。前提条件 已注册阿里云账号。具体操作，请参见 注册阿里云账号。通过RAM用户（子账号）创建 云数据库ClickHouse 集群时，该RAM用户（子账号）必须拥有AliyunClickHouseFullAccess和...
SmartData常见问题
缓存模式：当计算性能受限于IO和存储吞吐时，您可以使用此模式，在计算集群的Core节点上增加或扩容磁盘，以开启数据缓存。Block模式：特殊场景，例如对元数据操作性能和一致性要求高时，使用此模式。JindoFS SDK和缓存模式的区别是什么？...
阶段一：基础防护建设
在该阶段，DataWorks为您提供了数据分类分级、规范数据开发流程、企业级身份认证、开源身份隔离等多个场景的最佳实践，帮助企业做好数据安全治理的相关基础防护工作。场景一：数据分级分类 无论在任何行业，数据分级分类都是监管首要检查的...
PolarDB MySQL版8.0.1版本发布日志
8.0.1.1.41 类别 说明 发布时间 新增功能和性能优化 列存索引中新增基于TopK下推的Left Join功能。支持为用户授予执行 SHOW_ROUTINE、FLUSH_USER_RESOURCES、FLUSH_TABLES、FLUSH_STATUS 和 FLUSH_OPTIMIZER_COSTS 命令的全局动态权限。...
创建集群
通过阿里云E-MapReduce（简称EMR），您可以轻松构建和运行Hadoop、Spark、Hive、Presto等开源大数据框架，以进行大规模数据处理和分析等操作。本文为您介绍在EMR on ECS上创建集群的操作步骤和相关配置，帮助您快速搭建和管理大数据集群。...
Tair小版本发布日志
为提升用户体验，云原生内存数据库Tair 会不定期地发布小版本，用于丰富云产品功能或修复已知缺陷。您可以参阅本文了解Tair小版本的更新说明。查询或升级实例的小版本 您可以通过控制台查看当前的小版本，具体操作及升级小版本的其注意事项...
创建Data Science集群
集群类型 Data Science：主要面向大数据+AI场景，提供Hive和Spark离线大数据ETL和TensorFlow模型训练，您可以选择CPU+GPU的异构计算框架，通过英伟达GPU对部分深度学习算法进行高性能计算。产品版本 默认最新的软件版本。组件版本 展示集群...
版本发布记录
计费项 数据字典 支持控制台配置数据字典，当业务中有常量数据或者业务数据可以划分为业务事实表和业务维度表，通过数据字典来替代维度表，直接查询字典获得维度数据，增加查询效率。数据字典 资源队列 解决开源版中单个大查询消耗资源过多...
DataWorks On CDP/CDH使用说明
一、数据集成 DataWorks的数据集成模块为您提供读取和写入数据至CDP/CDH Hive、CDP/CDH HBase的能力，您需要将Hive或HBase组件创建为 DataWorks的 Hive或HBase数据源，实现将其他数据源的数据同步至Hive或HBase数据源，或将Hive或HBase数据...
TDE透明数据加密
透明数据加密TDE（Transparent Data Encryption）通过在数据库层执行透明的数据加密，阻止可能的攻击者绕过数据库直接从存储层读取敏感信息。前提条件 支持的 PolarDB PostgreSQL版（兼容Oracle）的版本如下：Oracle 2.0（内核小版本2.0.14...
TDE透明数据加密
透明数据加密TDE（Transparent Data Encryption）通过在数据库层执行透明的数据加密，阻止可能的攻击者绕过数据库直接从存储层读取敏感信息。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 14（内核小版本14.5.1.1及以上）...
产品概述
什么是PolarDB PolarDB 是阿里巴巴自研的新一代云原生数据库，在计算存储分离架构下，利用了软硬件结合的优势，为用户提供具备极致弹性、高性能、海量存储、安全可靠的数据库服务。100%兼容MySQL和PostgreSQL生态，高度兼容Oracle语法。...
中国GMP附录合规包
such as computers or their applications,you must check the accessibility and data integrity of the stored data.3.You must develop an operation guide on how to back up and restore data and back up data on a regular basis to...
迁移HDFS数据到OSS-HDFS
如果您需要对HDFS数据进行备份、或者在HDFS存储空间不足且需要弹性扩展存储能力时，您可以通过阿里云EMR集群自动部署的Jindo DistCp工具将HDFS迁移数据到OSS-HDFS。OSS-HDFS与Hadoop生态系统兼容，将HDFS中的数据迁移到OSS-HDFS后，可以...
配置StarRocks集群以访问高安全数据集群
如果您所使用的数据集群开启了Kerberos身份认证，那么在查询高安全集群数据时，您需要使用正确的Kerberos凭证进行身份验证。为了确保您具有合适的权限来访问数据，建议您按照本文的操作步骤来配置StarRocks集群。前提条件 已创建包含了HDFS...
常见问题
A：PolarDB 是一个关系型数据库云服务，目前已在全球十多个地域（Region）的数据中心部署，向用户提供开箱即用的在线数据库服务。PolarDB 目前支持3种独立的引擎，分别可以100%兼容MySQL、100%兼容PostgreSQL、高度兼容Oracle语法，存储...
常见问题
但是，不建议直接将A shard B replica修改为C shard D replica，这样可能出现一些问题，尤其是集群中已经有数据存在的情况下，可能会导致集群的数据错误。建议新增一个逻辑集群配置支持C shard D replica，同时保留A shard B replica的配置...
密态运维及脱敏
在数据加密状态下，非授权DBA仅可见数据密文、无法进行涉及数据内容的运维操作，全密态数据库支持密态运维，允许DBA在获得用户授权后（BCL授权）可以正常运维，支持数据脱敏，确保DBA在提供密态运维的同时，仍然无法获取用户明文数据。场景...
密态运维及脱敏
在数据加密状态下，非授权DBA仅可见数据密文、无法进行涉及数据内容的运维操作，全密态数据库支持密态运维，允许DBA在获得用户授权后（BCL授权）可以正常运维，支持数据脱敏，确保DBA在提供密态运维的同时，仍然无法获取用户明文数据。场景...
密态运维及脱敏
在数据加密状态下，非授权DBA仅可见数据密文、无法进行涉及数据内容的运维操作，全密态数据库支持密态运维，允许DBA在获得用户授权后（BCL授权）可以正常运维，支持数据脱敏，确保DBA在提供密态运维的同时，仍然无法获取用户明文数据。场景...
术语表
本文介绍云原生分布式关系型数据库PolarDB-X使用过程中遇到的术语。控制台术语 名词 描述 地域 数据中心所在的地理位置。可用区 可用区是指在某一地域内，具有独立电力和网络的物理区域。同一可用区内实例之间的网络延时更小。集群（实例）...
功能特性
云数据库MongoDB版（ApsaraDB for MongoDB）完全兼容MongoDB协议，基于飞天分布式系统和高可靠存储引擎，提供多节点高可用架构、弹性扩容、容灾、备份回滚、性能优化等解决方案。本文介绍云数据库MongoDB版的功能特性。架构灵活 云数据库...
通过数据湖元数据DLF读写Hudi
EMR-3.38.3及后续版本的DataFlow集群，可以通过数据湖元数据DLF（Data Lake Formation）作为元数据读取DataLake集群或自定义集群中的数据。本文为您介绍Dataflow集群如何连接DLF，并读取Hudi全量数据。前提条件 已在E-MapReduce控制台上...
新功能发布记录
无 2023年11月 数仓版 类别 名称 说明 相关文档 新增 一键诊断 数仓版（3.0）推出一键诊断功能，可对指定时间段的集群运行状况发起诊断，结合监控数据、日志数据以及库表状态等信息进行联合分析，从集群的资源水位、负载变化、查询SQL、算...
个人隐私保护
全密态数据库可以用于个人隐私保护，防止用户隐私泄露，本文介绍将全密态数据库用于个人隐私保护的最佳实践。场景介绍 以某保险公司业务场景为例，保险公司投保人员信息表（person）如下，记录了用户隐私数据，现需对这些隐私数据进行加密...
个人隐私保护
全密态数据库可以用于个人隐私保护，防止用户隐私泄露，本文介绍将全密态数据库用于个人隐私保护的最佳实践。场景介绍 以某保险公司业务场景为例，保险公司投保人员信息表（person）如下，记录了用户隐私数据，现需对这些隐私数据进行加密...
性能测试方法（OLTP）
本文档介绍以Sysbench工具测试 PolarDB MySQL版 集群OLTP负载性能，您可以按照本文介绍自行测试对比，快速了解数据库系统的性能。测试工具 Sysbench是一个跨平台且支持多线程的模块化基准测试工具，用于评估系统在运行高负载的数据库时相关...
个人隐私保护
全密态数据库可以用于个人隐私保护，防止用户隐私泄露，本文介绍将全密态数据库用于个人隐私保护的最佳实践。场景介绍 以某保险公司业务场景为例，保险公司投保人员信息表（person）如下，记录了用户隐私数据，现需对这些隐私数据进行加密...
Jindo DistCp场景化使用指导
本文通过场景化为您介绍如何使用Jindo DistCp。前提条件 已创建相应版本的集群，详情请参见 创建集群。已安装JDK 1.8。根据您使用的Hadoop版本，下载 jindo-distcp-<version>.jar。Hadoop 2.7及后续版本，请下载 jindo-distcp-3.0.0.jar。...
Jindo DistCp场景化使用指导
本文通过场景化为您介绍如何使用Jindo DistCp。前提条件 已创建相应版本的集群，详情请参见 创建集群。已安装JDK 1.8。根据您使用的Hadoop版本，下载 jindo-distcp-<version>.jar。Hadoop 2.7及后续版本，请下载 jindo-distcp-3.0.0.jar。...
Jindo DistCp场景化使用指导
本文通过场景化为您介绍如何使用Jindo DistCp。前提条件 已创建相应版本的集群，详情请参见 创建集群。已安装JDK 1.8。根据您使用的Hadoop版本，下载 jindo-distcp-<version>.jar。Hadoop 2.7及后续版本，请下载 jindo-distcp-3.0.0.jar。...
Jindo DistCp场景化使用指导
本文通过场景化为您介绍如何使用Jindo DistCp。前提条件 已创建相应版本的集群，详情请参见 创建集群。已安装JDK 1.8。根据您使用的Hadoop版本，下载 jindo-distcp-<version>.jar。Hadoop 2.7及后续版本，请下载 jindo-distcp-3.0.0.jar。...
- 产品推荐
- 这些文档可能帮助您