通过整库迁移配置集成任务
如需将全量历史数据写入对应的不同分区，可在单次同步后使用SQL任务处理写入目标表相应分区，或者选择每日同步增量数据，然后进行补数据操作补全历史分区。数据过滤 来源库非 HIve、MaxCompute 每日同步时的过滤条件：如配置了 ds=${...
数据导入性能优化
如Lineitem表按l_shipdate列做二级分区，数据范围横跨7年，按年做分区有7个分区，按日做分区有2000多个分区，单分区约3000万条记录，选择按月或者按年做分区则更合适。导入后，数据建模诊断中如有不合理的二级分区，则选择的分区键不合适。...
数据导入性能优化
如Lineitem表按l_shipdate列做二级分区，数据范围横跨7年，按年做分区有7个分区，按日做分区有2000多个分区，单分区约3000万条记录，选择按月或者按年做分区则更合适。导入后，数据建模诊断中如有不合理的二级分区，则选择的分区键不合适。...
扩容数据盘
不同操作系统的具体操作，请参见：扩容分区及文件系统（Linux系统）扩容文件系统（Windows系统）扩容分区及文件系统（Linux系统）本示例中，扩容前轻量应用服务器内数据盘容量为40 GB，扩容后数据盘容量为60 GB。说明 轻量应用服务器内数据...
小文件优化及作业诊断常见问题
解决措施 建议您将此表修改为分区表，每个SQL语句插入的数据写入单独的分区里，这样便可以执行并发操作。运行作业时，报错ODPS-0130121，如何解决？问题现象 运行作业时，返回报错如下。FAILED:ODPS-0130121:Invalid argument type-line 1:...
迁移演练项说明
当前系统中使用了不稳定的网卡接口命名模式（eth0，eth1），这种命名方式在升级后无法保证命名可靠性，以及可能会导致升级后网络连接问题，需要先处理并修改这种命名方式，否则升级无法继续。具体操作，请参见 出错提示“Unsupported ...
基本概念
Apache Kafka 一款开源的分布式数据流处理平台，可以实时发布、订阅、存储和处理数据流。更多信息，请参见 Apache Kafka。云消息队列 Kafka 版 一款由阿里云提供的Apache Kafka全托管服务，具备免部署、免运维、低成本、高弹性、高可靠、高...
使用须知
违规者最高处以关停并锁定实例的处罚，并做清退处理。禁止使用ECS针对淘宝等电商网站从事刷单、刷销量、刷广告、进行虚假网站交易的网络行为。不要卸载相关硬件的驱动程序。不要随意修改网卡MAC地址。建议不要开启SELinux。对于4 GiB以上...
更换操作系统相关问题
通过更换操作系统扩容系统盘失败，如何处理？通过更换操作系统（系统盘）对系统盘进行扩容时，可能会因为超时导致分区扩容不生效。针对未扩容成功的系统，请参考 扩容分区和文件系统（Linux）手动扩展分区。该方式只是扩展系统盘分区，不会...
CREATE TABLE
使用范围或哈希分区时，分区键可以包含多个列或表达式（最多 32 个，但在构建 PolarDB时可以更改此限制），但对于列表分区，分区键必须由单个列或表达式组成。范围和列表分区需要 btree 运算符类，而哈希分区需要哈希运算符类。如果没有...
版本发布说明
修复CoHash的Right分区函数计算结果不正确导致的分区路由问题，发布日期：2023-12-27 大版本：V5.4.18 小版本：17034692 类别 说明 新增&优化 新增支持AUTO模式数据库的co_hash分区策略。优化使用AB表方案进行事务日志清理的流程，避免一次...
云电脑池（原桌面组）概述
例如：统一调整一组云电脑的规格 统一更新一组云电脑的镜像 统一更改一组云电脑的安全策略 应用场景 云电脑池功能具有以下特点：云电脑池内的云电脑均采用同一云电脑模板和同一安全策略，在配置和使用上没有差异。云电脑池内的云电脑数量并...
PolarDB MySQL版8.0.2版本发布日志
修复分区表的所有分区在分区剪枝阶段都被裁剪掉的情况下，使用RANGE INDEX访问分区表的全局二级索引时，触发ASSERT CRASH（断言错误）的问题。修复将冷数据归档为ORC格式时，因表中存在Blob类型的字段导致归档失败的问题。修复MRR等场景下...
升级配置
轻量应用服务器系统盘的默认分区名称为/dev/vda1，默认分区类型为MBR分区。运行以下命令，查看分区信息。df-Th 轻量应用服务器 中系统盘分区（/dev/vda1）的默认文件系统类型为ext4。查询结果如下图所示，文件系统大小仍为升级前的40 GB，...
上下游存储
增量MaxCompute源表监听到新分区时，如果该分区还有数据没有写完，如何处理？MaxCompute连接器运行报错：ErrorMessage=Authorization Failed[4019],You have NO privilege 如何填写增量MaxCompute的startPartition参数？为什么带有增量...
Linux系统CPU使用率和负载高排查方法
操作场景 在您使用轻量应用服务器实例过程中，可能会遇到实例CPU使用率或CPU负载持续较高的情况，您可以按照以下步骤排查定位具体问题。找到影响CPU使用率或CPU负载过高的具体进程。排查影响CPU使用率或CPU负载过高的进程是否正常，并分类...
产品整体介绍
在将表数据分布到各个存储节点后，在单个节点上根据业务场景可对表数据进行分区，在执行具体查询时进行分区裁剪，缩小查找和数据处理范围。AnalyticDB PostgreSQL版 支持范围和列表分区类型，同时支持多级分区。下图展示了一张用户表显示...
投递日志到MaxCompute（旧版）
投递任务是批量执行的，请谨慎设置分区列及其类型，保证一个投递任务内处理的数据分区数小于512个，否则该批数据都无法写入MaxCompute。系统保留字段_extract_others_有曾用名_extract_others_，可兼容使用。MaxCompute分区列的值不支持...
新功能发布记录
服务器迁移中心SMC功能更新信息请参见 SMC新功能发布记录。更多有关阿里云最新产品动态，请订阅 云产品动态。2024年 2024年3月 功能名称 功能概述 发布时间 发布地域 相关文档 共享私有池 将私有池共享给其他阿里云账号或者基于资源目录在...
FineBI
主机 MySQL服务器地址，可以是本机或者远程服务器地址。端口 MySQL的端口号，通常为3306。用户名 在MySQL服务器中创建的用户名。密码 用户名对应的密码。数据库连接URL 系统自动生成连接URL。完成上述参数配置后，单击 启用新数据库，开始...
创建和管理自定义存储表
物联网平台数据服务提供离线数据存储功能，支持自定义分区表、事务表和时序表。自定义存储表可以作为数据服务中数据解析、SQL分析任务和数据可视化的数据源，可以作为数据解析、SQL分析任务的结果输出表，可以集成时序表数据到实时计算...
客户端及连接池
连接池功能开启后，将有效减少服务器到后端分区的连接数，最大化的复用连接，但其实现与HybridDB for MySQL的支持紧密相关；启用连接池后，单行事务的每条语句都将附带当前库名和当前全量环境变量到后端HybridDB for MySQL，单行事务语句...
漏洞公告|NSS内存损坏漏洞（CVE-2021-43527）
NSS验证证书的方式中存在一个远程代码执行缺陷，该缺陷允许冒充TLS/SSL服务器的攻击者对使用NSS编译的客户端触发堆溢出的问题，此外，在使用NSS编译的服务器应用程序中处理客户端证书时也会触发堆溢出的问题。漏洞信息 漏洞编号：CVE-2021-...
Linux实例SWAP分区的配置和常见问题处理
概述 本文介绍在Linux实例中，如何配置SWAP分区和常见问题处理。详细描述 SWAP分区介绍 在Linux系统中的SWAP（交换分区），类似于Windows系统的虚拟内存。系统会把一部分硬盘空间虚拟成内存使用，将系统内非活动内存换页到SWAP，以提高系统...
原理
需要将二级分区的这些属性填入一级分区（或者生成的一级分区中），后续等待二级分区创建时递归处理。实际创建模块 第三步为实际创建模块。将节点列表转换成创建列表。将之前用来代表子节点的PartitionRelNode节点转换成CreateStmt节点，...
重置消费位点
按分区消费位点进行重置：如果只有少量分区产生消息堆积，可以仅重置指定分区的消费位点，避免重复消费其他分区中已正确处理的消息。操作步骤 登录 云消息队列 Kafka 版 控制台。在 概览 页面的 资源分布 区域，选择地域。在 实例列表 页面...
OSS性能与扩展性最佳实践
如果您在上传大量文件（Object）时，在命名上使用了顺序前缀（如时间戳或字母顺序），可能会出现大量文件索引集中存储于存储空间（Bucket）中的某个特定分区的情况。此时如果您的请求次数过多，会导致请求速率下降。出现此类问题时，建议您...
表设计规范
单个分区中数据量较大的情况下，MaxCompute执行任务时会进行分片处理而不影响分区裁剪的优势。单个分区中文件数较多时，会影响MaxCompute Instance数量，造成资源浪费和SQL性能的下降。采用多级分区时，建议先按日期分区，然后按交易类型...
创建和管理基于企业AD账号的办公网络
如果AD域控服务器和DNS服务器部署在不同服务器上，请确保AD域控服务器的DNS已指向DNS服务器的IP地址。已创建 云企业网 实例，并将企业AD所属VPC和 办公网络 VPC加入同一个 云企业网 实例。关于如何创建 云企业网 实例，请参见 创建云企业网...
CREATE TABLE（AUTO模式）
Hash分区与Key分区是 原生MySQL的标准分区语法 之一，PolarDB-X 为提供灵活强大的分区管理能力（例如分裂、合并与迁移等）以及考虑支持向量分区键下热点散裂，PolarDB-X 不仅在语法上尽量兼容了MySQL的Hash分区与Key分区的建表语法...
EMR Kafka磁盘故障运维
对于Kafka集群，您还需要考虑Topic分区副本数据是否可以从其他Broker节点分区副本同步恢复。本文以EMR Kafka 2.4.1版本为例，介绍Kafka磁盘故障运维的操作。业务场景 Kafka将日志数据存储到磁盘中，当磁盘出现故障时，会导致磁盘IO能力下降...
MaxCompute数据迁移
单个任务处理的最多分区数量,仅用于"同region项目迁移"仅⽤于同Region项目迁移。⼀个MMA⼦任务可以同时迁移⼀个表的多个分区，该配置指定可以同时迁移的分区数量。meta api访问并发量 获取源项目时的访问并发量，建议值为20。表黑名单,格式...
超级计算集群概述
计算：支持NVSwitch，算力高达312T（TF32）处理器与内存配比为1:8 处理器：采用第三代Intel ® Xeon ® 8369可扩展处理器（Ice lake），基频2.9 GHz，全核睿频3.5 GHz，支持PCIe 4.0接口 存储：I/O优化实例 仅支持ESSD云盘和ESSD AutoPL云...
IIS Web网站访问故障
本文介绍的IIS Web网站访问故障相关问题如下：访问部署在Windows实例上的基于IIS搭建的Web网站时，提示“500-内部服务器错误”，如何处理？如何在Windows实例的IIS网站中设置禁止通过IP地址直接访问？基于IIS配置的网站因服务端口被占用...
HASH
把数据按照哈希规则打散到不同的分区上，支持表达式来对分区列的值进行处理。CREATE TABLE.PARTITION BY[LINEAR]HASH(expr)[PARTITIONS number](PARTITION partition_name1,PARTITION partition_name2,.);参数 参数名称 参数说明 expr 分区...
更换ECS实例的专有网络VPC时产生报错的处理方法
错误三的处理方法：SLB中释放后端服务器 请确认ECS实例未加入SLB的后端服务器，如已加入SLB的后端服务器，请在SLB中释放后端服务器。SLB中如何移除后端服务器，请参见 移除后端服务器。错误四的处理方法：确认ECS实例的安全组与目标安全组...
应用白名单
云安全中心支持应用白名单的功能，可防止您服务器上有未经过认证或授权的程序运行，为您提供可信的资产运行环境。本文介绍如何使用应用白名单功能。使用前须知 应用白名单为公测功能，目前已不再支持申请该功能。已申请并正在使用中的用户...
什么是子分区
子分区（SUBPARTITION）用于把分区表划分为更小的子集，这些子集会存储在相同或不同的服务器上。如果对一个分区划分了子分区，那么每个分区都至少有一个子分区。如果对一个表划分了子分区，那么数据不会存储在在任何分区表中，而是会存储于...
Linux实例中数据恢复
在处理磁盘相关问题时，您可能会碰到操作系统中数据盘分区丢失的情况。本文介绍了Linux系统下常见的数据盘分区丢失的问题以及对应的处理方法，同时提供了使用云盘的常见误区以及最佳实践，避免可能的数据丢失风险。前提条件 在修复数据前，...
示例
本文为您介绍分区剪枝示例，以便您掌握使用分区剪枝。示例：SELECT EXPLAIN 语句用于显示语句的执行计划。您可以使用 EXPLAIN 语句来确认是否从查询的执行计划中剪去分区。首先，创建一张简单表：CREATE TABLE sales(dept_no number,part_...
- 产品推荐
- 这些文档可能帮助您