建表概述
TTL不是精确的时间，即到期了之后数据会在某一段时间（不是固定时间）删除（只删除数据，表还会存在），因此可能会出现PK重复的问题。生产业务不建议使用TTL来管理数据的生命周期，建议使用 动态分区管理。call set_table_property('table_...
宽表模型设计
如果格式不匹配也会被当做脏数据丢弃，则会出现数据在表中能查询到，但是在多元索引中查询不到的情况。关于数据类型映射的更多信息，请参见 数据类型映射。字段名称 类型 vin_id Keyword v_color Keyword license_plate_number Text ...
Presto FAQ
Schema的Catalog类型必须是Hive，否则会出现如下报错：big_query only support hive catalog.如何调整查询RDS类数据源的并发度？以RDS为例，使用DLA扫描线上数据时，如果RDS实例规格比较小，可能无法支撑默认的JDBC Connector并发度。您...
Nginx Ingress异常问题排查
日志服务控制台 的日志和实际日志字段名称会有部分不同，已在下表列出，字段解释如下表所示。字段 说明 remote_addr/client_ip 客户端的真实IP。request/(method+url+version)请求的信息。包括请求的方法、URL以及HTTP版本。request_time ...
Nginx Ingress异常问题排查
日志服务控制台 的日志和实际日志字段名称会有部分不同，已在下表列出，字段解释如下表所示。字段 说明 remote_addr/client_ip 客户端的真实IP。request/(method+url+version)请求的信息。包括请求的方法、URL以及HTTP版本。request_time ...
历史版本常见问题
版本范围 5.1.x~5.3.x 广播表出现不一致或延迟等 现象描述 PolarDB-X 1.0 中的广播表，是为了满足以下业务场景：应用对一致性要求不高的表。很少发生变动的表。实现方式有Binlog异步复制和XA协议两种。这两种方式均无法保证数据的强一致性...
MySQL分库分表同步至Hologres（方案2.0）
例如，CPU、内存、网络等互相影响，可能会导致离线任务变慢或实时任务延迟等问题，甚至在资源不足的极端情况下，可能会出现任务被OOM KILLER杀掉等问题。步骤九：执行同步解决方案任务 在 数据集成 主站页面，单击左侧菜单栏的 同步任务 ...
数据归档至专属存储
如果待归档的源表中存在三个列联合主键（即三个相互关联的列共同构成该表的主键）或三个及以上的唯一键，可能会出现归档失败的情况。建议您在归档前对拥有三个列联合主键的源表进行充分测试，或者考虑使用DBS备份等其他归档方式。数据归档 ...
EMR Hive数据整库离线同步至MaxCompute
说明 此处会展示Hive数据源开发环境地的表列表和表结构，如果您的Hive数据源开发和生产环境的表定义不同，则可能出现任务在开发环境配置正常但提交生产运行后报错表不存在、列不存在的问题。读取Hive方法 基于HDFS文件读取数据：Hive ...
EMR Hive数据整库离线同步至MaxCompute
说明 此处会展示Hive数据源开发环境地的表列表和表结构，如果您的Hive数据源开发和生产环境的表定义不同，则可能出现任务在开发环境配置正常但提交生产运行后报错表不存在、列不存在的问题。读取Hive方法 基于HDFS文件读取数据：Hive ...
CDC问题
在解析Binlog数据中的 timestamp 字段时，CDC作业里配置 server-time-zone 参数，如果这个参数没有和您的MySQL服务器时区一致，就会出现这个问题。在DataStream中使用了自定义序列化器，例如 MyDeserializer implements ...
Windows系统使用第三方杀毒防护软件可能出现的问题...
一般而言，杀毒软件在正常情况下会保护系统不受病毒、木马的攻击影响，但是在某些特殊情况下，可能会因为兼容性问题，导致Windows操作系统出现上述异常问题。对此，本文主要介绍如下几点内容，希望对您有所帮助。杀毒软件原理 排查方法 ...
其他问题
ODP 不支持这种multisql类型的语句，因此会出现语法错误。解决方案：在实际业务中，批量更新使用多条 update 语句一条一条去更新，不仅性能差而且容易造成阻塞。因此建议通过 case when 编写成一条 SQL 语句来执行，语法示例如下：UPDATE ...
PolarDB MySQL版8.0.2版本发布日志
2023-05-24 问题修复 修复在RO节点回放宽表的Redo日志时，出现复制延迟的问题。修复查询混合分区表时使用order index优化，节点会崩溃的问题。修复截断混合分区（truncate hybrid partition）时，节点会崩溃的问题。修复查询语句中含有窗口...
PolarDB MySQL版迁移至云原生数据仓库 AnalyticDB ...
源库、目标库出现其他问题后的重试时间 在迁移任务启动后，若源库或目标库出现非连接性的其他问题（如DDL或DML执行异常），则DTS会报错并会立即进行持续的重试操作，默认持续重试时间为10分钟，您也可以在取值范围（1~1440分钟）内自定义重...
实时同步常见问题
原因之一就是同步的binlog变多，因为binlog是实例级别，即便配置的同步任务只同步了表A，那么没有在任务中的表B、表C等如果发生变更，也会生成binlog，这些额外增加的binlog就会使同步处理的速度变慢。实时同步中选择单库与选择多库的内存...
全增量同步任务运维
强制重跑 在某些特殊情况下，例如发现源端数据被污染、数据链路出现问题等，您可以单击 操作 列 更多>强制重跑 强制对源端所有表进行全增量初始化操作，将源端数据重新迁移到目标表中，以快速恢复数据。说明 仅Hologres和MaxCompute支持...
ALB健康检查异常排查方法
健康检查参数设置错误 监听端口问题 如果您是配置成功后健康检查出现异常，主要原因是后端服务器出现问题。可以通过以下三类原因进行排查。安全类防护软件问题 路由配置错误问题 后端服务器负载过高 解决方案 首次配置健康检查出现异常 ...
2021年
设置定时任务（pg_cron）计算节点变配过程中可读 V6.3.6.1之前版本，计算节点在变配过程中会对每张表进行数据重分布，存在表不可读写的限制；V6.3.6.1及以后版本，计算节点变配过程中所有表可读，且仅重分布的表不可写，从而降低计算节点变...
SQL Console新交互模式下变更表数据和结构（公测中）
备份：在变更前对数据进行备份，便于出现问题时将数据回滚到变更前的状态。更多信息，请参见 SQL备份与回滚。单击 直接执行 或 后台异步执行。查看执行结果。在执行结果区域，单击，查看任务详情，包含执行的脚本、日志、获取备份和任务...
Hologres维表
对于数据量比较大的维表，选择CACHE ALL时，可能会出现OOM或者Full GC耗时很久的情况，针对这个问题，可以选择以下两种解决方式：对于支持Cache All策略的维表，开启Partitionedjoin优化。3.6.0之前的版本，每个并发默认加载维表全量数据。...
RDS SQL Server迁移至DataHub
当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待迁移的表，分批配置任务。如需进行增量迁移，数据日志：需开启，备份模式设置为Full，且已成功执行过全量物理备份。如为增量迁移任务，DTS要求源数据库的数据日志保存24...
MySQL
API种类 Datastream和SQL 是否支持更新或删除结果表数据 是 特色功能 MySQL的CDC源表，即MySQL的流式源表，会先读取数据库的历史全量数据，并平滑切换到Binlog读取上，保证不多读一条也不少读一条数据。即使发生故障，也能保证通过Exactly ...
使用DTS迁移实例
临时表会在DTS实例释放后自动删除。public.dts_pg_class、public.dts_pg_attribute、public.dts_pg_type、public.dts_pg_enum、public.dts_postgres_heartbeat、public.dts_ddl_command、public.dts_args_session。若为全量迁移或增量迁移...
数据归档至RDS MySQL
本文为您介绍将数据归档至 RDS MySQL 的操作步骤。前提条件 支持如下类型的源数据...归档后的表会新增四列数据，不影响表原始数据的使用：归档信息（工单号和归档时间）数据库名称 表名称 实例ID（DMS录入实例时赋予的ID，与实例真实ID对应）
RDS PostgreSQL间的数据迁移
临时表会在DTS实例释放后自动删除。public.dts_pg_class、public.dts_pg_attribute、public.dts_pg_type、public.dts_pg_enum、public.dts_postgres_heartbeat、public.dts_ddl_command、public.dts_args_session。若为全量迁移或增量迁移...
数据归档至PolarDB MySQL版
本文为您介绍将数据归档至 PolarDB MySQL版 的操作步骤。前提条件 源数据库为：...归档后的表会新增四列数据，不影响表原始数据的使用：归档信息（工单号和归档时间）数据库名称 表名称 实例ID（DMS录入实例时赋予的ID，与实例真实ID对应）
Windows实例的Time_Wait连接不释放导致访问外网失败，...
本文介绍Windows实例的Time_Wait连接不释放，导致访问外网失败问题的问题描述、问题原因和解决方案。问题描述 当在Windows实例上可以 ping 通外网，但是无法使用浏览器访问外网、访问外网加载时间过长或者Windows实例上的应用联网异常时，...
恢复库表
本地盘实例如果恢复到原实例，恢复过程中会进行主备切换，RDS可能会出现约30~120秒的服务不可用，请确保您的应用有自动重连机制；恢复到新实例不会进行主备切换。重要 云盘实例使用库表恢复功能恢复数据到原实例时，不会进行主备切换，但...
常见问题
通过 云企业网体验馆 得到的数据仅供参考，由于连接质量、距离等外部因素，多次测试时，可能会出现不同的测试结果。如何使用云企业网实现三个账号的VPC实例互通？例如账号A下的VPC1、账号B下的VPC2、账号C下的VPC3需要互相通信，您可以将...
使用须知
问题描述：某些情况下，Phoenix对有些索引的主表回查会存在bug，在执行查询的时候,会出现异常。解决方法：通过冗余全部列，避免回查主表。RegionServer OOM的情况。问题描述：LookupJoin会在ScanRpc请求中发起Get请求，这个Get请求的...
实时数仓Hologres
说明 如果下游包含回撤算子（例如使用ROW_NUMBER OVER WINDOW去重），则需要设置upsertSource为true，此时源表会以Upsert方式从Hologres中读取数据。binlogStartupMode Binlog数据消费模式。String 否 earliestOffset 参数取值如下：...
数据归档至AnalyticDB PostgreSQL版
归档后的表会新增四列数据，不影响表原始数据的使用：归档信息（工单号和归档时间）数据库名称 表名称 实例ID（DMS录入实例时赋予的ID，与实例真实ID对应）方式二：通过 AnalyticDB PostgreSQL版 查询归档数据 具体的查询操作，请参见 查询...
RDS PostgreSQL同步至RDS MySQL
临时表会在DTS实例释放后自动删除。public.dts_pg_class、public.dts_pg_attribute、public.dts_pg_type、public.dts_pg_enum、public.dts_postgres_heartbeat、public.dts_ddl_command、public.dts_args_session。为保障同步延迟时间展示...
Hive作业异常排查及处理
在自建ECS上提交Hive作业异常 在自建ECS上提交Hive作业（不在EMR产品范围内），会出现不可预期报错。请使用EMR Gateway集群或者使用EMR-CLI自定义部署Gateway环境。更多信息，请参见 使用EMR-CLI自定义部署Gateway环境。数据倾斜导致的作业...
RDS PostgreSQL间的双向同步
UPDATE更新的记录不完全匹配 UPDATE要更新的记录在同步目标实例中不存在时，DTS会自动转化为INSERT，此时可能会出现唯一键的唯一性冲突。UPDATE要更新的记录出现主键或唯一键冲突。DELETE对应的记录不存在 DELETE要删除的记录在同步的目标...
通过Lindorm Shell访问宽表引擎
请勿使用HBase API的方式去访问基于SQL创建的宽表，可能会出现乱码。推荐在Linux或者macOS操作系统使用Lindorm Shell。在Windows系统使用Lindorm Shell时，可能会遇到报错或缺少库的问题，请根据报错信息自行在系统中添加相应的库。操作...
PolarDB MySQL版迁移至MaxCompute
警告 在选择附加列规则前，您需要评估附加列和目标表中已有的列是否会出现名称冲突，否则可能会导致任务失败或数据丢失。关于附加列的规则和定义说明，请参见 附加列名称和定义说明。增量日志表分区定义 请根据业务需求选择分区名称。关于...
自建Oracle迁移至DataHub
警告 在选择附加列规则前，您需要评估附加列和目标Topic中已有的列是否会出现名称冲突，否则可能会导致任务失败或数据丢失。关于附加列的规则和定义说明，请参见 附加列名称和定义说明。目标已存在表的处理模式 预检查并报错拦截：检查目标...
CREATE TABLE
维度表会在集群的每个分片存储一份数据，因此建议每个维度表中的数据量不宜太大，最好不超过2万行。DISTRIBUTED BY HASH(column_name,.)定义表的分布键。定义了分布键的表，又称普通表。AnalyticDB for MySQL 对分布键的值进行哈希计算，...
- 产品推荐
- 这些文档可能帮助您