迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle ...
对于无主键且包含 LOB 类型字段的表，反向增量会出现数据质量问题。如果源端字符集为 UTF-8，建议目标端使用兼容源端的字符集（例如，UTF-8、UTF-16 等），避免产生因字符集不兼容导致目标端出现乱码等问题。节点之间的时钟不同步，或者...
迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
转换后可以确保源端不同字符集中的数据能成功迁移至目标端，但割接后反向增量可能会出现数据超长无法写回源端的问题。如果源端存在包含时区信息的数据类型（例如 TIMESTAMP WITH TIME ZONE），请您确保目标端数据库支持并存在源端对应的...
如何把数据库迁移到RDS
详细信息 数据库迁移过程中，会出现数据库中断或者闪断的情况。如出现闪断的情况，请参见 更多信息。以下是不同数据库迁移到RDS的方法。RDS MySQL版 关于将MySQL数据库迁移到RDS，请参见 从自建MySQL迁移至RDS for MySQL。RDS SQL Server版...
时序引擎版本说明
功能优化 修复删除表操作后重新写入数据会丢失数据的问题。修复api/v2/write接口格式错误时出现的NPE问题。修复/api/mquery接口查询多值降采样错误。修复历史文件的存储容量没有达到最大上限时无法迁移至冷存储的问题。修复查询操作可能...
概述
随着业务的快速发展，企业数据呈几何倍增长，数据量庞大、复杂、各类数据间标准不一致，往往会出现数据难以管理的现象。DataWorks智能数据建模服务，将无序、杂乱、繁琐、庞大且难以管理的数据，进行结构化有序的管理。使企业中的数据产生...
2023年
无 缺陷修复 修复智能诊断功能统计表大小时可能会出现数字溢出的问题，现已将统计表大小的列由integer数据类型修改为bigint数据类型。修复分区表UPDATE分布键列时出现 tuple already updated by self 错误信息的问题。修复Master节点不回收...
AnalyticDB MySQL 2.0数据导入
说明 写入方式为insert时，会出现FLOAT类型数据错误的问题。column_name AnalyticDB for MySQL 2.0集群中表的列名。同步整个库的元数据（Meta）。meta-sync database database_name to catalog_name;参数 说明 database_name AnalyticDB ...
补数据
问题现象 补数据选择业务时间昨天和今天，会出现等待时间的情况。产生原因 从平台维度来看，业务时间昨天的数据，今天调度运行。补数据补对应业务时间的数据相当于重新执行了一次对应业务时间的周期实例。如果您需要过滤今天的周期实例，您...
离线同步常见问题
任务运行在独享数据集成资源上，日志中会出现如下信息：running in Pipeline[basecommon_S_res_group_xxx]。如果凌晨任务调度时偶尔失败，但重跑又能成功，请检查数据库在报错时间点的负载情况。如何切换数据集成任务执行资源组？您可以在 ...
2023年
修复并发插入数据过程中，会出现误报主键冲突的问题。2023年04月（V2.0.0.2）类别 功能 功能描述 相关文档 缺陷修复 修复实时写入时，执行Flush、Compact以及并发DDL等操作可能出错的问题。2023年03月（V2.0.0.1）类别 功能 功能描述 相关...
数据库迁移
背景信息 随着业务的发展，数据库会出现升降配、数据库整体迁移的需求，为支持此类业务场景，DMS推出数据库迁移功能，支持对多种数据库的结构、数据进行同构迁移，同时支持库名称修改、迁移前预校验、迁移后数据一致性校验及来源数据库的...
时空数据库版本发布记录
新增 ST_HasBinData 函数是否具有用户定义二进制数据获取。新增 ST_ClearBinData 函数支持二进制数据的清除。ST_Affine 函数使用根节点变换矩阵方式替代实际坐标值变换。SFMesh对象中Node节点允许使用NULL对象作为空节点，支持占位操作。ST...
时空数据库版本发布记录
新增 ST_HasBinData 函数是否具有用户定义二进制数据获取。新增 ST_ClearBinData 函数支持二进制数据的清除。ST_Affine 函数使用根节点变换矩阵方式替代实际坐标值变换。SFMesh对象中Node节点允许使用NULL对象作为空节点，支持占位操作。ST...
云数据库Redis实例间单向数据迁移
为避免该情况发生，建议将目标库的数据逐出策略设置为 noeviction，当目标库内存不足时，数据会写入失败，同时任务也会失败，但目标库不会因为数据逐出而丢失数据。关于数据逐出策略详情，请参见 Redis数据逐出策略介绍。源库中为什么会有 ...
2020年
ST_Width 2020年8月 缺陷修复 修复使用外部栅格数据会使用1*n分块导致性能局限性问题，允许用户通过存储选项自定义分块的大小。2020年8月 修复ST_Values函数在查询某些方向的线对象时结果与坐标排序不一致的问题。2020年8月 修复ST_...
确认表血缘
导致下游取数出现问题 若当前节点 Job_B 代码中配置了依赖A表的数据，但未将产出A表数据的节点 Job_A 作为当前节点依赖的上游，则可能会出现A表数据未产出，当前节点便开始执行，最终导致 Job_B 节点产出的表数据出现问题。虽然 Job_A 的...
从自建MySQL迁移至RDS实例
如果源库中待迁移的表没有主键或唯一约束，且所有字段没有唯一性，可能会导致目标数据库中出现重复数据。对于数据类型为FLOAT或DOUBLE的列，DTS会通过 ROUND(COLUMN,PRECISION)来读取该列的值。如果没有明确定义其精度，DTS对FLOAT的迁移...
时空引擎版本发布记录
修复由于栅格数据带有 NAN 和 INF 等数据，在导入和统计值会出错的问题。4.3 新特性 ST_PixelAsPolygon：将栅格像素转换为Polygon对象。ST_PixelAsPolygons：将栅格像素转换为Polygon对象集合。ST_PixelAsPoint：将栅格像素转换为基于点...
2020年
ST_Width 缺陷修复 修复使用外部栅格数据会使用1*n分块导致性能局限性问题，允许用户通过存储选项自定义分块的大小。修复ST_Values函数在查询某些方向的线对象时结果与坐标排序不一致的问题。修复ST_BestPyramidLevel函数在某些情况下会...
Binlog日志服务
例如，uk(name)=a先后被id=1和id=2的数据所持有，但因无法保证 delete(id=1,name=1)和 insert(id=2,name=a)在目标库的执行顺序，当 insert(id=2,name=2)先于 delete(id=1,name=1)执行时，会出现写入冲突。此类场景建议设置拆分级别为表级。...
数据授权
您授权允许 数据安全中心（DSC）访问MaxCompute、RDS和对象存储OSS数据时，可能会出现授权失败的情况。您可以参考以下原因排查数据授权问题。RDS连接授权失败有哪些原因？RDS数据库账号或密码输入错误。您自行删除了RDS访问白名单中 DSC ...
ST_BinData
返回用户自定义二进制数据。语法 bytea ST_BinData(sfmesh sfmeshObject);bytea ST_BinData(material material);参数 参数名称 描述 sfmeshObject SFMesh对象。material 材质对象。描述 返回用户自定义二进制数据。需要预先通过 ST_...
ST_BinData
返回用户自定义二进制数据。语法 bytea ST_BinData(sfmesh sfmeshObject);bytea ST_BinData(material material);参数 参数名称 描述 sfmeshObject SFMesh对象。material 材质对象。描述 返回用户自定义二进制数据。需要预先通过 ST_...
全增量同步任务运维
强制重跑 在某些特殊情况下，例如发现源端数据被污染、数据链路出现问题等，您可以单击 操作 列 更多>强制重跑 强制对源端所有表进行全增量初始化操作，将源端数据重新迁移到目标表中，以快速恢复数据。说明 仅Hologres和MaxCompute支持...
表概述
BINARY 是 无 二进制数据类型。长度限制为8 MB。DATETIME 否 DATETIME '2017-11-11 00:00:00' 日期时间类型，使用东八区时间作为系统标准时间。范围：0000年1月1日~9999年12月31日，精确到毫秒。TIMESTAMP 是 TIMESTAMP '2017-11-11 00:00:...
二进制函数
from_base64(string)→varbinary 将base64编码的 string 解码为二进制数据。to_base64url(binary)→varchar 使用URL安全字符将 binary 编码为base64字符串。from_base64url(string)→varbinary 使用URL安全字符，将base64编码的 string ...
COPY
即使数据会被服务器直接从一个文件读取或者写入一个文件而不通过客户端，输入数据也会被根据 ENCODING 选项或者当前客户端编码解释，并且输出数据会被根据 ENCODING 或者当前客户端编码进行编码。COPY 会在第一个错误处停止操作。这在 COPY...
调度依赖配置指引
方式二：基于血缘配置依赖关系 由于节点依赖关系配置后，默认节点的上下游产出表存在强依赖关系（即下游表数据的产出需要依赖上游产出的表数据），因此，任务在配置调度依赖时，需确认是否存在强血缘依赖，即确认当前任务是否会因为上游...
查询结果不符合预期的常见原因
在使用Lindorm宽表引擎的过程中，如果使用方法不当，可能会出现查询结果与预期不符的情况。本文列举了导致此类问题产生的几种常见原因，请您根据原因进行排查，优化查询条件。问题描述 Lindorm宽表引擎是兼容HBase的NoSQL数据引擎，其存储...
SDK概述
修复读取DataHub无数据时出现NPE问题。v1.6.0 新增Spark Streaming SQL测试工具。Spark Streaming SQL适配Loghub数据源。新增DataHub数据源direct api实现。Loghub python接口支持direct api。修复Insert数据到tablestore失败的问题。v1.5....
大版本升级常见问题
A：切换域名后，可能会存在DNS解析缓存问题，在缓存过期时间内可能会出现连接不上数据库或数据库只支持读操作而无法执行写入操作等情况，建议您刷新一下服务器的DNS缓存。Q：升级切换后，为什么在 PolarDB 控制台上看不见 完成升级 按钮？A...
PolarDB MySQL版CPU使用率高
整个数据库系统的缓存区域，是数据交换最为频繁的位置，如果内存不足和内存页争抢，则会出现各种异常的堆积和慢查询。最典型的表现是数据库突然CPU上涨打满，并且出现慢查询。经过排查后发现该问题并非索引缺失，这个时候就有可能是内存...
同步 OceanBase 数据库的数据至 DataHub
BLOB 类型的 Topic 仅支持写入一块二进制数据作为一个 Record，数据将会以 BASE64 编码传输。详情请参见 DataHub 官方文档。选择需要同步的 Topic 类型后，请进行以下操作：在选择区域左侧选中需要同步的对象。单击>。根据业务需求，选择...
常见问题
A：切换域名后，可能会存在DNS解析缓存问题，在缓存过期时间内可能会出现连接不上数据库或数据库只支持读操作无法执行写入操作等情况，建议您刷新一下服务器的DNS缓存。Q：一键升级到 PolarDB 前，能否先进行兼容性测试并简单评估迁移工作...
Oracle数据源
TIMESTAMP和DATE 布尔型 BIT和BOOL 二进制类 BLOB、BFILE、RAW和LONG RAW 数据同步前准备：Oracle环境准备 在DataWorks上进行数据同步前，您需要参考本文提前在Oracle侧进行数据同步环境准备，以便在DataWorks上进行Oracle数据同步任务配置...
数据资产定级
局部性质：数据直接或间接用于某些业务线的运营、报告等，如果出现问题会给业务线造成一定的影响或造成工作效率降低。标记为A3。一般性质：数据主要用于日常数据分析，出现问题带来的影响极小。标记为A4。未知性质：无法明确数据的应用场景...
数据资产定级
局部性质：数据直接或间接用于某些业务线的运营、报告等，如果出现问题会给业务线造成一定的影响或造成工作效率降低。标记为A3。一般性质：数据主要用于日常数据分析，出现问题带来的影响极小。标记为A4。未知性质：无法明确数据的应用场景...
DB2数据源
DB2数据源作为数据中枢，为您提供读取和写入DB2数据库的双向通道，能够快速解决海量数据的计算问题。本文为您介绍DataWorks的DB2数据同步的能力支持情况。支持的版本 DB2 Reader和DB2 Writer使用的DB2驱动版本为 IBM Data Server Driver ...
ST_Tile
从金字塔中按瓦片编号生成一个mvt标准的二进制数据。语法 bytea ST_Tile(cstring name,cstring key);bytea ST_Tile(cstring name,int x,int y,int z);参数 参数名称 描述 name 金字塔名称。key 瓦片编号。x 瓦片编号里的x值。y 瓦片编号里...
数据资产等级定义
局部性质：数据直接或间接用于某些业务线的运营、报告等，如果出现问题会给业务线造成一定的影响或造成工作效率降低。标记为A3。一般性质：数据主要用于日常数据分析，出现问题带来的影响极小。标记为A4。未知性质：无法明确数据的应用场景...
- 产品推荐
- 这些文档可能帮助您