上传数据

说明 GeoJSON数据文件大小不可超过100MB,且不支持多层嵌套数据结构。OSS上传 在 方法二:OSS上传 下方的输入框中,输入GeoJSON数据文件的OSS链接地址,并单击对话框右下方 上传 即可上传一个GeoJSON数据文件。说明 大型文件建议选择OSS...

PolarDB-X 1.0迁移至阿里云消息队列Kafka

本文介绍如何使用数据传输服务DTS(Data Transmission Service)将PolarDB-X 1.0迁移至阿里云消息队列Kafka。前提条件 已创建源PolarDB-X 1.0实例。具体操作,请参见 创建实例。说明 PolarDB-X 1.0的存储类型支持为RDS MySQL(包括私有定制...

功能特性

什么是数据校验 订正 元数据订正 当校验出数据结构不一致时,可以根据校验结果进行订正。结构订正 查看数据校验详情 全量数据订正 当校验出全量数据不一致时,可以根据校验结果并下载订正SQL进行订正。查看数据校验详情 增量数据订正 当...

Db2 for LUW同步至自建Kafka集群

说明 如为增量同步任务,DTS要求源数据库的数据日志保存24小时以上,如为全量同步和增量同步任务,DTS要求源数据库的数据日志至少保留7天以上(您可在全量同步完成后将数据日志保存时间设置为24小时以上),否则DTS可能因无法获取数据日志...

从PolarDB MySQL版同步至PolarDB-X

准备工作 由于 PolarDB MySQL版 同步至 PolarDB-X 暂不支持 结构初始化,所以您需要根据源 PolarDB MySQL版 集群中待同步对象的数据结构,在目标实例中创建相应的数据库和数据表,详情请参见 创建数据库 和 SQL基本操作。说明 结构初始化:...

从RDS MySQL同步至PolarDB-X

准备工作 由于RDS MySQL同步至 PolarDB-X 暂不支持 结构初始化,所以您需要根据源RDS MySQL实例中待同步对象的数据结构,在目标实例中创建相应的数据库和数据表,详情请参见 创建数据库 和 SQL基本操作。说明 结构初始化:将源库中待同步...

常见报错

systemctl restart mysqld 说明 修改配置文件后,需要重启数据库实例配置才可生效,请考虑在业务低峰期重启自建数据库实例。以上操作完成后,MySQL已重启。您可使用步骤1的命令查看binlog日志是否已开启成功,然后重新启动备份计划即可。...

API概览

DescribeDBInstanceDataSources 查询DB或者Table的数据结构 调用DescribeDBInstanceDataSources接口查询DB或者Table的数据结构。网络管理 API 标题 API概述 CreateEndpoint 申请外网地址 调用CreateEndpoint接口申请外网地址。...

Db2 for LUW迁移至阿里云消息队列Kafka版

如为增量迁移任务,DTS要求源数据库的数据日志保存24小时以上,如为全量迁移和增量迁移任务,DTS要求源数据库的数据日志至少保留7天以上(您可在全量迁移完成后将数据日志保存时间设置为24小时以上),否则DTS可能因无法获取数据日志而导致...

安全基线检查

了解安全基线检查 数据安全中心以GB/T 37988-2019《信息安全技术数据安全能力成熟度模型》为依据,针对云上复杂的数据库应用环境和不同类型的数据结构化数据和非结构化数据),制定了7类基线检查策略以及40+具体的检查项,并提供不同类型...

PolarDB-X 1.0迁移至PolarDB-X 2.0

如为增量数据迁移任务,DTS要求源数据库的本地Binlog日志保存24小时以上,如为全量数据迁移和增量数据迁移任务,DTS要求源数据库的本地Binlog日志至少保留7天以上(您可在全量迁移完成后将Binlog保存时间设置为24小时以上),否则DTS可能因...

迁移方案概览

数据迁移功能帮助您实现同构或异构数据源之间的数据迁移,适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景。本文将介绍数据迁移功能支持的数据库、版本和迁移类型,以及具体的配置文档。说明 数据迁移在某些场景...

RDS MySQL迁移至RDS PostgreSQL

如为增量迁移任务,DTS要求源数据库的本地Binlog日志保存24小时以上,如为结构迁移和增量迁移任务,DTS要求源数据库的本地Binlog日志至少保留7天以上(您可在结构迁移完成后将Binlog保存时间设置为24小时以上),否则DTS可能因无法获取...

数据传输预检查

重启数据库。增量日志参数检查未通过,错误参数 supplemental_log_data_ui=no 增量日志参数问题 在目标数据库,执行 alter database add supplemental log data(unique)columns;并重启数据库。增量日志参数检查未通过,错误参数 ...

PolarDB-X 1.0迁移至Elasticsearch

本文介绍如何使用数据传输服务DTS(Data Transmission Service)将数据从PolarDB-X 1.0迁移至Elasticsearch。前提条件 已创建源PolarDB-X 1.0实例。具体操作,请参见 创建实例。说明 PolarDB-X 1.0 的存储类型支持为RDS MySQL(包括私有...

数据迁移方案概览

数据迁移功能帮助您实现同构或异构数据源之间的数据迁移,适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景。本文将介绍数据迁移功能支持的数据库、版本和迁移类型,以及具体的配置文档。收费策略 DTS数据迁移涉及...

PolarDB PostgreSQL版架构介绍

LogIndex本质是一个可持久化的hash数据结构。只读节点通过WAL receiver接收从主节点过来的WAL meta信息。WAL meta记录该条日志修改了哪些Page。将该条WAL meta插入到LogIndex中。其中,key是Page ID,value是LSN。一条WAL日志可能更新了多...

云数据库Redis开发运维规范

推荐使用扩展数据结构数据结构模块集成)实现复杂功能,避免使用Lua脚本。Lua脚本会占用较多的计算和内存资源,且无法被多线程加速,过于复杂或不合理的Lua脚本可能导致资源被占满的情况。合理使用管道(pipeline)降低链路的往返时延RTT...

版本管理

注意事项 版本升级一般不超过30分钟,升级过程中会重启数据库代理Proxy或内核引擎DB,可能会导致数据库连接闪断。请您尽量在业务低峰期执行升级操作,并且确保您的应用有自动重连机制。同时升级数据库代理(Proxy)和内核引擎 期间,主地址...

版本管理

注意事项 版本升级一般不超过30分钟,升级过程中会重启数据库代理Proxy或内核引擎DB,可能会导致数据库连接闪断。请您尽量在业务低峰期执行升级操作,并且确保您的应用有自动重连机制。同时升级数据库代理(Proxy)和内核引擎 期间,主地址...

Tair开发运维规范

说明 常见的复杂数据结构例如Hash、Set、Zset、Geo、Stream及Tair自研的 exHash、Bloom、GIS 等。由于某些命令(例如 HGETALL)的时间复杂度直接与Key中的子Key数量相关。如果频繁执行时间复杂度为 O(N)及以上的命令,且Key中的子Key数量...

小版本升级

注意事项 版本升级一般不超过30分钟,升级过程中会重启数据库代理Proxy或内核引擎DB,可能会导致数据库连接闪断。请您尽量在业务低峰期执行升级操作,并且确保您的应用有自动重连机制。同时升级数据库代理(Proxy)和内核引擎 期间,主地址...

升级版本

升级操作会触发集群重启,具体时长与您集群中的数据大小、数据结构、集群规格等都有关,一般为1个小时左右。重要 系统会根据您的升级方案选择合适的重启方式,重启会对集群服务产生一定影响,详细信息请参见 升级重启说明。升级操作 登录 ...

修复迁移失败的任务

当您的数据迁移任务在结构迁移阶段或全量数据迁移阶段,出现 迁移失败 的提示时,您可以使用DTS的在线修复功能手动修复该任务。修复结构迁移失败的任务 DTS支持异构数据源之间的迁移,对于一些不支持的数据类型,在进行结构迁移时,如果...

自建PostgreSQL迁移至云原生数据仓库 AnalyticDB ...

本文介绍如何使用数据传输服务DTS(Data Transmission Service)将自建PostgreSQL迁移至 云原生数据仓库AnalyticDB PostgreSQL版。前提条件 已创建目标 AnalyticDB PostgreSQL 实例,详情请参见 创建实例。目标 AnalyticDB PostgreSQL 实例...

新功能发布记录

2022-03-11 全部 TairSearch 2022年2月 变更项 说明 发布时间 发布地域 相关文档 发布新功能 TairCpc是基于CPC(Compressed Probability Counting)压缩算法开发的数据结构,支持仅占用很小的内存空间对采样数据进行高性能计算。...

自建PostgreSQL同步到云原生数据仓库AnalyticDB ...

同步过程中,如果对源库中的同步对象执行了DDL操作,需要手动在目标库中执行对应的DDL操作,然后重启数据同步作业。支持同步的SQL操作 INSERT、UPDATE、DELETE。准备工作 根据自建PostgreSQL中待同步对象的结构,在目标 云原生数据仓库...

自建PostgreSQL同步到云原生数据仓库AnalyticDB ...

同步过程中,如果对源库中的同步对象执行了DDL操作,需要手动在目标库中执行对应的DDL操作,然后重启数据同步作业。支持同步的SQL操作 INSERT、UPDATE、DELETE。准备工作 根据自建PostgreSQL中待同步对象的结构,在目标 云原生数据仓库...

版本发布记录

计费项 数据字典 支持控制台配置数据字典,当业务中有常量数据或者业务数据可以划分为业务事实表和业务维度表,通过数据字典来替代维度表,直接查询字典获得维度数据,增加查询效率。数据字典 资源队列 解决开源版中单个大查询消耗资源过多...

查看数据校验详情

本文介绍如何查看数据传输服务DTS(Data Transmission Service)数据校验任务的详情。前提条件 已创建并配置数据校验任务,详情请参见 配置数据校验。注意事项 在DTS同步或迁移实例中配置的校验任务,支持在实例详情和校验任务列表查看;...

PolarDB PostgreSQL版间的迁移

通过数据传输服务DTS(Data Transmission Service),可以实现 PolarDB PostgreSQL版 集群间的迁移。前提条件 已创建源和目标 PolarDB PostgreSQL版 数据库集群,详情请参见 创建PolarDB PostgreSQL版数据库集群。已将源和目标 PolarDB ...

概述

开启列存索引后与ClickHouse性能对比 下图展示了开启列存索引后,执行TPC-H的21条查询语句(Q21除外,ClickHouse不支持)的查询响应时间,与相同数据量和数据结构的ClickHouse数据库的对比。结论:列存索引对大多数的复杂查询操作都有加速...

一键MaxCompute任务出错恢复

出现脏数据导致的实时任务报错 常见的场景有目标列类型和源端数据不兼容,查看实时任务运行日志、查看脏数据的输出内容,请确认是源端数据问题还是目标端问题,如果是目标表结构问题,可能需要重建目标表以恢复实时任务。重新加载表:需要...

常见问题

支持的数据库部署位置(接入方式)阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...

PolarDB-X 2.0迁移至阿里云消息队列Kafka

本文介绍如何使用数据传输服务DTS(Data Transmission Service),您可以将 PolarDB-X 2.0 迁移至阿里云消息队列Kafka,从而扩展消息处理能力。前提条件 已创建源 PolarDB-X 2.0 实例,且需兼容MySQL 5.7版本。目标Kafka实例中已创建用于...

PolarDB PostgreSQL版(兼容Oracle)间的迁移

通过数据传输服务DTS(Data Transmission Service),可以实现 PolarDB PostgreSQL版(兼容Oracle)集群间的迁移。背景信息 PolarDB PostgreSQL版(兼容Oracle)作为一款企业级关系型数据库管理系统,具有广泛的应用和强大的社区支持。每个...

通过无锁变更工单实现无锁结构变更

为解决变更数据库表结构时的锁表问题,数据管理DMS 推出了无锁结构变更功能,该功能可以较好地规避因锁表以致于阻塞业务和数据库原生OnlineDDL带来的主备延迟问题。本文介绍通过提交无锁变更工单实现数据库无锁结构变更的方法。前提条件 ...

如何将一棵LSM-Tree塞进NVM

我们以X-Engine为基础结合非易失内存的优势与限制,重新设计并实现了存储引擎的主要内存数据结构、事务处理和持久化内存分配器等基础组件,最终实现了不需要记录预写式日志的高性能事务处理,降低了整体系统的写入放大并提高了存储引擎的...

功能特性

通过Kafka导入数据 通过Flink导入数据数据库 SelectDB 版支持通过SelectDB提供的Flink连接器(SelectDB Connector for Apache Flink),将Kafka中的非结构数据以及MySQL等上游业务数据库中的变更数据,实时同步到云数据库 SelectDB 版...

从RDS PostgreSQL同步至云原生数据仓库AnalyticDB ...

同步过程中,如果对源库中的同步对象执行了DDL操作,需要手动在目标库中执行对应的DDL操作,然后重启数据同步作业。支持的同步语法 仅支持INSERT、UPDATE、DELETE。准备工作 调整源RDS实例的 wal_level 参数设置。警告 修改 wal_level 参数...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 云数据库 Redis 版 数据库备份 数据传输服务 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用