同步方案选取指南
同步方案 原理说明 适用场景 使用限制 相关文档 DTS实现数据实时同步 通过订阅binlog的方式实现数据同步，在不影响源数据库的情况下，同步延迟可降至毫秒级别。对数据同步的实时性要求较高的场景。DTS在执行全量数据初始化时将占用源库和...
一键诊断
A：按照线程使用率的计算公式，当活跃线程数超过最大线程数，就会出现使用率大于100%的情况，而RDS MySQL线程池的实现方式比较特殊，没有严格限制活跃线程的数量，存在活跃线程数超过最大线程数的情况。了解更多 关于自动SQL诊断的详细技术...
一键诊断
A：按照线程使用率的计算公式，当活跃线程数超过最大线程数，就会出现使用率大于100%的情况，而RDS MySQL线程池的实现方式比较特殊，没有严格限制活跃线程的数量，存在活跃线程数超过最大线程数的情况。了解更多 关于自动SQL诊断的详细技术...
一键诊断
在数据库出现故障时，您可以利用一键...A：按照线程使用率的计算公式，当活跃线程数超过最大线程数，就会出现使用率大于100%的情况，而RDS MySQL线程池的实现方式比较特殊，没有严格限制活跃线程的数量，存在活跃线程数超过最大线程数的情况。
设置增量同步位点
适用场景 您可以通过设置增量同步位点的方式实现以下场景：您在创建数据迁移或数据同步项目前，已确保源端和目标端的数据是一致的，需要获取某个时间节点之后的增量数据并同步至目标端。您不再需要源端数据库的历史数据，仅需同步某个时间...
快速入门Java线程栈分析
本文将演示如何通过ATP的Java线程栈分析功能，分析Java应用中线程的运行情况。1.生成数据源，上传到ATP a.用户可以通过JDK中自带的jstack命令创建Java应用的线程快照，如下：#生成线程快照并输出到 jstack.log$jstack<进程号>>jstack.log b...
入仓解决方案
数仓开发的项目空间由入仓解决方案和业务场景两部分组成。入仓解决方案可添加和运行多个实时同步任务、实时迁移任务，实现全量或近...说明 对于某些数据同步不支持的数据库（例如MongoDB实例），您可以通过增量数据迁移的方式来实现数据同步。
使用云数据库Redis版实现即时通信场景中的多端同步
场景案例 下图基于一个案例展示了多端同步的详细实现方式。说明 图中的Bob为虚拟的用户名。新消息入库以后，推送消息逻辑被触发，系统根据用户名获取到所有客户端设备的当前点位，然后从消息队列中获取历史点位到最新点位间的所有消息，再...
为什么CPU负载高？
本文介绍使用 SAE 时，如何解决CPU负载高的问题。问题现象 CPU使用率100%CPU使用率高 负载（Load）高 问题原因 CPU...参见 Java通过Jstack查看线程栈 获得Java的线程栈，通过和上面十六进制的线程ID匹配，找到CPU占用较高的线程栈，分析根因。
通过整库迁移配置集成任务
参数 描述 同步方式 选择同步方式。同步方式设置包括 每日同步、单次同步、每日同步+单次同步。每日同步：系统将生成每日调度的集成管道周期任务，通常用于同步每日的增量或全量数据。单次同步：系统将生成集成管道手动任务，通常用于同步...
ES操作状态查询表
开启同步任务时"connectStatus":"the read binlog and write es thread are already running"增量同步的线程正在运行，无需重复执行启动操作。使用GDB+ES查询时错误 enable misspelling,cannot start full text search service 使用 g....
云数据库MongoDB版同步至云原生多模数据库Lindorm
是否限制增量同步速率 您也可以根据实际情况，选择是否对增量同步任务进行限速设置（设置 每秒增量同步的行数RPS 和 每秒增量同步的数据量(MB)BPS），以缓解目标库的压力。环境标签 您可以根据实际情况，选择用于标识实例的环境标签。本...
自定义和查看CPU选项
阿里云ECS的超线程的实现基于x86平台架构的HT技术，允许在一个物理核上并发地运行两个线程（Thread），一个线程可以视为一个vCPU。下表从多个维度对比了ECS实例的CPU选项参数。CPU选项 API参数 作用 适用场景 适用的实例规格 CPU物理核心数...
HSF概述
HSF为用户屏蔽了分布式领域中的各种复杂技术细节，如远程通讯、序列化实现、性能损耗、同步与异步调用方式的实现等。HSF架构 HSF作为一个纯客户端架构的RPC框架，没有服务端集群，所有HSF服务调用均是通过服务消费方（Consumer）与服务提供...
HSF概述
HSF为用户屏蔽了分布式领域中的各种复杂技术细节，如远程通讯、序列化实现、性能损耗、同步与异步调用方式的实现等。HSF架构 HSF作为一个纯客户端架构的RPC框架，没有服务端集群，所有HSF服务调用均是通过服务消费方（Consumer）与服务提供...
2020年
从自建SQL Server增量迁移至RDS SQL Server 支持DTS云服务与通过云企业网CEN（Cloud Enterprise Network）接入的本地IDC实现互通，可将本地IDC中的自建数据库作为数据迁移或数据同步的源库或目标库，实现便捷、安全的数据迁移上云。...
基本概念
Oracle CDC：实时数据同步模式，对源表进行INSERT、UPDATE或DELETE等操作的同时可以提取数据，变化的数据被保存在数据库的变化表中，通过订阅变化数据的方式实现数据的秒级同步。MySQL Binlog：实时数据同步模式，通过同步并解析记录所有...
Android 接口
通过 MPSync 对象即可实现移动同步的所有功能。java.lang.Object-com.mpaas.mss.adapter.api.MPSync 涉及的公共函数列表如下：返回值 说明 void setup(Application application)用于初始化移动同步服务依赖的基础服务，在 initialize 方法...
下载和导入同步对象配置
数据传输支持下载数据同步项目的同步对象配置信息，并支持通过导入 CSV 文件的方式实现自动配置和确认同步对象的配置信息，以实现保存项目配置信息和批量、快速配置项目。下载对象配置 新建数据同步项目后，您可以下载同步对象的配置信息。...
数据同步概述
Dataphin支持通过数据同步的方式，将业务数据源的数据引入Dataphin平台。背景说明 如果您是在 2020年4月之后 购买的Dataphin，则数据同步能力通过数据集成功能实现（即系统 不再提供数据同步的功能入口）。数据集成为您提供简单高效、安全...
数据同步概述
Dataphin支持通过数据同步的方式，将业务数据源的数据引入Dataphin平台。背景说明 如果您是在 2020年4月之后 购买的Dataphin，则数据同步能力通过数据集成功能实现（即系统 不再提供数据同步的功能入口）。数据集成为您提供简单高效、安全...
异步处理
线程池 目前来说，不管是 SOFARPC 还是 Dubbo 的埋点实现，在使用单线程或者线程池时，情况是一样的：同步调用，线程池中分配一个线程用于处理 RPC 请求，在请求结束之前会一直占用线程；此种情况下不会造成下一个 RPC 请求错拿上一个请求...
日志说明
SOFATracer 支持 Spring MVC、标准 JDBC 接口实现的数据库连接池（DBCP、Druid、c3p0、tomcat、HikariCP、BoneCP）、HttpClient、Dubbo、Spring Cloud OpenFeign 等开源组件。组件埋点接入后，即可查看相关 Tracer 日志。本文将介绍如下几...
顺序消息
示例 在证券处理中，以人民币兑换美元为Topic，在价格相同的情况下，先出价者优先处理，则可以按照FIFO的方式发布和消费全局顺序消息。说明 全局顺序消息实际上是一种特殊的分区顺序消息，即Topic中只有一个分区，因此全局顺序和分区顺序的...
消费者分类
这两种类型的消费者通过不同的实现方式和接口可满足您在不同业务场景下的消费需求。具体差异如下：说明 若您的业务场景发生变更，或您当前使用的消费者类型不适合当前业务，您可以选择变更消费者类型。变更消费者类型不影响当前 云消息队列...
同步 OceanBase 数据库的数据至 DataHub
设置 数据传输支持 WHERE 条件实现行过滤，以及选择分片列和需要同步的列。在选择区域的右侧列表中，鼠标悬停至目标表对象。单击显示的 设置。在 设置 对话框中，您可以进行以下操作。在 行过滤条件 区域的文本框中，输入标准的 SQL 语句中...
写入数据
}/手动打包后提交数据 tsdb.putSync(points)注意 出于写入性能的考虑，同步写的方式一般需要您手动将数据点打包成一批数据，并且建议这批数据包含500～1000个数据点。此外，也建议多个线程并发进行提交 同步写的响应对象 您可以根据需要...
OGG插件介绍
buildMaximumPoolSize 默认为buildCorePollSize两倍 可选 解析数据线程池最多线程数 writeCorePollSize 默认为配置table数量 可选 写入DataHub线程池最少线程数 writeMaximumPoolSize 默认为配置table数量 可选 写入DataHub线程池最多线程...
查看作业性能
结合实际代码分析 一旦您通过火焰图识别出了潜在的瓶颈，应该结合实际的代码进行分析，查看这些热点函数的实现，寻找可以优化的地方，比如减少循环次数、优化数据结构、减少同步操作等。进行性能测试 优化代码后，可以进行性能测试验证优化...
初始化OTSClient
常见问题 使用表格存储SDK时出现Signature mismatch异常 Java SDK报错：SocketTimeoutException 使用Java SDK时出现The access key id is invalid异常 Java SDK报错：java.lang.IllegalStateException:Request cannot be executed;...
常见问题
说明 对于某些数据同步不支持的数据库（例如MongoDB实例），您可以通过增量数据迁移的方式来实现数据同步。数据同步的工作原理是什么？数据同步的工作原理，请参见 产品架构及功能原理。如何计算同步延迟？同步延迟是指同步到目标数据库中...
使用Tapdata Cloud导入MySQL数据
binlog_row_image full 对MySQL基于行复制时，行映像写入二进制日志中的方式，请设置为full，表示记录行中的所有列。修改完成后，执行如下命令重启MySQL进程。etc/init.d/mysqld restart 登录MySQL数据库后，执行如下命令确认Binlog配置已...
RDS术语
G 高可用系列 高可用系列实例有一个备实例，主实例的数据会通过半同步的方式同步到备实例，当主实例出现故障无法访问时，会自动切换到备用实例。更多信息，请参见 高可用系列。H 回收站 部分RDS实例在过期或释放后，会进入回收站。您可以在...
API手册
type的类型有：future：通过Future的方式去获取请求执行的结果。callback：当远程服务的调用完成后，HSF会使用响应结果回调此处配置的listener，该listener需要实现HSFResponseCallback接口。proxyStyle String 否 jdk 设置服务的代理模式...
API手册
type的类型有：future：通过Future的方式去获取请求执行的结果。callback：当远程服务的调用完成后，HSF会使用响应结果回调此处配置的listener，该listener需要实现HSFResponseCallback接口。proxyStyle String 否 jdk 设置服务的代理模式...
RDS术语
G 高可用系列 高可用系列实例有一个备实例，主实例的数据会通过半同步的方式同步到备实例，当主实例出现故障无法访问时，会自动切换到备用实例。更多信息，请参见 高可用系列。H 回收站 部分RDS实例在过期或释放后，会进入回收站。您可以在...
版本说明
本文介绍Java SDK的版本信息，包含使用限制、下载链接、发布时间、更新点等，以便您按需获取适用的Java SDK收发消息。使用限制 JDK 1.8适用于所有Java ons-client版本，JDK 1.6仅支持ons-client v1.8.4.Final及之前的版本使用。为避免升级...
使用Tunnel命令或Tunnel SDK
MaxCompute的客户端（odpscmd）、Studio等数据上传下载工具均通过Tunnel功能实现数据的上传与下载，本文为您介绍如何使用Tunnel命令或Tunnel SDK上传数据至MaxCompute。前提条件 已经创建好MaxCompute项目，并用对应的工具连接MaxCompute。...
关闭计算节点的CPU超线程
因此提供设置两种软件层面的方式，可以实现类似关闭超线程的效果。方式 优点 缺点 设置nr_cpu lscpu 和 cpuid 等命令返回看到的内部实际使用CPU数就是物理CPU数，不会看到offline的vCPU，基本达到关闭超线程的效果和CPU核数显示。一旦设置...
版本说明
本文介绍RocketMQ ONS 1.x系列Java SDK的版本信息，包含下载链接、发布时间、更新点等，以便您按需获取适用的Java SDK收发消息。重要 JDK 1.8适用于所有Java ons-client版本，JDK 1.6仅支持ons-client v1.8.4.Final及之前的版本使用。为...
- 产品推荐
- 这些文档可能帮助您