配置流程
数据传输服务DTS提供的数据加工功能ETL（Extract Transform Load），实现了流式数据的清洗和转换处理，能够准确、高效地提供您需要的数据。本文介绍如何通过DAG模式（可视化拖拽方式）配置ETL任务。背景信息 说明 ETL功能在公测阶段，支持...
Control Center基本使用
除此之外，ksqlDB还通过物化视图提供了流处理过程中的查询功能。传统的流处理应用架构图。基于ksqlDB应用架构图。2.ksqlDB使用 点击“ksqlDB”按钮进入ksqlDB集群交互详情页。在“Editor”Tab可以执行创建stream、使用ksql命令进行select...
常见问题
在IPv6网络中，为了简化报文处理流程、提高处理效率，限定IPv6路由器不处理分片，分片只在源主机的IP层需要时进行，即如果传输路径中的数据包大于MTU，路由器会将该数据包丢弃并向源主机返回“数据包过大”的响应，源主机IP层对数据包分片...
功能特性
当风险事件发生时，风险事件中心会推荐可执行的应急预案，供运维快速选择并自动化执行，从而通过标准化处理流程，实现故障快速恢复。故障演练 故障演练 提供了故障注入能力，通过演练平台主动触发故障，以此观测应用软件的高可用性。故障...
AGS概览
在使用上，该方案用户无需关心基因数据处理过程中的计算资源、处理逻辑、数据缓存等细节，只需将下机数据（FASTQ文件）上传至OSS，以及授权Bucket给AGS服务，即可高效、快速完成整个数据分析流程，并将结果数据上传到用户期望的存储空间。...
节点异常问题排查
本文目录 类别 内容 诊断流程 诊断流程 常见排查方法 节点故障诊断 检查节点的详情 检查节点的状态 检查节点的事件 检查节点的诊断日志 检查节点的关键组件 检查节点的监控 检查节点的安全组 常见问题及解决方案 节点关键组件异常处理 ...
节点异常问题排查
本文目录 类别 内容 诊断流程 诊断流程 常见排查方法 节点故障诊断 检查节点的详情 检查节点的状态 检查节点的事件 检查节点的诊断日志 检查节点的关键组件 检查节点的监控 检查节点的安全组 常见问题及解决方案 节点关键组件异常处理 ...
托管节点池节点自动恢复
本文介绍节点自动恢复的应用场景和处理流程。前提条件 已创建托管节点池或开启托管节点池。具体操作，请参见 管理托管节点池。已开启事件中心。具体操作，请参见 事件监控。触发条件 重要 当您打开了 当节点故障时重启节点 开关，节点自动...
产品优势
数据传输服务DTS（Data Transmission Service）支持RDBMS、NoSQL、OLAP等多种数据源之间的数据传输。它提供了数据迁移、实时数据订阅及数据实时同步等多种数据传输方式。相对于第三方数据流工具，DTS提供丰富多样、高性能、高安全可靠的...
重启节点
PolarDB 提供了重启节点功能，您可以在控制台上手动重启节点解决数据库连接和性能问题。注意事项 重启只读节点之后新建的读写分离连接会转发请求到该只读节点。重启只读节点之前建立的读写分离连接不会转发请求到重启后的只读节点，您可以...
重启节点
PolarDB 提供了重启节点功能，您可以在控制台上手动重启节点解决数据库连接和性能问题。注意事项 重启只读节点之后新建的读写分离连接会转发请求到该只读节点。重启只读节点之前建立的读写分离连接不会转发请求到重启后的只读节点，您可以...
YARN缺陷修复公告
缺陷修复方案 您需要将E-MapReduce集群中包含缺陷的Hadoop YARN ResourceManager的JAR包替换掉，然后重启ResourceManager服务，重启服务时先处理Standby ResourceManager，再处理Active ResourceManager。该修复方案：适用于EMR的4.6.0、4....
重启节点
PolarDB 提供了重启节点功能，您可以在控制台上手动重启节点解决数据库连接和性能问题。注意事项 重启只读节点之后新建的读写分离连接会转发请求到该只读节点。重启只读节点之前建立的读写分离连接不会转发请求到重启后的只读节点，您可以...
ECS实例数据传输的实现方式
在数据传输过程中，您需要注意：一个大文件作为一个数据整体，是不可能瞬间从一台主机转移到其他主机的，传输是一个持续的过程，但不是把文件分割了，因此，如果在传输的过程中意外中断，目标主机的路径中不会有该文件。如果传输的是多个...
EMR Kafka磁盘故障运维
说明 如果ECS的修复磁盘事件运维流程中需要重启ECS实例，则可以将重启Broker服务与重启ECS实例结合起来完成。通过修复磁盘事件，在ECS控制台进行后续磁盘修复工作。此过程可能需要的时间周期为几天。磁盘上线，详情请参见 磁盘上线。您需要...
只读节点Online Promote
Postmaster进程发现 trigger file 文件或者接收到OnlinePromote命令后，进入OnlinePromote处理流程。发送SIGTERM信号给当前所有Backend进程。说明 只读节点在OnlinePromote过程中可以继续提供只读服务，但是只读的数据不能保证是最新的。...
只读节点Online Promote
Postmaster进程发现 trigger file 文件或者接收到OnlinePromote命令后，进入OnlinePromote处理流程。发送SIGTERM信号给当前所有Backend进程。说明 只读节点在OnlinePromote过程中可以继续提供只读服务，但是只读的数据不能保证是最新的。...
消息处理时长自适应
一个Worker接收到了消息M1，但是Worker在处理完消息之后，进程发生了Crash或者机器发生了重启。那么M1这条消息至少在6个小时之后才会被另一个Worker接收到并处理。而自己写代码处理Failover的情况的话，程序又会变得比较复杂。目标 在一些...
什么是基因分析平台？
平台支持GA4GH社区开放标准，集成丰富的流程工具和公共数据集，帮助用户安全高效、敏捷弹性地处理任意规模基因数据。相比于其他用户方案，基因分析平台提供完整的Serverless基因计算服务，简单易用、经济高效、灵活可靠、且超大规模。结合...
消费幂等
为了防止消息重复消费导致业务处理异常，消息队列RocketMQ版 的消费者在接收到消息后，有必要根据业务上的唯一Key对消息做幂等处理。本文介绍消息幂等的概念、适用场景以及处理方法。什么是消息幂等 当出现消费者对某条消息重复消费的情况...
什么是HTTPS加速网关
操作门槛高 部署证书需要具备一定的中间件部署能力，例如签发证书后，需要部署到对应的服务器上，因此需要了解Nginx、Tomcat等中间件的证书部署流程。更新证书运维压力大 付费证书有效期为12个月，免费证书有效期仅为3个月，且证书到期后...
启用Multi-Buffer实现TLS加速
一个TLS会话的处理过程总体上可分为握手阶段和数据传输阶段。握手阶段最重要的任务是使用非对称加密技术协商出一个会话密钥，然后在数据传输阶段，使用该会话密钥对数据执行对称加密操作，再进行数据传输。在微服务场景下，Envoy无论是作为...
蓝牙OTA SDK
SDK提供蓝牙OTA业务的...开始OTA升级流程 预检查事件（LKOTANotificationTypeCheck）下载升级包事件（LKOTANotificationTypeDownload）传输升级包事件（LKOTANotificationTypeTransmit）重启升级事（LKOTANotificationTypeReboot）OTA 结束...
各源环境迁移至阿里云
评估迁移时间与测试传输速度 迁移周期主要分为迁移前、迁移过程中、迁移后三部分。迁移周期时长与待迁移服务器的数量和实际数据量成正比，建议您根据实际迁移测试演练进行评估。更多信息，请参见 评估迁移时间与测试传输速度。Windows系统...
查看数据迁移项目的详情
执行数据库对象处理 该步骤为处理数据迁移阶段忽略或者数据传输暂不支持的对象，以确认业务割接切换至目标端后可以正常工作。迁移数据库对象至目标端：该操作需要您自行迁移源端触发器、函数、存储过程等其它数据传输不支持的数据库对象至...
常见问题FAQ
一直失败则断电重启盒子后重试。Q：如何判断遥控器与屏幕配对失败？A：配对不上的现象为同时按确认+返回键5秒~10钟后遥控器指示灯闪烁。如果遥控器指示灯不闪烁，则请更换新电池尝试。产品拔掉电源重新插电开机后，重新配对，重复3次。若...
常见问题
集群有状态重启包括 RM Restart 和 NM Restart 两部分，ResourceManager（简称RM）负责维护应用级基础信息与状态，NodeManager（简称NM）负责维护运行时的Container信息与状态，它们持续将相关状态同步至外部存储（Zookeeper、LevelDB和...
升配集群
升级集群时，如果集群负载不高且索引有副本的情况下，集群在变更过程中可以持续对外提供服务，但性能可能会受影响，且变更时间会比较长。前提条件 完成集群规格容量评估。评估方法，请参见 规格容量评估。在Kibana控制台 执行以下命令，...
消息幂等
为了防止消息重复消费导致业务处理异常，SOFAStack 消息队列的消费者在接收到消息后，有必要根据业务上的唯一 Key 对消息做幂等处理。本文介绍消息幂等的概念、适用场景以及处理方法。什么是消息幂等 当出现消费者对某条消息重复消费的情况...
分组聚合查询优化
局部聚合节点只需要占用少量内存，聚合过程为流式过程，数据不会堆积在局部聚合节点上。局部聚合完成后，数据根据分组字段进行节点间的数据重分布，执行最终（FINAL）聚合。局部聚合后的结果会通过网络传输到下游Stage的节点（更多关于...
集群管理常见问题
EMR Doctor在安装和升级过程中不会重启任何服务，本身过程也不会对您现有任务产生任何影响，并且在安装结束后，EMR Doctor会将必要参数配置到现有集群中，不需要您再手动进行配置。EMR Doctor在安装和升级过程中会对YARN、Spark、Tez和Hive...
数据压缩
物联网平台的数据压缩功能，可以对设备与物联网平台之间的数据传输进行压缩处理。通过对消息的压缩，达到节约设备流量和提高传输速度的效果。本文介绍数据压缩功能的使用。使用限制 仅尊享型企业版实例和标准型企业版实例支持数据压缩。仅...
测试指标
简称 Virtual User：VU 标准 一般情况下，性能测试是将系统处理能力容量测出来，而不是测试并发用户数，除了服务器长连接可能影响并发用户数外，系统处理能力不受并发用户数影响，可以用最小的用户数将系统处理能力容量测试出来，也可以用...
创建服务器迁移任务
传输限速 迁移过程中，数据传输的带宽上限限制，单位为Mbps。压缩率 迁移过程中，数据压缩传输的级别。请根据您的实际需要，设置压缩率。在带宽有限的环境下，使用高压缩率，可提升数据的传输速度。在带宽很高的情况下，建议您不压缩传输...
修复迁移失败的任务
在全量数据迁移过程中，对于以下几种失败原因，DTS提供了修复功能：说明 对于其他失败原因，DTS只提供 忽略 操作，即不将该对象的全量数据迁移到目标数据库。源或目标数据库连接失败/超时。排查该问题并确认连接正常后，执行 重启任务 操作...
常见问题
您在使用数据传输服务DTS（Data Transmission Service）时。如果收到DTS返回的错误信息，可查阅 常见报错 匹配解决方案。如果您没有收到具体的错误信息，请根据问题分类匹配问题和解决方案。问题分类 常见问题分为如下几种类型：计费问题 ...
消息幂等
如果消息重复消费会影响您的业务处理，请对消息做幂等处理。本文介绍消息幂等的概念、适用场景以及处理方法。什么是消息幂等 在数学与计算机学中，幂等操作的特点是其任意多次执行所产生的影响均与一次执行的影响相同。在消息领域，幂等是...
降配集群
降配集群会触发集群重启，重启时间与集群规格、数据结构和大小等因素有关，建议在业务低峰期操作。一般情况下，重启耗时较长，在小时级别。详细信息，请参见 重启实例或节点。降配过程中不会出现数据丢失的现象，但如果集群负载高或状态...
应用场景
数据传输服务DTS（Data Transmission Service）支持数据迁移、数据订阅和数据实时同步功能，帮助您实现多种典型应用场景。不停机迁移数据库 传输方式：数据迁移 为了保证数据的一致性，传统的迁移过程需要您在迁移数据时停止向源数据库写入...
迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库...
本文为您介绍如何使用数据传输迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输...
- 产品推荐
- 这些文档可能帮助您