离线同步并发和限流之间的关系
限制和最佳实践：分布式执行模式下，配置较大任务并发度可能会对您的数据存储产生较大的访问压力，请评估数据存储的访问负载。如果您的独享资源组机器台数为1，不建议使用分布式执行模式，因为执行进程仍然分布在一台Worker节点上，无法...
快速入门
Logstash快速入门 Beats Beats是轻量级的数据采集工具，支持一键部署采集器，可视化采集与配置日志文件、网络数据、容器指标等多种类型数据，并集中管理多个采集器。Beats快速入门 高级监控报警 基于Elasticsearch开发的，具备采集、监控、...
如何接入链路追踪
在微服务分布式场景下，全链路追踪功能给业务提供了各个服务点执行情况的可视化快速分析定位能力。在定时任务场景下，业务执行链路可能比常规实时业务的执行链路更长，接入全链路追踪有助于查询任务执行耗时、分析执行异常等问题。本文介绍...
产品优势
高可用性 双副本：数据采集、处理和存储组件支持多副本横向扩展，保证核心数据链路高可用。水平扩展：基于集群规模可直接进行弹性扩容。数据重传：支持数据自动重传，彻底解决丢弃逻辑弊病，确保数据完整性与准确性。可观测监控 Prometheus...
产品优势
高可用性 双副本：数据采集、处理和存储组件支持多副本横向扩展，保证核心数据链路高可用。水平扩展：基于集群规模可直接进行弹性扩容。数据重传：支持数据自动重传，彻底解决丢弃逻辑弊病，确保数据完整性与准确性。可观测监控 Prometheus...
备份恢复
备份数据 登录 PolarDB分布式版控制台，选择目标实例所在地域。在实例列表页面单击实例名称。在左侧导航栏中单击 备份恢复。单击 数据备份。选择备份方式和备份级别。说明 PolarDB-X 1.0 只支持RDS级别的备份，如果所有库都在一个RDS上，...
Join优化
表S数据不移动，表R数据根据分区计算的结果发送到S表扫表的节点 Colocation Join 对于多个相关联的表，在建表时确保表的数据分片数量一致，相同Hash分桶在分布式系统中的分布一致，那么实际查询时就可以跳过数据的Shuffle过程，直接进行...
创建同步任务
部分数据源支持分布式模式执行任务，详情请参见各插件配置文档：支持的数据源与读写插件。配置任务依赖关系。双击当前 业务流程，设置 insert_data 节点为 write_result 节点的上游节点。任务配置完成后，单击工具栏的 图标，保存任务。...
通过Logstash导入数仓版
操作步骤 Kafka是一个高吞吐量的分布式发布、订阅日志服务，具有高可用、高性能、分布式、高扩展、持久性等特点。目前Kafka已经被各大公司广泛使用，同时logstash也可以快速接入业务中，免去重复建设的麻烦。在Apache Kafka服务器根目录，...
产品架构
时序引擎 LindormTSDB 是面向海量时序数据设计的分布式时序引擎，兼容开源OpenTSDB等标准接口，其基于时序数据特点和查询方式，采用Timerange+hash结合的分区算法，时序专向优化的LSM架构和文件结构，支持海量时序数据的低成本存储、预降...
任务管理
登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏，选择 任务管理。在 任务管理 页面，选择目标命名空间，单击 创建任务。在 基本配置 配置向导页，配置调度任务的相关信息，然后单击 下一步。基本配置参数说明如下：配置名称...
数据上云工具
Flume（DataHub通道系列）Apache Flume是一个分布式的、可靠的、可用的系统，可高效地从不同的数据源中收集、聚合和移动海量日志数据到集中式数据存储系统，支持多种Source和Sink插件。Apache Flume的DataHub Sink插件可以将日志数据实时...
如何接入链路追踪
在微服务分布式场景下，全链路追踪功能给业务提供了各个服务点执行情况的可视化快速分析定位能力。在定时任务场景下，业务执行链路可能比常规实时业务的执行链路更长，接入全链路追踪有助于查询任务执行耗时、分析执行异常等问题。本文介绍...
产品整体介绍
在第三方认证层面，AnalyticDB PostgreSQL版 通过了“国际数据库TPC官方TPC-H 30TB认证”（性价比综合排名第一），信通院“分布式事务型数据库基础能力评测”（TPC-C）和“分布式分析型数据库大规模性能认证”（640节点 TPC-DS 100TB）。...
分布式链路概述
分布式链路（原 SOFAStack 中间件中的 概述）会逐步融合到业务智能可观测服务中，实现监控和链路分析一体化，方便用户对问题进行跟踪定位，对应用性能、调用链路进行实时分析。背景信息 分布式链路是面向分布式架构、微服务（比如 Spring ...
如何重刷数据
登录 分布式任务调度平台。在 任务管理 页面，单击目标任务 操作 列下的 更多，然后单击 重刷任务。在 重刷任务 面板，设置 起止日期 和 数据时间，单击 确定。起止日期：指定重刷的日期区间。数据时间：指定重刷日期区间内的重刷时间。...
如何重刷数据
登录 分布式任务调度平台。在 任务管理 页面，单击目标任务 操作 列下的 更多，然后单击 重刷任务。在 重刷任务 面板，设置 起止日期 和 数据时间，单击 确定。起止日期：指定重刷的日期区间。数据时间：指定重刷日期区间内的重刷时间。...
开通SchedulerX
背景信息 阿里云分布式任务调度SchedulerX已于2021年09月01日正式商业化。操作步骤 登录 分布式任务调度平台。首次使用并登录分布式任务调度平台，在弹出的对话框中单击 开通。在 分布式任务管理 页面，单击 立即购买。在 确认订单 页面 ...
开通服务
本节介绍如何开通分布式事务服务。前提条件 已注册阿里云账号，并完成实名认证。操作步骤 开通 SOFAStack 产品服务。使用阿里云账号登录 阿里云官网。在上方菜单栏选择 产品与服务>中间件>金融分布式架构 SOFAStack。在 SOFAStack 产品主页...
产品概述
TSDB 具备秒级写入百万级时序数据的性能，提供高压缩比低成本存储、预降采样、插值、多维聚合计算、可视化查询结果等功能，解决由设备采集点数量巨大、数据采集频率高造成的存储成本高、写入和查询分析效率低的问题。TSDB是一个分布式时间...
工作流调度
使用限制 当前只有Java任务支持数据传输，分布式Java任务请使用MapReduce模型进行数据传输。使用 指南 具体操作，请参见 流程管理。工作流上下游数据传递 SchedulerX提供工作流任务编排，同时支持任务上下游的数据传递。返回执行结果/*@...
工作流调度
使用限制 当前只有Java任务支持数据传输，分布式Java任务请使用MapReduce模型进行数据传输。使用 指南 具体操作，请参见 流程管理。工作流上下游数据传递 SchedulerX提供工作流任务编排，同时支持任务上下游的数据传递。返回执行结果/*@...
开通SchedulerX
背景信息 阿里云分布式任务调度SchedulerX已于2021年09月01日正式商业化。操作步骤 首次使用并登录分布式任务调度平台，在弹出的对话框中单击 开通。在 分布式任务管理 页面，单击 立即购买。在 确认订单 页面 服务协议 区域，选中 我已...
产品优势
微服务产品在蚂蚁集团内部已支撑数万个节点规模的分布式应用架构，具有高可用性、高可扩展性、高性能、高时效性、稳定可靠等核心优势，并提供丰富的功能来帮助用户简化分布式系统的管理，让业务开发人员可以专注于业务逻辑实现，提升研发...
安装日志采集客户端
日志采集客户端 Logtail 可通过运维脚本批量安装或手动安装。批量安装（推荐）创建指定模板。在 金融分布式架构 控制台页面，选择 运维管理>经典应用服务>日常运维>指令模板，在右侧窗口中单击 创建模板。在 新建指令模板 页面中，填入相应...
基础术语
分支事务 action 一个分布式事务可能包含多个数据库本地事务，在分布式事务框架下，分支事务可能是一个分库上执行的 SQL 语句，或是一个自定义模式服务的调用。发起方 initiator 分布式事务的发起方负责启动分布式事务，通过调用参与者的...
步骤一：架构规划
本文以同城双活单元化架构为示例，介绍如何进行单元化技术架构和应用架构的规划，输出部署架构图和应用架构图，指导研发运维人员初始化环境和进行应用研发改造。前提条件 了解 单元化架构 架构介绍 如上图所...分布式事务 无 无 微服务 无 无
什么是阿里云Elasticsearch
Beats数据采集中心 Beats是轻量级的数据采集工具，集合了多种单一用途的数据采集器。它们从成百上千或成千上万台机器和系统向Logstash或Elasticsearch发送数据。阿里云Elasticsearch的Beats采集中心支持Filebeat、Metricbeat、Auditbeat和...
数据库监控
说明 上述各监控项的数据采集周期均为1分钟。最多支持查看7天内的监控数据。操作步骤 登录 PolarDB分布式版控制台。在页面左上角选择目标实例所在地域。在 实例列表 页，找到目标实例并单击实例ID。在左侧导航栏中，单击 监控与报警>数据库...
分布式任务调度平台（SchedulerX）服务等级协议
本文介绍分布式任务调度平台（SchedulerX）的服务等级协议。关于服务等级协议，请参见 分布式任务调度平台（SchedulerX）服务等级协议。
实例监控
说明 上述各 资源监控 项的数据采集周期均为1分钟，各 引擎监控 项的数据采集周期均为5秒钟。最多支持查看7天内的监控数据。操作步骤 登录 PolarDB分布式版控制台。在页面左上角选择目标实例所在地域。在 实例列表 页，找到目标实例并单击...
TCC 模式接入
分布式事务支持以 TCC 模式接入 SOFARPC、Dubbo 和 Spring Cloud 远程服务框架。本文将介绍如何定义接口、实现接口，并针对远程服务框架进行发布服务。定义接口 TCC 参与者需要实现三个方法，分别是一阶段 Try 方法、二阶段 Confirm 方法...
应用场景
SOFABoot 可帮助用户快速搭建高效、可靠的分布式应用，同时能与 Spring Boot 工程无缝集成，降低用户的迁移成本。快速开发分布式应用 SOFABoot 框架集成了所有 SOFA 中间件，以“依赖即服务”的调用形式实现快速配置，轻松搭建稳定、可靠、...
分布式任务调度平台（SchedulerX）服务等级协议
本文介绍分布式任务调度平台（SchedulerX）的服务等级协议。关于服务等级协议，请参见 分布式任务调度平台（SchedulerX）服务等级协议。
常见问题
运维管理 容器应用服务常见问题 经典应用服务常见问题 中间件 SOFABoot 常见问题 微服务常见问题 微服务故障排查之 DRM 微服务故障排查之限流 微服务故障排查之 RPC 服务网格-故障排查 消息队列...数据访问代理常见问题 分布式事务常见问题
依赖与配置项
分布式事务不仅支持 SOFABoot 框架，也支持纯 Spring 的应用场景。本文将分别介绍针对不同的服务框架所要预先完成的依赖与配置项操作。无论是事务发起方还是参与者均需要完成本文的依赖与配置项操作。环境要求 必须使用 JDK 1.7 或以上版本...
金融云分布式任务调度平台（SchedulerX）服务等级协议
本文介绍金融云分布式任务调度平台（SchedulerX）的服务等级协议。关于服务等级协议，请参见 金融云分布式任务调度平台（SchedulerX）服务等级协议。
日志同步分析概述
Kafka实时接收到Filebeat采集的数据后，输出到Logstash中进行过滤处理，最终将满足需求的数据输出到Elasticsearch中进行分布式检索，并通过Kibana进行分析与展示。查询分析RocketMQ客户端日志 使用Beats、Elasticsearch、Logstash和Kibana...
金融云分布式任务调度平台（SchedulerX）服务等级协议
本文介绍金融云分布式任务调度平台（SchedulerX）的服务等级协议。关于服务等级协议，请参见 金融云分布式任务调度平台（SchedulerX）服务等级协议。
10 分钟本地试用公有云分布式事务
本节介绍如何快速本地试用公有云分布式事务服务。操作步骤 开通分布式事务服务。说明 如果已开通服务，可以忽略这一步。如果没有账号，可使用支付宝扫描登录。登录 分布式事务产品 页面。在 开通 DTX 分布式事务体验版 页面，单击 确认开通...
- 产品推荐
- 这些文档可能帮助您