应用场景
分布式技术能力 提供金融级分布式框架和金融级分布式数据库，支持多租户，支持海量用户的高业务并发场景。提供大数据和人工智能的中台能力建设，支持分布式金融核心系统的异地多活架构。金融级云原生应用 说明 满足金融业务发展和严苛场景...
产品相关问题
分布式调度：提高系统的可用性、伸缩性，且调度与业务的分离，让研发更专注业务逻辑的开发。多种任务类型：简单任务，集群任务，消息任务，流式任务，满足不同场景需求。丰富的管理功能：包括定时触发、事件触发、手动触发、优雅停止、断点...
使用ossimport迁移数据
ossimport支持将任意地域的本地存储数据、第三方存储数据、对象存储OSS数据迁移至任意地域的OSS中。本文介绍如何使用ossimport将数据从第三方存储迁移到OSS。背景信息 某用户的数据存储于腾讯云COS广州（华南）区域，数据大小约500TB。现...
基于TairString实现高性能分布式锁
如果丢失的数据跟分布式锁有关，则会导致锁的机制出现问题，从而引起业务异常。下文介绍三种保障一致性的方法。使用 红锁（RedLock）红锁是Redis作者提出的一致性解决方案。红锁的本质是一个概率问题：如果一个主从架构的Redis在高可用切换...
概述
分布式（线性扩展）传统分布式数据库，业界常见基于Paxos/Raft的多副本机制构建列存，但OLTP和OLAP各自的查询场景会有不同的诉求，对资源的依赖程度也不同，不同副本之间强一致分区策略/扩缩容机制，使得TP和AP的线性扩容能力容易相互制约...
什么是 SOFATracer
SOFATracer 是蚂蚁金服基于 OpenTracing 规范开发的分布式链路跟踪系统，其核心理念就是通过一个全局的 TraceId 将分布在各个服务节点上的同一次请求串联起来。通过统一的 TraceId 将调用链路中的各种网络调用情况以日志的方式记录下来，...
影响查询性能的因素
节点数量 AnalyticDB MySQL版 使用了分布式数据处理架构，一条查询会被分解成多个Stage在不同的节点上并行执行。所以如果集群中的节点数量越多，AnalyticDB MySQL版 处理查询的能力也会越强。您可以根据实际的业务需求来决定集群节点的购买...
产品架构
Storage Disaggregation（存储计算分离架构）存储和Shared Storage类似，有一个分布式的共享存储集群，计算层处理数据的模式和Shared Nothing类似，数据是分片的，每个Shard只处理自己所在分片的数据，每个计算节点还可以有本地缓存。...
强弱依赖治理概述
强弱依赖治理的应用 强弱依赖治理主要可以被应用到以下场景：系统改造验收：对于分布式系统，至少在运行态中，不会因为依赖的系统后台出现故障，引起当前应用出现系统级可用性的故障，例如进程挂掉、频繁FullGC、负载飙高等，何时何地都应...
产品优势
变更管控与保障 针对金融级场景下大规模分布式系统的特点，提供了丰富的发布策略以满足不同的场景，如：分组发布、Beta 发布、灰度发布等，帮助传统架构平滑过渡，适应金融技术风险保障需求，实现大规模金融级运维场景下的容器服务落地。...
分布式序列
数据访问代理提供了生成分布式环境下的分布式唯一序列（Sequence）的能力，该序列有全局唯一、全局递增的特性，常用于分库分表下的主键、业务主键生成的场景。重要 数据访问代理分布式序列功能是基于数据库实现，如果需要使用该功能，需要...
错误编码：HSF-0002
客户端或服务端偶然会出现Java GC问题：检查服务端和客户端Java GC日志，耗时很长的Java GC会导致超时，建议您优化业务代码的Java GC问题。客户端负荷高：使用增加客户端机器等方法，减轻客户端的负荷。适用于 企业级分布式应用服务EDAS
计费项
重要 若源数据库为分布式实例（PolarDB分布式版、DMS LogicDB、MongoDB），则DTS同步和数据校验功能的价格还与分布式数据库节点数量有关。实例 计费项 计费规则 数据迁移实例 链路配置费用 数据迁移实例仅支持按量付费，计费规则如下：仅在...
流式数据通道概述
MaxCompute流式数据通道服务功能点如下：提供流式语义API：通过流式服务的API可以方便地开发出分布式数据同步服务。支持自动创建分区：解决数据同步服务并发创建分区导致的并发抢锁问题。支持增量数据异步聚合（Merge）：提升数据存储效率...
ClickHouse
背景信息 ClickHouse是一个用于联机分析（OLAP）的列式数据库管理系统，详情请参见 什么是ClickHouse。ClickHouse连接器支持的信息如下.类别 详情 支持类型 仅支持结果表 运行模式 批模式和流模式 数据格式 暂不适用 特有监控指标 ...
Multi-Master关键技术介绍
分布式事务管理 AnalyticDB PostgreSQL版 分布式事务 AnalyticDB PostgreSQL版 通过二阶段提交协议（2PC）来实现分布式事务，同时使用了分布式快照来保证Master和不同Segment间的数据一致性。分布式事务由Main Master发起，通过2PC协议提交...
集群容灾能力
数据容灾 在Hadoop分布式文件系统（HDFS）中，每一个文件的数据均是分块存储的，每一个数据块保存有多个副本（默认为3），并且尽量保证这些数据块副本分布在不同的机架之上。一般情况下，HDFS的副本系数是3，存放策略是将一个副本存放在...
什么是阿里云Elasticsearch
Beats数据采集中心 Beats是轻量级的数据采集工具，集合了多种单一用途的数据采集器。它们从成百上千或成千上万台机器和系统向Logstash或Elasticsearch发送数据。阿里云Elasticsearch的Beats采集中心支持Filebeat、Metricbeat、Auditbeat和...
江西农信
江西农信日前携手蚂蚁集团，使用最前沿的云原生技术，实现了传统业务系统从集中式技术架构下移，并平滑迁移上云，为整体核心系统进行分布式架构升级和演进探索积累了坚实的技术基础。客户需求 过去多年，江西农信基于传统 ESB...
优化建议
常用优化包括 合理的选择拆分字段。选择拆分字段时需要综合考虑查询性能、分布式事务、热点、数据迁移等多个因素...调整分布式数据库的配置参数，重新观察系统；调整读写比例、并发活跃连接数，重新观察系统；比较结果，找出正确的优化方式。
什么是企业级分布式应用服务EDAS
快鱼服饰FASTFISH 借助EDAS搭建起业内一个成熟的分布式业务系统，帮助快鱼解决原有多套系统之间商品、渠道等数据不一致等问题，保障系统的快速迭代和敏捷开发，降低研发周期及成本。微服务架构下，很好地支持海量数据及应用的并发，系统...
常见问题
售前常见问题 产品计费常见问题 数据采集常见问题 数据存储常见问题 查询与分析常见问题 数据加工常见问题 消费与投递常见问题 售前常见问题 什么是日志服务？日志服务可以做什么？日志服务能为用户带来哪些价值？日志服务支持采集哪些数据...
创建分布式实例
若您希望跨地域的不同实例能够自动进行实时数据同步，您可以通过转化已有普通实例或创建新实例的方式，创建分布式（全球多活）实例。可应用于跨地域的实例多活、灾备与数据同步等场景。背景信息 Tair 全球多活 是阿里云自研的基于 云原生...
创建分布式实例
若您希望跨地域的不同实例能够自动进行实时数据同步，您可以通过转化已有普通实例或创建新实例的方式，创建分布式（全球多活）实例。可应用于跨地域的实例多活、灾备与数据同步等场景。背景信息 Tair 全球多活 是阿里云自研的基于 云原生...
日志同步分析概述
应用系统在提供服务过程中，会产生各种各样的日志数据。针对这些数据，可以根据业务的需求和环境，选择对应的方案采集数据并传输到Elasticsearch服务中进行查询分析。本文对日志同步分析的方案进行了汇总。相关文档 方案描述 通过Filebeat...
恢复PolarDB分布式版数据库
本文介绍如何通过数据库备份DBS恢复 PolarDB分布式版 数据库。前提条件 已完成数据库备份，具体操作，请参见 PolarDB分布式版逻辑备份。操作步骤 登录 DBS控制台。单击左侧导航栏中的 备份计划，然后在上方选择目标地域。找到目标备份计划...
对接Jaeger
数据被采集存储后，分布式追踪系统一般会选择使用包含时间轴的时序图来呈现这个调用链。但在数据采集过程中，由于采集日志业务逻辑和用户代码深度融合，并且不同系统的API并不兼容，导致如果切换追踪系统，会有较大改动。OpenTracing 为了...
快速体验
涉及产品 本案例涉及以下产品：一站式大数据开发治理DataWorks 本案例通过DataWorks实现数据采集、加工、质量监控，以及数据可视化展现，您需提前开通该服务。详情请参见 开通DataWorks服务。云原生大数据计算服务MaxCompute 实现底层加工...
ZooKeeper的使用场景和MSE ZooKeeper的优势
ZooKeeper的技术应用场景 场景一：大数据领域的高可用 Kafka、Hadoop、HBase和Flink等大数据系统默认把ZooKeeper当作分布式协调的组件，利用ZooKeeper做出高可用方案，从而提高集群可用性。场景二：自研系统的分布式协调 Master的选举：...
HDFS概述
HDFS（Hadoop Distributed File System）是一种Hadoop分布式文件系统，具备高度容错特性，支持高吞吐量数据访问，可以在处理海量数据（TB或PB级别以上）的同时最大可能的降低成本。HDFS适用于大规模数据的分布式读写，特别是读多写少的场景...
产品架构
时序引擎 LindormTSDB 是面向海量时序数据设计的分布式时序引擎，兼容开源OpenTSDB等标准接口，其基于时序数据特点和查询方式，采用Timerange+hash结合的分区算法，时序专向优化的LSM架构和文件结构，支持海量时序数据的低成本存储、预降...
设置应用日志关联
在分布式链路跟踪中，通过为应用进行日志关联设置，您可以在单链路显示时查看某一个链路环节所对应的日志信息。日志关联原理 对应用日志输出的配置进行修改，更改日志输出 Pattern，在应用日志中，输出 TraceId 及 SpanId。在云端应用中，...
错误码
SDK 集成相关 错误码 错误消息 错误说明 解决方案 DTX-000 dtx component scanner init error.SDK 启动失败，分布式事务不可用。DTX-001 Bean[%s]can not have@DtxTransaction and@TccBusinessAction both.同一个 bean 不能既有@...
实验介绍
涉及产品 本案例涉及以下产品：一站式大数据开发治理DataWorks 本案例通过DataWorks实现数据采集，加工，质量监控，与数据可视化展现，您需提前开通该服务。详情请参见 开通DataWorks服务。云原生大数据计算服务MaxCompute 实现底层加工...
采集客户端数据的高可用方案
当Logstore A出现故障时，您需要将数据采集及时切换到Logstore B上，使Logstore B的数据实时可用。当Logstore B故障时，Logstore A的数据仍然实时可用。操作步骤：在日志服务控制台上，创建Project和Logstore。创建A地域的Project A和...
调用链采样配置最佳实践
对于绝大多数分布式系统，不是每一条调用链都值得被可观测平台记录，因为其中包含大量重复、低关注度信息。调整采样是目前解决这类问题最高效且主流的方式，但具体配置什么样的采样策略，能够在可控的资源开销和费用成本内，最大程度保证错...
基本概念
日志采集器 采集系统监控日志用来生成监控数据以及调用链信息的组件。在VPC网络中，机器天然与服务器隔离，日志采集器可以打通服务器和本地机器的连接通道。安装一个日志采集器即可采集整个VPC里所有机器的数据。实时日志 实时日志是针对...
功能特性
覆盖基础（ActionTrail、容器服务Kubernetes版）、存储（OSS、NAS）、网络（SLB、API网关）、数据库（关系型数据库RDS、云原生分布式数据库PolarDB-X、PolarDB MySQL云原生数据库）、安全（WAF、DDoS防护、云防火墙、云安全中心）等云产品...
全球多活使用限制
一个分布式实例中的子实例必须都在中国内地或都在其他地域，若您需要在中国内地地域与其他地域之间进行数据同步，请使用DTS数据同步功能，更多信息请参见 申请跨境数据同步权限。成为分布式实例的子实例后，存在如下限制：不支持变更 实例...
南京银行
新平台建立在金融分布式架构 SOFAStack 和分布式数据库 OceanBase 之上，从系统建设、研发模式、运维管控等方面全面实现分布式架构转型升级。至今，“鑫云+”平台已服务多家银行的上百万用户，平均每个客户放款时间只需 1 秒，日处理订单量...
- 产品推荐
- 这些文档可能帮助您