ossimport概述
分布式模式：当您需要迁移的数据大于30 TB时，推荐部署 分布式模式。您可以将ossimport部署在任意多台可以访问您待迁移数据，且可以访问OSS的机器上。说明 当您待迁移的数据过大时，为了节约时间，您可以将ossimport部署到与您OSS相同地域...
基本概念
发起方 Initiator，分布式事务的发起方负责启动分布式事务，通过调用参与者的服务，将参与者纳入到分布式事务当中，并决定整个分布式事务是提交还是回滚。一个分布式事务有且只能有一个发起方。分组标识 用于在网关上做全局的唯一标识，...
2022年
企业级分布式批处理方案 1.4.2，2022-03-07 变更类型 功能描述 相关文档 新增 分布式任务调度系统SchedulerX 2.0的日志服务，您不需要修改一行代码，只需要增加一个Log4j或Logback的配置，即可在控制台看到每次任务调度（包括分布式任务）...
产品整体介绍
在第三方认证层面，AnalyticDB PostgreSQL版 通过了“国际数据库TPC官方TPC-H 30TB认证”（性价比综合排名第一），信通院“分布式事务型数据库基础能力评测”（TPC-C）和“分布式分析型数据库大规模性能认证”（640节点 TPC-DS 100TB）。...
如何管理应用级别的资源和任务优先级
执行模式 执行模式，这里特指任务执行的模式，当前支持以下模式。单机运行：随机选择一台机器执行。广播运行：所有机器同时执行并等待全部结束。可视化MapReduce：Map模型，子任务300以下，有子任务列表。专业版可支持至1,000以下，且支持...
如何管理应用级别的资源和任务优先级
专业版 日志服务 开启后，增加一个Log4j或Logback的配置，即可在控制台看到每次任务调度（包括分布式任务）的业务日志，方便排查问题。关闭 load5 不能超过客户端机器CPU可用核数 0 内存使用率 表示近5分钟进程内存平均使用率不能大于该...
安装并使用Alibaba Cloud Compiler
Alibaba Cloud Compiler是阿里云打造的C++编译器，基于Clang/LLVM-13社区开源版本开发，继承开源版本支持的所有选项、参数，同时结合阿里云基础设施进行深度优化、补充特性，可以让您获得更好的C++编译器体验。本文主要介绍如何在Alibaba ...
开启CNFS NAS计算端分布式缓存
分布式缓存关键性能指标 指标 测试场景 ① 未开启分布式缓存 开启分布式缓存 元数据性能 100万文件目录遍历耗时 18min 小于60s 创建写入4 KB文件耗时 3000μs 小于200μs 重复读取4 KB文件耗时 400μs 小于100μs 吞吐性能 单节点读写吞吐...
开启CNFS NAS计算端分布式缓存
分布式缓存关键性能指标 指标 测试场景 ① 未开启分布式缓存 开启分布式缓存 元数据性能 100万文件目录遍历耗时 18min 小于60s 创建写入4 KB文件耗时 3000μs 小于200μs 重复读取4 KB文件耗时 400μs 小于100μs 吞吐性能 单节点读写吞吐...
事件中心
事件中心将云产品所生成的事件数据进行统一管理、存储、分析和展示，已接入EDAS的变更事件、ARMS的报警事件、0-1事件（如死锁、OOM和应用启动等）、MSE的微服务管控事件和K8s集群事件。当您的应用使用了相关的产品，对应的事件会自动接入...
源为PolarDB-X的任务配置方案
DTS支持将源 PolarDB分布式版 实例同步或迁移至目标库。但是由于直接使用 PolarDB分布式版 作为源实例配置DTS任务，当该实例下挂载的RDS MySQL数量超过2个时，可能会产生性能瓶颈，稳定性风险，最终可能会对业务造成影响。为了更好保障任务...
源为PolarDB-X的任务配置方案
DTS支持将源 PolarDB分布式版 实例同步或迁移至目标库。但是由于直接使用 PolarDB分布式版 作为源实例配置DTS任务，当该实例下挂载的RDS MySQL数量超过2个时，可能会产生性能瓶颈，稳定性风险，最终可能会对业务造成影响。为了更好保障任务...
使用ping命令丢包或不通时的链路测试方法
当客户端访问目标服务器或负载均衡，使用ping命令测试出现丢包或网络不通时，可以通过链路测试工具进行链路测试来判断问题来源。本文介绍如何使用链路测试工具进行链路测试。链路测试流程 通常情况下，链路测试流程如下图所示。链路测试...
典型客户案例
完成云平台 PaaS 层建设，构建分布式系统上下游生态，实现分布式云原生架构体系 实现分布式云原生架构体系，需要从技术规范、基础设施、生产力工具、组织流程等各个方面进行持续革新：需要一个面向分布式架构的开发平台和运行平台，结合...
全场景解决方案
金融级高可靠性 深度集成 OceanBase 分布式数据库以及 SOFA 金融级云原生分布式框架，保证应用和数据弹性扩展，同时具备高可用（RTO=0，RPO<30s）和一致性，通过蚂蚁集团自身业务沉淀的“资金核对体系”、“全链路压测”等技术风险防控组件...
离线同步并发和限流之间的关系
如果您对于同步性能有比较高的诉求可以使用分布式模式，另外分布式模式也可以使用机器的碎片资源，对资源利用率友好。限制和最佳实践：分布式执行模式下，配置较大任务并发度可能会对您的数据存储产生较大的访问压力，请评估数据存储的访问...
数据倾斜诊断
哈希（HASH）分布 该分布方式会根据分布键HASH值将数据分布到各个计算节点上，该方式的关键在于如何选择分布键，分布键选择不正确时，容易造成数据倾斜。可遵循如下规则选择分布键：有主键的表，建议选择主键作为分布键。无主键的表，建议...
Multi-Master关键技术介绍
分布式事务管理 AnalyticDB PostgreSQL版 分布式事务 AnalyticDB PostgreSQL版 通过二阶段提交协议（2PC）来实现分布式事务，同时使用了分布式快照来保证Master和不同Segment间的数据一致性。分布式事务由Main Master发起，通过2PC协议提交...
lwip
说明 Apache license v2.0 目录结构├─api│├─api_lib.c#库│├─api_msg.c#消息机制│├─err.c#异常api│├─netbuf.c#网络缓存api│├─netdb.c#dns实现│├─netifapi.c#网卡api│├─sockets.c#套接字api│└─tcpip.c#tcpip任务...
分布式序列
数据访问代理提供了生成分布式环境下的分布式唯一序列（Sequence）的能力，该序列有全局唯一、全局递增的特性，常用于分库分表下的主键、业务主键生成的场景。重要 数据访问代理分布式序列功能是基于数据库实现，如果需要使用该功能，需要...
什么是企业级分布式应用服务EDAS
企业级分布式应用服务EDAS（Enterprise Distributed Application Service）是一个应用托管和微服务管理的云原生PaaS平台，提供应用开发、部署、监控、运维等全栈式解决方案，同时支持Spring Cloud和Apache Dubbo（以下简称Dubbo）等微服务...
附录：SOFAStack 产品目录
SOFAStack 源于自蚂蚁内部沉淀十多年的金融级分布式中间件技术体系，吸收了支付宝自创立以来在关键金融交易系统锤炼出来的架构实践。SOFAStack 所有的产品技术均经过蚂蚁集团自身严苛的金融场景验证，为金融交易技术保证风险安全的同时，...
关键技术竞争力
异构兼容标准管控 SOFA Mesh 提供平台无关、语言无关、轻量无侵入特性的云原生方案，实现了传统应用平滑上云，支持异构系统之间的互联互通，传统应用向分布式架构平滑升级，提供了既支持基于 ESB 的传统 SOA 架构又支持 Spring Cloud 和 ...
任务管理
登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏，选择 任务管理。在 任务管理 页面，选择目标命名空间，单击 创建任务。在 基本配置 配置向导页，配置调度任务的相关信息，然后单击 下一步。基本配置参数说明如下：配置名称...
任务管理
执行模式 执行模式，这里特指任务执行的模式，当前支持以下模式。单机运行：随机选一台机器执行。广播运行：所有机器同时执行并等待全部结束。可视化MapReduce：Map模型，子任务300以下，有子任务列表。专业版可支持至1,000以下，且支持...
概述
Dubbo：开源分布式服务框架 H2C：开放的网络通信框架。实现原理 SOFARPC 中的远程调用是通过服务模型来定义服务调用双方的。服务分为：服务消费方：对应 RPC 的调用端，可以理解为调用客户端，即“引用(Reference)”。服务提供方：对应 RPC...
使用ossimport迁移数据
迁移方案 使用分布式模式将第三方存储迁移至OSS的过程如下：说明 在ECS上搭建ossimport分布式环境后，ossimport从腾讯云COS广州（华南）区域下载数据到ECS华东1（杭州），建议使用外网。使用ossimport从ECS华东1（杭州）将数据上传到OSS...
常见问题
code=exited”错误 启动SSH服务时出现“error while loading shared libraries”错误 ECS网络问题 Windows实例ping外网地址提示“一般故障”Linux系统的ECS中没有禁ping却ping不通的解决方法 使用ping命令测试ECS实例时ping不通的排查方法 ...
金融云用户指南概述
N Y Y 服务列表 N Y Y K8s Service 管理 N Y Y 弹性伸缩 N Y Y 多语言应用 K8s支持多语言应用 N N N 应用路由 K8s Ingress Y Y Y 配置管理 配置列表历史版本监听查询推送轨迹 Y Y Y K8s配置 Y Y Y 微服务管理（治理）调用链查询 Y Y Y 服务...
服务熔断
服务熔断的规则发布流程如下：通过微服务管控台 MS 下发熔断的动态配置到分布式配置中心 DRM。DRM 将熔断的动态配置下发到 MOSN。MOSN 根据平均 RT 和错误率触发熔断。熔断可在客户端或服务端生效。创建熔断规则 登录 SOFAStack 控制台。在...
强一致分布式事务
分布式事务的下游生态 读写分离的一致性 事务型的分布式数据库一般会采用读写分离的模式提升读的性能，因此分布式事务除了保障主库的一致性以外，还需要保证用户在使用读写分离模式下对于备库的一致性。PolarDB-X 产品支持主实例和只读实例...
组件中心
中间件 分布式链路跟踪 一款实时监控并管理企业应用性能和故障的云服务，其提供数字化性能管理解决方案，帮助企业在分布式架构下快速发现并准确定位应用全生命周期的性能问题。任务调度 提供分布式任务调度框架，实现任务的分布式处理，并...
常见问题
本文主要介绍在操作分布式事务过程中的常见问题。SOFAStack 是否可以部署在虚拟机、物理机上？可以，SOFAStack 部署支持物理机、虚机机 VM。SOFAStack 当前是否只支持阿里云飞天 ACK？SOFAStack 部署支持多云异构、目前支持华为云、开源 ...
产品功能
GTS 提供了跨数据库、跨服务、消息队列和混合分布式事务，并提供多种事务模式。跨数据库分布式事务 系统分库、分表后，跨库事务几乎无法避免，GTS 可以让应用轻松具备跨库事务处理能力。跨服务的分布式事务 提供跨库、跨服务的事务支持，...
产品概述
高兼容 PolarDB分布式版 主要兼容MySQL，包括SQL、函数类型等，技术上引入全局时间授时服务，提供全局一致性的分布式事务能力，通过TSO+2PC提供数据库完整的ACID能力，满足分布式下的Read-Committed/Repeatable-Read的隔离级别。同时在分布...
源为PolarDB-X的功能规范和约束说明
由于 PolarDB分布式版 自身不提供Binlog以及其他的一些限制，在业务设计、运维变更、数据质量以及业务开发时，会受到如下规范的约束，请您在实际使用中注意。概览 业务设计规范 数据库架构规范 运维变更规范 数据质量风险声明 业务开发的...
源为PolarDB-X的功能规范和约束说明
由于 PolarDB分布式版 自身不提供Binlog以及其他的一些限制，在业务设计、运维变更、数据质量以及业务开发时，会受到如下规范的约束，请您在实际使用中注意。概览 业务设计规范 数据库架构规范 运维变更规范 数据质量风险声明 业务开发的...
功能特性
数据访问代理兼容 MySQL 协议和语法，支持分库分表、平滑扩容、服务升降配、透明读写分离和分布式事务等特性，具备分布式数据库全生命周期的运维管控能力。分库分表 支持 RDS、OceanBase、MySQL 的分库分表。在创建分布式数据库后，只需...
服务体系
在进行分布式改造或应用上云后，分布式架构下的应用链路长、复杂度增加，并且云上应用的迭代速度比传统应用大幅提升，这些都给质量团队和运维团队带来了巨大的挑战。为了让用户能够用好云、上好云、SOFAStack 在提供优秀分布式架构、技术...
技术架构
架构演进理念 当前，分布式领域有3大技术方向：Sharding技术，NewSQL原生分布式技术，云原生DB技术。每种分布式都有其独特的优势和特点。PolarDB-X 的架构继承了DRDS和X-DB技术的稳定性，结合了PolarDB的云原生技术，融入了NewSQL对于分布...
- 产品推荐
- 这些文档可能帮助您