Multi-Master关键技术介绍
GTM Proxy可以通过共享内存和Backend进程通信，相比Tcp Loopback更高效，既可以减少内存拷贝，也没有Network Stack开销。每个GTM Proxy进程会和GTM Server建立一个网络连接，并会服务多个本地的Backend进程，将它们的GTM请求转发给GTM ...
自适应扫描
这种模式通过QC进程与PX Worker进程之间特定的RPC通信机制，由QC进程负责告知每个PX Worker进程可以执行的扫描任务，从而消除计算倾斜的问题。术语 QC(Query Coordinator)：发起ePQ并行查询的进程角色。PX Worker：参与ePQ跨节点并行查询的...
自适应扫描
这种模式通过QC进程与PX Worker进程之间特定的RPC通信机制，由QC进程负责告知每个PX Worker进程可以执行的扫描任务，从而消除计算倾斜的问题。术语 QC(Query Coordinator)：发起ePQ并行查询的进程角色。PX Worker：参与ePQ跨节点并行查询的...
内存诊断
共享内存 共享内存允许两个或更多进程访问同一块内存，是进程通信方式之一。tmpfs Linux临时文件系统，是一种基于内存的文件系统，读写的文件内容只存在内存中。hugetlb 基于文件系统的大页内存。内核内存 内核态内存重点关注Sunreclaim及...
错误码
E40 套接字路径不存在 Enclave CLI在管理Enclave时会根据Enclave ID生成和Enclave管理进程通信的套接字路径，该错误码表示此套接字路径不存在，可能原因是Enclave管理进程运行异常，请查看报错回溯信息以获取更多细节。E41 Enclave管理进程...
通过Ingress Controller实现gRPC服务访问
背景信息 gRPC是Google开源的一个高性能RPC通信框架，通过 Protocol Buffers 作为其IDL，在不同语言开发的平台上使用，同时gRPC基于HTTP/2协议实现，提供了多路复用、头部压缩、流控等特性，极大地提高了客户端与服务端的通信效率。...
RPC 常见问题
登录 RPC 服务端，运行以下命令：ps-ef|grep java 查看进程启动参数 rpc_bind_network_interface 或 rpc_enabled_ip_range 是否绑定了正确的 IP 地址。错误日志中出现“Rpc invocation timeout[responseCommand TIMEOUT]”报错 RPC 调用...
参与者接入模式
与 RPC 服务协议无关：在 SOA 架构下，一个或多个数据库操作往往被包装成一个或多个 Service，不同的 Service 之间通过 RPC 协议通信。TCC 模式构建在 SOA 架构上，与底层协议无关。与底层事务实现无关：TCC 是一个抽象的基于 Service 层的...
安装并使用Alibaba Cloud Compiler
RPC（远程过程调用）库是一个提供进程间通信的软件库，它允许C++程序执行跨网络的函数或方法，就像调用本地函数一样。RPC库可以屏蔽网络传输、序列化、反序列化、路由等诸多细节，使得开发者可以专注于实现业务逻辑。HTTP超文本传输协议是...
业务进程说明
以下示例进程间通信使用的是Linux的消息队列，您也可替换为其它进程间通信方式：static void demo_tunnel_switch_recv_handle(void*handle,const aiot_tunnel_switch_recv_data_t*recv,void*userdata){ demo_tunnel_info_t info;...
远程登录进程说明
本文以C Link SDK中的Demo文件./demos/tunnel_basic_demo.c 为例，介绍业务进程与远程登录进程隔离中远程登录运维进程的处理过程以及相关日志。流程图 操作步骤 初始化。创建1个实例并内部初始化默认参数*/void*tunnel_handle=aiot_tunnel_...
功能使用
本文详细说明iOS端推流SDK接口、SDK的基本使用流程以及相关功能的使用示例。说明 如果您需要使用移动端进行推流，详细操作请参见 推流、拉流与播流。iOS推流SDK特性 支持RTMP推流协议。支持基于RTC的RTS超低延时直播推拉流协议。...
恶意行为防御自定义规则最佳实践
说明 系统通过 IP、端口、网络通信的进程路径 字段判断，拦截进程网络。配置项 说明 规则名称 建议按误拦截告警规则命名，例如进程网络加白规则。规则类型 选择 进程网络。系统类型 根据实际系统类型选择，本示例选择 windows。进程路径 ...
共享内存通信（SMC）使用说明
Alibaba Cloud Linux 3提供的共享内存通信SMC（Shared Memory Communication）是一种兼容socket层、使用共享内存技术实现的高性能内核网络协议栈。根据共享内存技术的不同，SMC又可以细分为基于Internal Shared Memory（ISM）技术的SMC ...
Hadoop Yarn RPC 0 Day在野利用分析与传播手段披露
Hadoop Yarn RPC未授权访问使得攻击者无需认证即可通过RPC通信执行恶意命令。Hadoop作为大数据计算基础组件往往集群化部署，一旦一台主机沦陷，其整个集群都将受到威胁，其对外暴露的端口服务会造成极大威胁。阿里云安全持续对该BOT进行...
使用Prometheus监控E-MapReduce
执行以下命令，查找Exporter进程。ps-ef|grep taihao_exporter 执行以下命令，修改taihao_exporter.yaml配置prom_sink_enable=true，并重启服务。sed-i 's/prom_sink_enable:\s*false/prom_sink_enable:true/g'/usr/local/taihao_exporter/...
使用Prometheus监控E-MapReduce
执行以下命令，查找Exporter进程。ps-ef|grep taihao_exporter 执行以下命令，修改taihao_exporter.yaml配置prom_sink_enable=true，并重启服务。sed-i 's/prom_sink_enable:\s*false/prom_sink_enable:true/g'/usr/local/taihao_exporter/...
消息 Mesh
与 RPC 的点对点通信方式不同，无论是消息发送端还是订阅端，都只与消息服务端通信。这意味着：即使进行了消息 Mesh 化改造后，MOSN 也只与消息服务端通信。同一个应用的 MOSN 节点之间是不存在消息连接的。为了实现 MOSN 之间的消息流量...
参数配置
edit_log_port 9010 FE Group（Master、Follower、Observer）之间通信用的端口。edit_log_type BDB Edit log的类型，只能为BDB。bdbje_heartbeat_timeout_second 30 BDBJE心跳超时的间隔，单位为s。bdbje_lock_timeout_second 1 BDBJE锁...
参数配置
edit_log_port 9010 FE Group（Master、Follower、Observer）之间通信用的端口。edit_log_type BDB Edit log的类型，只能为BDB。bdbje_heartbeat_timeout_second 30 BDBJE心跳超时的间隔，单位为s。bdbje_lock_timeout_second 1 BDBJE锁...
导入概述
因为该RPC可能涉及多个分片内存块的写盘操作，所以可能会因为写盘导致RPC超时，可以适当调整超时时间来减少超时错误（例如send batch fail）。同时，如果调大参数 write_buffer_size，则 tablet_writer_rpc_timeout_sec 参数也需要适当调大...
Nacos TLS传输加密
Dnacos.remote.client.rpc.tls.enable=true-Dnacos.remote.client.rpc.tls.trustAll=true-Dnacos.remote.client.rpc.tls.provider=JDK 该模式的生效范围控制在JVM进程维度，进程内没有在properties属性中指定 tls 参数的NacosConfigService...
数据开发常见问题
问题分析：终止Shell作业时会给Shell进程发送终止信号，如果YARN Application的驱动程序和Shell进程不存在父子进程关系，则YARN Application不会随Shell进程的终止而终止。例如Hive、sqoop、spark-submit（cluster模式）均存在这种情况。...
BE参数配置
本文介绍BE进程的相关配置项。背景信息 BE进程的配置文件be.conf通常存放在BE部署路径的 conf/目录下。而在0.14版本中会引入另一个配置文件be_custom.conf。该配置文件用于记录您在运行时动态配置并持久化的配置项。BE进程启动后，会先读取...
服务网格工作原理
培训视频 观看以下视频，快速了解服务网格工作原理：MOSN 形态现状 目前 MOSN 属于数据面的产品，以 Sidecar 的模式和应用部署在同一个 Pod 或者在虚拟机中，属于独立进程。MOSN 最早支持基于轻量 SDK+Mesh 的方式接管网格流量。目前主要...
通过SSH隧道方式访问开源组件Web UI
Kafka 9092 Kafka集群节点之间通信的RPC端口。Redis 6379 Redis服务端口。HUE 8888 Hue Web UI的端口。Oozie 11000 Oozie Web UI的端口。Druid 18888 Druid Web UI的端口。18090 Overlord的端口。配置参数为 overlord.runtime 页签下的 ...
基本概念
Consumer 实例 Consumer instance，Consumer 的一个对象实例，不同的 Consumer 实例可以运行在不同进程内或者不同机器上。一个 Consumer 实例内配置线程池消费消息 存储类型 存储类型（Storage Class），Kubernetes 的原生概念，通常由系统...
基本概念
T TaobaoRemoting（TR）TR 框架指基于蚂蚁集团提供的供 RPC 使用的底层通信框架。推送目标 ID 指要推送的目标，可能是 Android 设备的 Ad-token、iOS 设备的 Device Token、用户标识（userId），需要联系上下文的判断是哪种类型。推送证书 ...
SOFARPC 快速入门
TR=TaobaoRemoting 是 RPC 使用的底层通信框架。云端发布时不需要该项配置。运行 Web 子模块中的 SOFABootWebSpringApplication。运行后，框架会自动进行服务的发布。为了避免端口冲突，需要在该类中指定端口。System.setProperty("server....
REST 服务快速入门
TR=TaobaoRemoting 是 RPC 使用的底层通信框架。云端发布时不需要该项配置。运行 Web 子模块中的 SOFABootWebSpringApplication。运行后，框架会自动进行服务的发布。为了避免端口冲突，需要在该类中指定端口。重要 将 myserver-app 发布至...
领域模型概述
此时就需要考虑子模块间的远程通信，典型的通信模式分为以下两种，一种是同步的RPC远程调用；一种是基于中间件代理的异步通信方式。同步RPC调用模型 同步RPC调用模型下，不同系统之间直接进行调用通信，每个请求直接从调用方发送到被调用方...
配置 Bolt 服务
Bolt 服务的名称源自 RPC 使用的底层通信框架 Bolt。相对于传统的 WebService，Bolt 支持更加复杂的对象，序列化后的对象更小，且提供了更为丰富的调用方式（sync、oneway、callback、future 等），支持更广泛的应用场景。在 SOFA 中，Bolt...
连接云电脑常见问题
如果命令输出为空，则说明aspvdagent.exe进程不存在，此时您需要重启云电脑以拉起进程。查看云电脑中是否安装360、天擎等安全卫士，如已安装需要将aspvdagent.exe添加到白名单中。重启云电脑后，重新连接云电脑。怎么升级云电脑镜像？无影...
一键诊断
您可以使用 PAI灵骏智算服务 提供的一键诊断功能，检查灵骏节点的网络和硬件状态，基于多种通信库和通信模型进行网络测试。本文为您介绍灵骏的一键诊断功能。自助诊断 网络诊断 网络诊断功能分为 静态配置类检查 和 动态运行类检查，支持...
无影云桌面客户端无法连接Windows云桌面的排查方法
问题原因 客户端无法连接云桌面，说明云桌面和后端组件无法正常通信，可能原因如下：云桌面的IP地址被修改 云桌面的网卡被禁用 云桌面的路由表损坏 云桌面的80端口被System之外的其他进程占用 解决方案 请参见以下操作排查无法连接无影云...
启动方式与环境变量说明
示例代码如下：#启动单机-8进程训练，使用默认的gloo backend perseusrun-np 8-H localhost:8-python train.py-model resnet50 perseusrun-np 8-python train.py-model resnet50#启动双机-每机器8进程的训练，并使用MPI作为通信backend ...
使用IMB软件和MPI通信库测试集群通信性能
命令示例如下：示例一：测试N个节点间allreduce通信模式效率，每个节点开启2个进程，获取不同消息粒度下的通信时间。opt/intel/impi/2018.3.222/bin64/mpirun-genv I_MPI_DEBUG 5-np*2>-ppn 2-host,.,<nodeN>/opt/intel-mpi-benchmarks/...
查询分析程序日志
跨进程关联：跨进程的请求一般没有明确线索，一般通过RPC中传入的TracerId来进行关联。进程内关联 通过上下文查询查看关联日志。例如通过关键词查询定位到一个异常日志，然后单击 上下文浏览，查看该日志前后N条日志，操作步骤请参见 上...
移动网关简介
移动网关能够：自动生成客户端的 RPC 调用代码，用户不需要关心网络通信、协议以及使用的数据格式。将服务端返回的数据自动反解生成 Objective-C 对象，无需额外编码。提供数据压缩、缓存等增强服务。统一进行异常处理，如弹出对话框、...
服务运维
周边技术风险能力的建设 监控能力 蚂蚁的监控平台为 Service Mesh 提供了基础的监控能力和大盘，以及应用维度的 Sidecar 监控情况，包括：系统监控：CPU MEM LOAD 业务监控：RT RPC 流量 MSG 流量 Error 日志监控 Service Mesh 进程还提供...
- 产品推荐
- 这些文档可能帮助您