数据集成：全领域数据汇聚
DataWorks的数据集成功能模块是稳定高效、弹性伸缩的数据同步平台，致力于提供复杂网络环境下、丰富的异构数据源之间高速稳定的数据移动及同步能力。功能概述 DataWorks数据集成支持离线同步、实时同步，以及离线和实时一体化的全增量同步...
产品优势
DataWorks具有强大的基础能力，可以为您大幅...支持复杂网络环境、常见数据源的数据同步上云以及实时、历史数据的批量与增量同步。在数据源性能不受限情况下，让您的同步速度达到万兆。支持单用户千万级别的复杂任务调度，让数据加工更流畅。
性能调优
最终合并完成后的分片数量取决于Tablestore服务的承载压力。通过计算语义实现性能调优 是否使用UPDATE替换INSERT 通过 ots-insert-as-update=true/false 设置是否使用UPDATE替换INSERT，默认值为FALSE。Tablestore SDK中有两个接口可以更新...
不同安全组的经典网络实例内网互通
优势与不足 优势：操作简单，可以迅速建立实例内网互通，可应用于复杂网络架构。不足：实例需要额外绑定多个安全组，安全组规则的阅读性较差。操作步骤 新创建一个经典网络普通安全组，例如：互通安全组，无需给新建的安全组添加任何规则。...
产品优势
需要购买服务器搭建负载均衡分布式架构，需要花费大量人力物力开发“接入+计算+存储”，自建复杂网络管理系统。D2D通信技术 D2D通信技术是Link WAN提供的通信模式，通过实现长前导码唤醒和本地数据控制功能，可很好满足功耗低、响应时间快...
数据集成概述
数据集成是稳定高效、弹性伸缩的数据同步平台，致力于提供复杂网络环境下、丰富的异构数据源之间高速稳定的数据移动及同步能力。使用限制 数据同步：支持且仅支持结构化（例如RDS、DRDS等）、半结构化、无结构化（OSS、TXT等，要求具体同步...
受众与核心能力
从事销售运营、商业智能分析等岗位的业务人员 从事数据安全与合规工作的管理人员 从事数据应用开发的开发人员 把控公司核心数据资产的管理人员 核心能力 基于DataWorks，您可以获得如下能力：数据集成：复杂网络环境、丰富数据源之间的数据...
Tair客户端重连指南
复杂的网络环境 由于客户端与 Tair 服务器之间复杂网络环境引起，可能出现偶发的网络抖动、数据重传等问题，此时，客户端发起的请求可能会出现暂时性失败。推荐的重试准则 重试准则 说明 仅重试幂等的操作 由于超时可能发生在下述任一阶段...
Redis客户端重连指南
复杂的网络环境 由于客户端与Redis服务器之间复杂网络环境引起，可能出现偶发的网络抖动、数据重传等问题，此时，客户端发起的请求可能会出现暂时性失败。推荐的重试准则 重试准则 说明 仅重试幂等的操作 由于超时可能发生在下述任一阶段：...
DataWorks节点合集
类型 描述 数据集成同步类节点 DataWorks数据集成支持复杂网络环境下的数据同步，并提供用于离线（批量）数据周期性同步的离线同步节点，与用于单表或整库增量数据实时同步的实时同步节点。该节点可在数据开发（DataStudio）界面直接创建。...
使用场景
互动直播 为保障高清流畅的直播观看体验，直播就近推流转码技术能够提升链路网络质量，降低核心网络压力。边缘节点服务ENS提供CDN边缘节点的计算能力，助力转码业务稳定运行。流量本地化 流量本地化场景包括但不限于以下：视频监控 视频...
Landing Zone搭建概述
一方面云企业网可以简化复杂网络配置，同时具备良好的可拓展性，另外一方面网络隔离区可以帮助企业统一管控流量出入口的设置，提升安全性，节省整体成本。云原生蓝图 适用于使用了云原生技术架构的企业。在标准模板基础上，可以在指定账号...
独享数据集成资源组
功能介绍 独享数据集成资源组的功能亮点如下：支持复杂网络环境下的数据同步。例如，跨云环境（金融云、政务云等）、跨阿里云账号、本地IDC数据同步。具有丰富的产品能力：支持离线数据同步。例如，增量与全量数据同步，单表及分库分表数据...
配置资源组与网络连通
背景信息 复杂网络环境下的数据源进行异构数据源间的数据同步，可选择使用 独享数据集成资源组，需要先进行网络打通。如上图所示，进行数据同步前，需通过合适的网络连通方案将数据库和资源组间的网络打通。本文重点关注通过独享数据集成...
新增和使用独享数据集成资源组
注意事项 独享数据集成资源组支持复杂网络环境下的数据同步。例如，跨云环境（金融云、政务云等）、跨阿里云账号、本地IDC数据同步。由于执行数据同步任务流程的要求，需要保证资源组可以访问数据源（来源数据源和目标数据源）所在的网络，...
使用资源目录和共享VPC实现多账号网络互通
但随着业务复杂度的增加，会面临如下的新问题：分散配置导致无法进行网络集中运维 企业网络架构是一张经过规划的大网，当网络设施分散在每个业务账号之下时，企业网络运维人员很难做到网络的集中控制。重复网络资源配置导致成本增加 在每个...
方案概述
但随着业务复杂度的增加，会面临如下的新问题：分散配置导致无法进行网络集中运维 企业网络架构是一张经过规划的大网，当网络设施分散在每个业务账号之下时，企业网络运维人员很难做到网络的集中控制。重复网络资源配置导致成本增加 在每个...
错误码
移动网络复杂，超时时间设置过短时，容易发生超时错误。建议超时时间设 置3秒以上。410001 获取token失败。请先调用预取号接口。410002 服务响应解析异常。取号服务端返回的数据无法正常解析。410003 无法切换至数据网络。WIFI和蜂窝数据...
错误码
移动网络复杂，超时时间设置过短时，容易发生超时错误。建议超时时间设 置3秒以上。410001 获取token失败。请先调用预取号接口。410002 服务响应解析异常。取号服务端返回的数据无法正常解析。410003 无法切换至数据网络。WIFI和蜂窝数据...
版本及存储引擎
Refinable Shard Keys 增加一个或多个Suffix Field来改善现有的文档在Chunk上的分布问题，避免所有访问集中在某个单一分片上，分散服务器的压力。Compound Hashed Shard Keys 支持在复合索引中指定单个哈希字段，在极大程度上简化业务逻辑...
大规模ACK Pro集群使用建议
不同变量组合下，API Server承载的压力和性能差异不同。在大规模的 ACK集群Pro版 中（通常为超过500个节点或者10,000个Pod的集群）中，集群管理者需要根据业务实际状况合理规划和使用规模化集群，密切关注监控指标，确保集群的稳定性和可用...
什么是阿里云CDN
阿里云内容分发网络CDN（Content Delivery Network）是建立并覆盖在承载网之上，由遍布全球的边缘节点服务器群组成的分布式网络。阿里云CDN能分担源站压力，避免网络拥塞，确保在不同区域、不同场景下加速网站内容的分发，提高资源访问速度...
通过MySQL分析实例同步至数仓版
只读实例只能分担读压力，无法从根本上解决复杂分析慢的问题。构建实时数仓成本太高，公司留给数据分析预算有限，只能默默忍受越来越长的卡顿时间，殊不知在无限的忍受中公司错过了很多机会。此时，您可以在RDS MySQL控制台上创建一个MySQL...
附录：SOFAStack 产品目录
分布式链路跟踪 分布式链路跟踪（Distributed System Tracing，简称 DST）是一款面向分布式架构、微服务架构和云原生架构的应用可观察性的金融级解决方案，帮助用户厘清应用间复杂的调用关系，迅速定位故障或者缓慢节点。产品架构 产品优势...
离线同步任务调优
文档概述 同步速度受同步任务本身配置、数据库、网络等多方面影响，详情请参见：数据同步速度的影响因素。同步任务整体速度慢可能出现在同步过程的各个阶段，本文以现象入手，为您提供各个阶段运行慢的解决方案，详情请参见：数据同步慢的...
监控分析平台对比
背景信息 运维和SRE团队承载着重要的职责，其工作内容复杂而广泛，从应用部署、性能和可用性监控、告警、值班，到容量规划、业务支撑等都有涉及。随着云原生、容器化和微服务的快速发展，迭代节奏愈发加快，运维和SRE团队面临更多挑战，运...
聚水潭：云原生数据仓库助力企业实现商业洞察
业务挑战 峰值压力过大 由于平台上商家的典型电商属性，在618、双11等大促活动期间，会出现业务的峰值，系统承载的订单量大幅度上升。因此在大促前希望能快速弹性升级实例规格，提供更高的负载能力。数据分析需求高 聚水潭ERP要求系统不仅...
助力企业灰度上云产品实践
背景信息 内容分发网络CDN可以保护源站IP、降低源站流量风险、提升终端用户体验，同时可以将源站的应用功能卸载到边缘，进一步释放边缘算力满足业务需求。在CDN的基础上，DCDN面向动态元素，通过智能路由、协议优化、压缩传输等手段，将...
金融大数据
复杂关系网络引擎分析引擎，基于OLP（Object－Link－Property）模型构造知识图谱，并与时空维度数据相结合，通过即问快速搜索、可视化关系网络分析和时空关系分析，帮助快速定位欺诈团伙、关键路径和核心骨干等风险要素。架构优势：多源...
互动直播简介
GRTN网络 阿里云全球实时通信网络，承载了阿里云的直播、点播、WebRTC、信令等传输。普通麦下观众 麦下用户，和麦上用户享有相同的延时，需要加入房间组件。CDN直播观众 用户的音视频流通过旁路转推至阿里云直播，观众通过rts/flv/rtmp/hls...
网络架构介绍
网络架构介绍 组件 说明 管理网络 专属VMware环境的管理网段，包含ESXi管理、vMotion、vSAN等子网在内的Underlay网段。该管理网络是从专属VMware环境网段切分出来的子网。具体详细情况可以参见 同账号创建实例。管理虚拟机 VMware服务管理...
常见网络问题
背景信息 在非阿里云VPC的各类线下环境中安装备份客户端时，可能遇到各种未知且复杂的网络环境。例如防火墙会阻拦域名或端口的连接导致备份失败，防火墙会限制网络传输速度导致部分请求超时，网络行为检测工具会检测并修改一些HTTP请求内容...
什么是云防火墙
互联网边界防火墙支持一键开启防护，无需复杂的网络接入配置和镜像文件安装，使用集群化部署方式，支持性能平滑扩展。NAT边界防火墙 VPC内资源（例如ECS、ECI等）通过NAT网关直接访问互联网时，可能存在未经授权的访问、数据泄露、恶意流量...
NSX计算网关防火墙配置
默认情况下，计算网关防火墙会阻止进出CGW T1下的业务网络所有流量，根据业务需求添加计算网关防火墙规则允许流量进出。规则说明 计算网关防火墙规则针对不同的网络流量有三种操作，分别如下：允许：允许匹配的流量。丢弃：静默丢弃匹配的...
什么是网络智能服务
网络智能服务 NIS（Network Intelligence Service）是一个对网络进行健康分析、性能监控、诊断修复、流量分析和测量仿真的云服务，通过集成机器学习、知识图谱等AIOps方法减少网络使用复杂性，提供自助运维能力，方便网络架构师和运维...
如何进行海外直播？
而网络情况复杂多变，为了适应多种环境下都能正常观看，下行播放支持多种码率，根据观众的网络情况，选择合适的码率进行观看。开启后在播放时自动选择最高清晰度，检测用户网络情况不佳时切换到更低码率进行观看。超低延时直播 RTS 超低...
售前常见问题
相比于自建防火墙，阿里云云防火墙有以下优势：托管服务：自建防火墙设备授权根据VPC数量增加，通过路由方式进行配置和设备同步，增加更多网络侧故障点的同时，带来了更复杂的安全控制与管理开销。云防火墙由阿里云托管提供，无需部署任何...
共享内存通信（SMC）使用说明
Alibaba Cloud Linux 3提供的共享内存通信SMC（Shared Memory Communication）是一种兼容socket层、使用共享内存技术实现的高性能内核网络协议栈。根据共享内存技术的不同，SMC又可以细分为基于Internal Shared Memory（ISM）技术的SMC ...
共享内存通信（SMC）使用说明
Alibaba Cloud Linux 3提供的共享内存通信SMC（Shared Memory Communication）是一种兼容socket层、使用共享内存技术实现的高性能内核网络协议栈。根据共享内存技术的不同，SMC又可以细分为基于Internal Shared Memory（ISM）技术的SMC ...
查询监控图和SQL列表介绍
Stage的个数多少，在一定程度上能体现一条查询语句的复杂度，Stage个数越多，AnalyticDB MySQL版 在执行过程中需进行的网络交互就越多，对系统整体的压力也越大。如果某些查询的Stage个数较多，需要进行相应的调优。关于Stage的概念，请...
- 产品推荐
- 这些文档可能帮助您