Napatech案例
业务挑战 随着网络数据流量的爆增以及业务可用性要求的不断提升，Napatech公司的用户可以将数据包采集和分析的能力提升至200G，然而上层软件产生的流量数据包元数据也爆增，给后台数据库（比如开源的HBase/ElasticSearch）的存储和索引能力...
实时监控
时间粒度 单次查询的最大时间跨度 可查询历史数据时间范围 数据延迟 1分钟 1小时 7天 5分钟 5分钟 3天 93天 15分钟 1小时 31天 186天 4小时 资源监控与实时监控的区别 实时监控与资源监控的区别主要体现在时间粒度、数据延迟和支持查询的...
实时性能大盘
数据库自治服务DAS提供了全局的 实时性能大盘，可以查看所有接入实例的实时性能情况。...Network In(KB)每秒流入数据库的网络流量。Network Out(KB)每秒流出数据库的网络流量。Buffer Hit Ratio(%)InnoDB缓存池的命中率。
资源监控
次日凌晨4点 调用相关API接口查询：时间粒度 单次查询的最大时间跨度 可查询历史数据时间范围 数据延迟 5分钟 3天 93天 15分钟 1小时 31天 186天 4小时 1天 366天 366天 次日凌晨4点 资源监控与实时监控的区别 资源监控与实时监控的区别...
功能特性
功能集 功能 功能描述 参考文档 资源计费 读流量 按照实际传输的数据量计费 产品定价 存储容量 按照实际的存储量计费 产品定价 公网流量 使用阿里云公网进行的网络传输数据流量 产品定价 活跃shard租用 Shard租用只统计当前状态为活跃...
查看实例监控信息
网络流量：阿里云提供实例出方向和入方向的网络流量监控数据，单位为kbps。ECS控制台一般提供公网流量监控，云监控控制台可以提供公网和内网流量监控。例如，您的公网出网带宽为1 Mbps，当出网流量达到1024 kbps，表示您的公网带宽已经满...
公网暴露
查看公网暴露数据 公网暴露的统计数据区域，能够快速帮助您了解目前资产入方向正常流量和异常流量数据。根据统计到的异常流量数据，您可以在暴露明细页签有针对性地进行排查，及时保障资产入方向的流量安全。登录 云防火墙控制台。在左侧...
用量查询
注意事项 通过CDN/DCDN控制台（或者OpenAPI）的监控查询、用量查询（实际计费流量）功能查到的加速域名使用的流量数据与通过日志统计的流量数据有差异。通常来说，通过监控查询、用量查询功能查到的加速域名使用的流量数据是通过日志统计的...
实时监控
查询实时请求命中率 查询实时字节命中率 查询实时状态码 注意事项 通过CDN/DCDN控制台（或者OpenAPI）的监控查询、用量查询（实际计费流量）功能查到的加速域名使用的流量数据与通过日志统计的流量数据有差异。通常来说，通过监控查询、...
资源监控
通常来说，通过监控查询、用量查询功能查到的加速域名使用的流量数据是通过日志统计的流量数据的1.1倍，详细请参见 为什么监控查询流量、用量查询流量与日志统计流量有差异。用量查询、资源监控、实时监控在数据统计维度上的区别 用量查询...
管理数据库资产
在审计数据库前，您必须在数据库审计系统中添加要审计的数据库。本文介绍如何在数据库审计系统中管理数据库。背景信息 关于数据库审计支持的数据库类型，请参见 支持的数据库类型。添加数据库 您可以参考以下步骤在数据库审计系统中添加要...
流量分析
查询时间：默认展示过去7天的流量数据，您可以根据需求选择或自定义查询时间，最多支持查询过去30天的数据。数据指标分析展示 说明 各指标旁的百分比代表的是环比变化率，即当前时间段的数据相比上一相同时间段数据的百分比变化。如果上一...
新功能发布记录
管理配额 2017年07月 功能名称 变更类型 功能概述 相关链接 ClassicLink功能 新增 专有网络VPC（Virtual Private Cloud）提供ClassicLink功能，使经典网络的ECS实例可以和专有网络中的云资源通过内网互通。使用ClassicLink 2017年06月 功能...
查看与减少数据备份
备份数据量指当月备份数据的流量，为每次备份持续累计的结果。即使这个备份因为达到备份上限后被删除了，实际数据量也不会下降。如果增量备份数据量为0，可能原因为：从未开启过增量备份。已开启增量备份还未产生新的增量数据且历史增量...
在EMR上使用Sqoop与数据库同步数据时的网络配置
ECS自建数据库 访问VPC网络的自建数据库跟VPC网络的RDS类似，EMR集群需要使用VPC网络，并且数据库ECS实例和EMR集群实例需要在同一个安全组内。云下私有数据库 有两种方式访问云下私有数据库，一种是绑定弹性IP（EIP）访问数据库的公网地址...
ClickHouse整库数据离线同步至Hologres
但您需要确保VPC网络跟数据源所在的VPC网络可连通。安全组：可以选择您名下任意自建安全组，但所选择的安全组需满足以下条件：在 安全组产品控制台 查看安全组，访问规则的入方向允许放行ClickHouse集群HTTP端口（通常为8123）。安全组的...
云数据传输
云数据传输（Cloud Data Transfer，简称CDT）是云上流量统一计费的功能实体。CDT可以对云上互联网公网流量和专线私网流量进行统一汇总并统一计费。解决之前流量的用量数据和费用数据分散在多款云产品，导致用户在购买和运维对账时出现的...
EMR Hive数据整库离线同步至MaxCompute
但您需要确保VPC网络跟数据源所在的VPC网络可连通。安全组：选择EMR集群的安全组，所选择的安全组需满足以下条件：在 安全组产品控制台 查看安全组，访问规则的入方向允许放行EMR集群端口（一般包括10000、9093、8020等端口）。安全组的...
EMR Hive数据整库离线同步至MaxCompute
但您需要确保VPC网络跟数据源所在的VPC网络可连通。安全组：选择EMR集群的安全组，所选择的安全组需满足以下条件：在 安全组产品控制台 查看安全组，访问规则的入方向允许放行EMR集群端口（一般包括10000、9093、8020等端口）。安全组的...
数据迁移、同步和恢复区别
数据迁移、同步和恢复的区别如下：数据迁移和恢复的区别 数据迁移和恢复都可以将数据复制到新实例，但是它们之间还有一定的区别：数据迁移主要用于上云迁移，通过数据传输服务DTS将本地数据库、ECS上的自建数据库或第三方云数据库迁移至...
数据迁移、同步和恢复区别
数据迁移、同步和恢复的区别如下：数据迁移和恢复的区别 数据迁移和恢复都可以将数据复制到新实例，但是它们之间还有一定的区别：数据迁移主要用于上云迁移，通过数据传输服务DTS将本地数据库、ECS上的自建数据库或第三方云数据库迁移至...
数据迁移、同步和恢复区别
数据迁移、同步和恢复的区别如下：数据迁移和恢复的区别 数据迁移和恢复都可以将数据复制到新实例，但是它们之间还有一定的区别：数据迁移主要用于上云迁移，通过数据传输服务DTS将本地数据库、ECS上的自建数据库或第三方云数据库迁移至...
数据迁移、同步和恢复区别
数据迁移、同步和恢复的区别如下：数据迁移和恢复的区别 数据迁移和恢复都可以将数据复制到新实例，但是它们之间还有一定的区别：数据迁移主要用于上云迁移，通过数据传输服务DTS将本地数据库、ECS上的自建数据库或第三方云数据库迁移至...
网络连通解决方案
添加数据源时需要根据数据源所在网络环境，通过对应的网络解决方案，实现Dataphin与数据源的网络连通。本文为您介绍数据源在不同网络环境中与Dataphin的网络连通方案。网络连通方案 根据数据源所在的网络环境，在下图中选择对应的网络连通...
功能概述
目标数据库：源数据库的克隆数据库，和源数据库拥有同样的表结构和数据，将源数据库捕获的流量回放的数据库。功能介绍 传统的压测方案大部分基于现有的压测工具（如sysbench、TPCC等），给定场景，改变数据写入和读取速度，观测压力变化对...
添加RDS for PostgreSQL数据源
本文为您介绍在DataV中添加RDS for PostgreSQL数据源的方法。前提条件 已准备好待添加的RDS for PostgreSQL数据源。通过内网添加数据源操作步骤 登录 DataV控制台。在 工作台 页面，单击 数据准备>数据源，进入 数据源 页面，单击 新建数据...
添加RDS for PostgreSQL数据源
本文为您介绍在DataV中添加RDS for PostgreSQL数据源的方法。前提条件 已准备好待添加的RDS for PostgreSQL数据源。通过内网添加数据源操作步骤 登录 DataV控制台。在 我的数据 页签中选择 数据源管理，单击 添加数据。从 类型 列表中，...
添加RDS for MySQL数据源
本文为您介绍在DataV中添加RDS for MySQL数据源的方法。前提条件 已准备好待添加的RDS for MySQL数据源。通过内网添加数据源操作步骤 登录 DataV控制台。在 工作台 页面，单击 数据准备>数据源，进入 数据源 页面，单击 新建数据源。从 ...
添加RDS for MySQL数据源
本文为您介绍在DataV中添加RDS for MySQL数据源的方法。前提条件 已准备好待添加的RDS for MySQL数据源。通过内网添加数据源操作步骤 登录 DataV控制台。在 我的数据 页签中选择 数据源管理，单击 添加数据。从 类型 列表中，选择 RDS for ...
添加RDS for SQLServer数据源
本文为您介绍在DataV中通过内网和外网添加RDS for SQLServer数据源的方法。前提条件 已准备好待添加的RDS for SQLServer数据源。通过内网添加数据源操作步骤 登录 DataV控制台。在 工作台 页面，单击 数据准备>数据源，进入 数据源 页面，...
添加RDS for SQLServer数据源
本文为您介绍在DataV中通过内网和外网添加RDS for SQLServer数据源的方法。前提条件 已准备好待添加的RDS for SQLServer数据源。通过内网添加数据源操作步骤 登录 DataV控制台。在 我的数据 页签中选择 数据源管理，单击 添加数据。从 类型...
管理数据源
查看数据源 创建数据源后，您可以在数据源列表查看所有已创建数据源的基本信息、详情和网络连接等信息，也可以根据数据源类型进行筛选、根据数据源的创建时间进行排序，以及模糊搜索指定数据源。登录 OceanBase 管理控制台。在左侧导航栏，...
添加实时数仓Hologres数据源
本文档介绍如何在DataV中添加并使用实时数仓Hologres数据源。前提条件 已准备好待添加的实时数仓Hologres数据源。添加实时数仓Hologres数据源操作步骤 登录 DataV控制台。在 工作台 页面，单击 数据准备>数据源，进入 数据源 页面，单击 ...
添加实时数仓Hologres数据源
本文档介绍如何在DataV中添加并使用实时数仓Hologres数据源。前提条件 已准备好待添加的实时数仓Hologres数据源。通过内网添加数据源操作步骤 登录 DataV控制台。在 我的数据 页签中选择 数据源管理，单击 添加数据。从 类型 列表中，选择 ...
配置资源组与网络连通
在数据同步任务配置前，您需要确保用于执行同步任务的独享数据集成资源组与您将要同步的数据来源端与目的端数据库的网络连通性，您可以根据数据库所在网络环境，选择合适的网络解决方案来实现网络连通。本文为您介绍数据库在不同网络环境中...
独享数据集成资源组
数据源处于经典网络中 独享资源组处于阿里云VPC网络，如果数据源处于经典网络环境中，则数据源与独享资源组间网络无法连通，建议您将数据源迁移至VPC网络中。白名单配置 如果数据源设置有白名单限制访问地址时，您需要将独享资源组的访问...
同阿里云主账号访问
在进行数据同步前，您需要确保用于执行同步任务的独享数据集成资源组与您将要同步的数据来源端与目的端数据源的网络连通性。本文为您介绍数据源与DataWorks工作空间同阿里云主账号时如何进行网络连通。背景信息 网络连通方案选择取决于数据...
独享调度资源组
说明 如果独享调度资源组的应用过程中，不涉及与数据源的交互，则不涉及独享调度资源组与数据源间的网络连通问题，独享调度资源组购买后即可直接使用，无需考虑网络的相关影响。独享调度资源组购买后，需绑定一个VPC网络，后续您可以根据...
约束和限制
目录下面采样最新和最老的文件，每个文件读取前1000行 元数据发现SLS数据源发现历史投递数据 如果投递中途修改了分区格式，不会发现修改前的数据 一键建仓/多库合并支持的数据源网络类型 VPC 一键建仓/多库合并支持的数据源 PolarDB MySQL ...
新建 TiDB 数据源
新建数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 TiDB 数据源。前提条件 已获取相关数据库的 IP 地址和端口号。已存在用于数据迁移的数据库用户。建议您为数据迁移项目创建一个专属的数据库用户，该用户...
- 产品推荐
- 这些文档可能帮助您