监控与报警
网络接收数据量（作业维度）指定作业的网络接收数据量（MB）。网络发送数据量（作业维度）指定作业的网络发送数据量（MB）。GPU算力使用率（作业维度）指定作业的GPU算力使用率。GPU显存使用率（作业维度）指定作业的GPU显存使用率。GPU SM...
使用执行计划分析查询
算子层计划执行树 算子层执行计划由多个算子组成，图中的每个矩形框代表一个算子，数据流向自下而上，扫描数据过程或接收网络数据由最上游的算子（TableScan和RemoteSource）完成，扫描到的数据和接收到的网络数据经过中间算子层层处理后，...
PolarDB PostgreSQL版间的迁移
已在目标 PolarDB PostgreSQL版 集群中创建用于接收数据的数据库。创建方式，请参见 数据库管理。注意事项 说明 在库表结构迁移过程中，DTS会将源数据库中的外键迁移到目标数据库。在全量迁移和增量迁移过程中，DTS会以Session级别暂时禁用...
PolarDB-X 2.0迁移至自建Oracle
前提条件 已创建用于接收数据的自建Oracle，且Oracle可用的存储空间需要大于源 PolarDB-X 2.0 已使用的存储空间。自建Oracle中已创建用于接收数据的Schema。说明 创建用户时会自动创建一个对应的Schema。注意事项 说明 在库表结构迁移过程...
PolarDB-X 2.0同步至自建Oracle
前提条件 已创建用于接收数据的自建Oracle，且Oracle可用的存储空间需要大于源 PolarDB-X 2.0 已使用的存储空间。自建Oracle中已创建用于接收数据的Schema。说明 创建用户时会自动创建一个对应的Schema。注意事项 说明 在库表结构同步过程...
RDS MariaDB迁移至RDS PostgreSQL
已在目标RDS PostgreSQL实例中创建用于接收数据的数据库。具体操作，请参见 创建账号和数据库。注意事项 说明 在库表结构迁移过程中，DTS会将源数据库中的外键迁移到目标数据库。在全量迁移和增量迁移过程中，DTS会以Session级别暂时禁用...
PolarDB-X 2.0同步至AnalyticDB PostgreSQL版
数据传输服务DTS（Data Transmission Service）支持将 PolarDB-X 2.0 的数据同步至 云原生数据仓库AnalyticDB PostgreSQL版，帮助您轻松实现数据的流转。通过 AnalyticDB PostgreSQL版 提供的数据在线分析服务和离线数据处理功能，您可以对...
Db2 for LUW迁移至云原生数据仓库 AnalyticDB ...
目标 云原生数据仓库AnalyticDB PostgreSQL版 实例已创建用于接收数据的数据库。创建方法，请参见 导入数据。如需执行增量迁移，您需要开启 Db2 for LUW 数据库的归档日志。更多信息，请参见 主日志归档方法 和 辅助日志归档方法。重要 ...
自建Oracle迁移至PolarDB PostgreSQL版
已在 PolarDB PostgreSQL版 集群中创建用于接收数据的数据库。创建方法，请参见 数据库管理。自建Oracle数据库已开启ARCHIVELOG（归档模式），设置合理的归档日志保持周期且归档日志能够被访问，详情请参见 ARCHIVELOG。自建Oracle数据库已...
常见问题
支持的数据库部署位置（接入方式）阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...
数据库代理主机监控详情
本文介绍数据库代理主机监控的详细信息。查看数据库代理主机监控数据 说明 数据库代理主机监控目前仅针对白名单用户开放，如需开通...每秒接收数据量 net_recv 每秒接收数据量，单位：MB。每秒发送数据量 net_send 每秒发送数据量，单位：MB。
添加ClickHouse数据源
网络 数据源可选的网络类型。说明 当前仅支持外网访问。域名 连接数据库的地址。重要 该地址是DataV服务器能够通过公网或阿里云部分Region内网访问您数据库的域名或IP地址。端口 数据库设置的端口。用户名 登录数据库的用户名。密码 登录...
Napatech案例
业务挑战 随着网络数据流量的爆增以及业务可用性要求的不断提升，Napatech公司的用户可以将数据包采集和分析的能力提升至200G，然而上层软件产生的流量数据包元数据也爆增，给后台数据库（比如开源的HBase/ElasticSearch）的存储和索引能力...
内置时空数据引擎Ganos
提供拓扑网络路径分析和大规模点云存储与查询支持 Ganos所包含的几何网络数据库引擎支持Node-Edge拓扑网络构建，支持Turn、U-Turn等概念，支持TSP（旅行商问题）、KSP（多条线路最短路径）、TRSP（转向限制的最短路径）等一系列路径规划...
如何通过合并请求进行数据分发
[{"num":"123","text":"这是多行文本组件","value":"接收数据组件"}]选中所有组件，右键单击 导出到蓝图编辑器。添加 序列执行节点，连接组件。配置序列执行节点的处理方法。取文本数据 return[{value:data[0].text}];取翻牌器数据 return...
实现数据分发
[{"num":"123","text":"这是多行文本组件","value":"接收数据组件"}]切换到蓝图编辑器。添加所有图层节点到蓝图主画布中。单击 逻辑节点，添加1个序列执行节点到蓝图主画布中，新增一个事件接口并重命名。连接组件。配置序列执行节点的处理...
审计经典网络数据库实例
如果需要审计经典网络数据库实例，您需要先通过ClassicLink功能实现经典网络的ECS与VPC中的数据库审计系统互通，并在经典网络的ECS上部署Agent程序。前提条件 VPC中启用ClassicLink时，需要满足限定条件，具体请参见ClassicLink概述的 使用...
添加ClickHouse数据源
网络 数据源可选的网络类型。域名 连接数据库的地址。重要 该地址是DataV服务器能够通过公网或阿里云部分Region内网访问您数据库的域名或IP地址。端口 数据库设置的端口。用户名 登录数据库的用户名。密码 登录数据库的密码。数据库 单击 ...
管理报警
数据库备份DBS 已接入云监控平台，通过对重要的监控指标设置报警规则，让您及时得知指标数据发生异常，帮您迅速定位处理故障。报警说明 报警配置项 说明 报警触发条件 关闭增量日志备份、开启增量日志备份、增量备份异常、备份网关离线、...
阶段一：基础防护建设
例如：《金融数据安全分级指南 JR/T 0197-2020》《网络安全标准实践指南——网络数据分类分级指引》《信息安全技术个人信息安全规范 GB/T 35273—2020》《信息技术大数据数据分类指南 GB/T 38667-2020》《基础电信企业数据分类分级方法 YD/...
安装Agent
连通经典网络中的ECS和数据库审计系统VPC的具体操作，请参见 审计经典网络数据库实例。如果您要审计的数据库部署在线下IDC机房中，您需要先打通线下IDC机房和数据库审计系统所在VPC的网络连接。您可以通过阿里云高速通道服务打通线上线下的...
流式读写
本文介绍Delta Lake作为数据源和数据接收端如何流式读写数据。Delta Table作为数据源（Source）spark.readStream.format("delta").option("maxFilesPerTrigger",1000).load("/tmp/delta_table")maxFilesPerTrigger 指定了一个批次最多处理...
Sensors Data（神策）数据源
是 无 sdkDataAddress 数据存放路径，即Sensors Data接收数据的URL地址，该地址的格式为：http://localhost:8106/sa?project=default ，该地址可从 神策分析>基本设置>数据接入>服务端埋点>复制http数据接收地址 来获取。是 无 其他参数...
蓝图编辑器精选案例实战
[{"num":"123","text":"这是多行文本组件","value":"接收数据组件"}]在画布编辑器页面，选择 图层 栏3个组件，并分别右键单击 导出到蓝图编辑器。在蓝图编辑器页面的 导入节点 栏，单击三个组件节点，分别添加到蓝图编辑器画布中，并在画布...
数据重排
使用如下DESC命令，分别查看 bigdata_public_dataset.tpcds_1t.customer 和数据接收表 storage_test1、storage_test2 的表大小，DESC命令详情请参见 DESC TABLE/VIEW。SET odps.namespace.schema=true;desc bigdata_public_dataset.tpcds_1...
导入概述
为了更好地满足各种不同的业务场景，StarRocks支持多种数据模型，StarRocks中存储的数据需要按照特定的模型进行组织。本文为您介绍数据导入的基本概念、原理、系统配置、不同导入方式的适用场景，以及一些最佳实践案例和常见问题。背景信息...
导入概述
为了更好地满足各种不同的业务场景，StarRocks支持多种数据模型，StarRocks中存储的数据需要按照特定的模型进行组织。本文为您介绍数据导入的基本概念、原理、系统配置、不同导入方式的适用场景，以及一些最佳实践案例和常见问题。背景信息...
Kafka实时ETL同步至Hologres
准备独享数据集成资源组并与数据源网络连通 在进行数据同步前，需要完成您的独享数据集成资源组和数据源的网络连通，详情请参见 配置网络连通。说明 Kafka与Hologres支持的网络类型如下：Kafka:指定VPC网络、公网。Hologres:指定VPC网络、...
Pod监控
网络数据包 网络数据包 区域显示该应用在指定时间段的Pod的网络数据包情况，包括以下指标：网络发送丢弃的报文数 网络发送的报文数 网络接收丢弃的报文数 网络发送的错误数 网络接收的错误数 可选：在 网络数据包 区域，您可以执行以下操作...
容器监控
网络数据包 网络数据包 区域显示该应用在指定时间段的Pod的网络数据包情况，包括以下指标：网络发送丢弃的报文数 网络发送的报文数 网络接收丢弃的报文数 网络发送的错误数 网络接收的错误数 可选：在 网络数据包 区域，您可以执行以下操作...
云网络互访性能观测
探测集群会在网络上定时发送和接收性能探测数据包并将汇总统计后的数据发送并呈现在性能观测页面。由于探测集群内的测试机与租户完全独立，因此不会影响或消耗您的任何资源。性能观测数据与您在阿里云上实际部署的资源情况无关。云网络互访...
同步 OceanBase 数据库的数据至 RocketMQ
如果数据同步项目运行报错（通常由于网络不通或进程启动过慢导致），您可以在数据同步项目的列表或详情页面，单击 恢复。相关文档 新建 OceanBase 数据源 新建 RocketMQ 数据源 批量操作数据同步项目 查看数据同步项目的详情
同步 OceanBase 数据库 MySQL 租户的数据至 Analytic...
注意事项 当 OceanBase 数据库 V4.x 进行增量同步时，如果生成列没有标记 STORED 属性，则同步目标端时该列将同步为 NULL 值，导致下游接收该列数据时不符合预期。节点之间的时钟不同步，或者电脑终端和服务器之间的时钟不同步，均可能导致...
同步 OceanBase 数据库的数据至 Kafka
如果数据同步项目运行报错（通常由于网络不通或进程启动过慢导致），您可以在数据同步项目的列表或详情页面，单击 恢复。相关文档 新建 OceanBase 数据源 新建 Kafka 数据源 批量操作数据同步项目 查看数据同步项目的详情
文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
教程概述
物联网平台接收到数据后通过规则引擎转发至DataHub。在DataHub中通过DataConnector将数据同步到RDS MySQL数据库中。使用DataV将RDS MySQL中的数据展示在大屏上。说明 物联网平台转发至DataHub，是因为DataHub可以将数据同步至MaxCompute，...
不同库名间的数据同步或迁移
数据传输服务DTS（Data Transmission Service）支持在配置数据同步或迁移任务时对数据（库、表、列）的名称进行映射，以设置任务对象在目标库实例中的名称。您可以通过该功能将数据同步或迁移到目标库中指定的数据库、数据表或字段（列），...
测试数据通信
本文介绍如何测试DTU代替设备上报数据到物联网平台和接收物联网平台下发的数据。测试上报数据 打开串口调试工具。...接收到的数据中，55为数据头，数据值为64（即十进制的100）。云端和设备端均能接收到正确数据，说明配置成功。
区块概述
区块接口节点说明 区块定义内部和外部的数据传输，依靠蓝图编辑器中的 数据接口 节点、事件接口 节点和 动作接口 节点进行配置，不同接口的区别如下：数据接口：用于接收外部数据源传入区块的数据，再通过蓝图编辑器分发数据给内部的组件。...
区块概述
区块接口节点说明 区块定义内部和外部的数据传输，依靠蓝图编辑器中的 数据接口 节点、事件接口 节点和 动作接口 节点进行配置，不同接口的区别如下：数据接口：用于接收外部数据源传入区块的数据，再通过蓝图编辑器分发数据给内部的组件。...
- 产品推荐
- 这些文档可能帮助您