监控与报警
网络接收数据量（作业维度）指定作业的网络接收数据量（MB）。网络发送数据量（作业维度）指定作业的网络发送数据量（MB）。GPU算力使用率（作业维度）指定作业的GPU算力使用率。GPU显存使用率（作业维度）指定作业的GPU显存使用率。GPU SM...
使用执行计划分析查询
算子层计划执行树 算子层执行计划由多个算子组成，图中的每个矩形框代表一个算子，数据流向自下而上，扫描数据过程或接收网络数据由最上游的算子（TableScan和RemoteSource）完成，扫描到的数据和接收到的网络数据经过中间算子层层处理后，...
PolarDB-X 2.0迁移至自建Oracle
前提条件 已创建用于接收数据的自建Oracle，且Oracle可用的存储空间需要大于源 PolarDB-X 2.0 已使用的存储空间。自建Oracle中已创建用于接收数据的Schema。说明 创建用户时会自动创建一个对应的Schema。注意事项 说明 在库表结构迁移过程...
PolarDB-X 2.0同步至自建Oracle
前提条件 已创建用于接收数据的自建Oracle，且Oracle可用的存储空间需要大于源 PolarDB-X 2.0 已使用的存储空间。自建Oracle中已创建用于接收数据的Schema。说明 创建用户时会自动创建一个对应的Schema。注意事项 说明 在库表结构同步过程...
PolarDB PostgreSQL版间的迁移
本文介绍如何使用数据传输服务DTS（Data Transmission Service），实现 PolarDB PostgreSQL版 集群间的数据迁移。前提条件 已创建存储空间大于源 PolarDB PostgreSQL版 已占用存储空间的目标 PolarDB PostgreSQL版 集群。创建方法，请参见 ...
RDS MariaDB迁移至RDS PostgreSQL
已在目标RDS PostgreSQL实例中创建用于接收数据的数据库。具体操作，请参见 创建账号和数据库。注意事项 说明 在库表结构迁移过程中，DTS会将源数据库中的外键迁移到目标数据库。在全量迁移和增量迁移过程中，DTS会以Session级别暂时禁用...
Db2 for LUW迁移至云原生数据仓库 AnalyticDB ...
如为增量迁移任务，DTS要求源数据库的数据日志保存24小时以上，如为全量迁移和增量迁移任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量迁移完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
自建Oracle迁移至PolarDB PostgreSQL版
PolarDB PostgreSQL版 集群是具备高性能、海量存储、安全可靠的数据库服务，本文介绍如何使用数据传输服务DTS（Data Transmission Service）将自建Oracle迁移至 PolarDB PostgreSQL版 集群。前提条件 已创建存储空间大于源自建Oracle占用...
PolarDB-X 2.0同步至AnalyticDB PostgreSQL版
数据传输服务DTS（Data Transmission Service）支持将 PolarDB-X 2.0 的数据同步至 云原生数据仓库AnalyticDB PostgreSQL版，帮助您轻松实现数据的流转。通过 AnalyticDB PostgreSQL版 提供的数据在线分析服务和离线数据处理功能，您可以对...
数据重排
使用如下DESC命令，分别查看 bigdata_public_dataset.tpcds_1t.customer 和数据接收表 storage_test1、storage_test2 的表大小，DESC命令详情请参见 DESC TABLE/VIEW。SET odps.namespace.schema=true;desc bigdata_public_dataset.tpcds_1...
流式读写
本文介绍Delta Lake作为数据源和数据接收端如何流式读写数据。Delta Table作为数据源（Source）spark.readStream.format("delta").option("maxFilesPerTrigger",1000).load("/tmp/delta_table")maxFilesPerTrigger 指定了一个批次最多处理...
添加ClickHouse数据源
网络 数据源可选的网络类型。说明 当前仅支持外网访问。域名 连接数据库的地址。重要 该地址是DataV服务器能够通过公网或阿里云部分Region内网访问您数据库的域名或IP地址。端口 数据库设置的端口。用户名 登录数据库的用户名。密码 登录...
审计经典网络数据库实例
如果需要审计经典网络数据库实例，您需要先通过ClassicLink功能实现经典网络的ECS与VPC中的数据库审计系统互通，并在经典网络的ECS上部署Agent程序。前提条件 VPC中启用ClassicLink时，需要满足限定条件，具体请参见ClassicLink概述的 使用...
内置时空数据引擎Ganos
提供拓扑网络路径分析和大规模点云存储与查询支持 Ganos所包含的几何网络数据库引擎支持Node-Edge拓扑网络构建，支持Turn、U-Turn等概念，支持TSP（旅行商问题）、KSP（多条线路最短路径）、TRSP（转向限制的最短路径）等一系列路径规划...
添加ClickHouse数据源
网络 数据源可选的网络类型。域名 连接数据库的地址。重要 该地址是DataV服务器能够通过公网或阿里云部分Region内网访问您数据库的域名或IP地址。端口 数据库设置的端口。用户名 登录数据库的用户名。密码 登录数据库的密码。数据库 单击 ...
阶段一：基础防护建设
例如：《金融数据安全分级指南 JR/T 0197-2020》《网络安全标准实践指南——网络数据分类分级指引》《信息安全技术个人信息安全规范 GB/T 35273—2020》《信息技术大数据数据分类指南 GB/T 38667-2020》《基础电信企业数据分类分级方法 YD/...
Sensors Data（神策）数据源
是 无 sdkDataAddress 数据存放路径，即Sensors Data接收数据的URL地址，该地址的格式为：http://localhost:8106/sa?project=default ，该地址可从 神策分析>基本设置>数据接入>服务端埋点>复制http数据接收地址 来获取。是 无 其他参数...
安装Agent
连通经典网络中的ECS和数据库审计系统VPC的具体操作，请参见 审计经典网络数据库实例。如果您要审计的数据库部署在线下IDC机房中，您需要先打通线下IDC机房和数据库审计系统所在VPC的网络连接。您可以通过阿里云高速通道服务打通线上线下的...
不同库名间的数据同步或迁移
数据传输服务DTS（Data Transmission Service）支持在配置数据同步或迁移任务时对数据（库、表、列）的名称进行映射，以设置任务对象在目标库实例中的名称。您可以通过该功能将数据同步或迁移到目标库中指定的数据库、数据表或字段（列），...
数据库代理主机监控详情
本文介绍数据库代理主机监控的详细信息。查看数据库代理主机监控数据 说明 数据库代理主机监控目前仅针对白名单用户开放，如需开通请咨询技术支持。进入 OceanBase 管理控制台。在左侧导航栏中，单击 实例列表。在实例列表中找到目标实例，...
网络连通与白名单配置
在调用API时，为了防止资源组不能正常访问数据源，您需要在数据源中配置IP白名单，从而确保资源组的网络连通性。本文为您介绍不同资源组类型对应的IP白名单或其获取方式，以及在数据源中配置IP白名单时的注意事项。获取白名单IP地址：公共...
库表列名映射
使用场景 场景 说明 在目标库实例中创建一个新对象并接收任务数据。迁移任务：迁移类型 需勾选 库表结构迁移，且 全量迁移 和 增量迁移 至少选其一。同步任务：同步类型 默认已勾选 增量同步，您还需勾选 库表结构同步，请根据实际情况选择...
Kafka实时ETL同步至Hologres
准备独享数据集成资源组并与数据源网络连通 在进行数据同步前，需要完成您的独享数据集成资源组和数据源的网络连通，详情请参见 配置网络连通。说明 Kafka与Hologres支持的网络类型如下：Kafka:指定VPC网络、公网。Hologres:指定VPC网络、...
实现数据分发
本文以 通用标题 组件请求数据，分发给 数字翻牌器 和 多行文本 组件，完成数据更新为例，介绍如何通过合并请求进行数据分发。效果展示 使用场景 多个组件的数据可以通过API或SQL数据源等一次获取，再进行数据分发，减少数据请求次数。操作...
如何通过合并请求进行数据分发
本文以 通用标题 组件请求数据，分发给 数字翻牌器 和 多行文本 组件，完成数据更新为例，介绍如何通过合并请求进行数据分发。效果展示 使用场景 多个组件的数据可以通过API或SQL数据源等一次获取，再进行数据分发，减少数据请求次数。操作...
管理报警
数据库备份DBS 已接入云监控平台，通过对重要的监控指标设置报警规则，让您及时得知指标数据发生异常，帮您迅速定位处理故障。报警说明 报警配置项 说明 报警触发条件 关闭增量日志备份、开启增量日志备份、增量备份异常、备份网关离线、...
可视分析创作间和传统BI软件差异比较
对比项 可视分析创作间 传统BI软件 数据源 数据连接类型：支持Excel上传，支持数据库连接 数据连接类型：支持Excel上传，支持数据库连接 支持临时业务数据，也支持建模后的数据内容 通常需要前期IT人员完成数据建模 数据采集和准备 零代码...
功能发布记录 2022年之前
您可以购买该功能模块，将数据模型设计管控、引标落标等能力融入DataWorks规范化开发流程，助力您实现数据资产价值化输出，在数据全生命周期上夯实数据基础，为数据价值化提供有力支撑。2021.02.20 全部地域。DATABLAU数据建模计费标准 ...
蓝图编辑器精选案例实战
[{"num":"123","text":"这是多行文本组件","value":"接收数据组件"}]在画布编辑器页面，选择 图层 栏3个组件，并分别右键单击 导出到蓝图编辑器。在蓝图编辑器页面的 导入节点 栏，单击三个组件节点，分别添加到蓝图编辑器画布中，并在画布...
Pod监控
网络数据包 网络数据包 区域显示该应用在指定时间段的Pod的网络数据包情况，包括以下指标：网络发送丢弃的报文数 网络发送的报文数 网络接收丢弃的报文数 网络发送的错误数 网络接收的错误数 可选：在 网络数据包 区域，您可以执行以下操作...
导入概述
为了更好地满足各种不同的业务场景，StarRocks支持多种数据模型，StarRocks中存储的数据需要按照特定的模型进行组织。本文为您介绍数据导入的基本概念、原理、系统配置、不同导入方式的适用场景，以及一些最佳实践案例和常见问题。背景信息...
导入概述
为了更好地满足各种不同的业务场景，StarRocks支持多种数据模型，StarRocks中存储的数据需要按照特定的模型进行组织。本文为您介绍数据导入的基本概念、原理、系统配置、不同导入方式的适用场景，以及一些最佳实践案例和常见问题。背景信息...
容器监控
网络数据包 网络数据包 区域显示该应用在指定时间段的Pod的网络数据包情况，包括以下指标：网络发送丢弃的报文数 网络发送的报文数 网络接收丢弃的报文数 网络发送的错误数 网络接收的错误数 可选：在 网络数据包 区域，您可以执行以下操作...
Impala概述
当某一个Impalad进程由于节点异常、网络异常或软件问题等导致节点不可用时，StateStore确保将状况结果通知其他Impalad进程，当有新的查询请求时，Impalad进程将不会发送查询请求到该不可用的节点。Catalogd 部署在Master节点的master-1-1...
常见问题
本文介绍大数据专家服务常见问题。1.售前咨询渠道 尊敬的“准”大数据专家服务...阿里云其它产品、非阿里云产品、客户软件问题、基础网络问题、云服务器问题均不在此范围内，如果您有其他问题，您可以提交工单，阿里云售后人员会为您服务。
东软案例
东软基于Lindorm打造，面向政企互联网化数字信息系统运维监控场景的新一代IT智能运维系统部署架构如下图所示，其中Lindorm作为核心运维数据存储、检索引擎全量接收来自移动终端、网络嗅探器、业务监控探针、日志采集器等多种数据来源实时...
数据投递
数据传输服务DTS（Data Transmission Service）提供的数据投递功能，用户可以通过SDK将各种类型的数据源投递到DTS，再由DTS同步至目标数据库，从而支持更多类型的数据源。应用场景 数据投递功能适用于以下任一场景：源端为DTS同步方案暂不...
添加堡垒机架构备份网关
数据库备份DBS 支持接入堡垒机网络结构的数据库，当数据库主机处于内网环境且无法直接与外部网络建立连接时，可以通过堡垒机代理访问外部网络。您需要在堡垒机上安装代理网关，并在数据库主机上安装DBS备份网关。本文介绍添加堡垒机架构...
MongoDB 4.2
第三方云数据库迁移至阿里云数据库MongoDB：使用MongoDB工具将MongoDB Atlas数据库迁移至阿里云数据库MongoDB 使用DTS将MongoDB Atlas数据库迁移至阿里云数据库MongoDB 使用DTS将华为云文档数据库迁移至阿里云数据库MongoDB 使用MongoDB...
使用SDK示例代码消费PolarDB-X 1.0订阅数据
SDK客户端每隔一定时间会统计并显示消费数据的信息，包括数据发送和接受时数据总数、数据总量、每秒请求数接收RPS等。表 1.消费数据的统计信息 参数 说明 outCounts SDK客户端所消费的数据总数。outBytes SDK客户端所消费的数据总量，单位...
- 产品推荐
- 这些文档可能帮助您