监控与报警
InboundRatelimitDropBandwidth userId、instanceId、regionNo Value 入方向限速丢包速率 当前接入点入方向限速丢包时，被丢弃的数据包速率。单位：pps。InboundRatelimitDropSpeed userId、instanceId、regionNo Value 出方向带宽 当前接...
常见问题
迁移与同步 为什么OSS外表导入ORC、PARQUET等格式的数据，出现内存报错或OOM挂掉？如何处理导入数据报错：too many parts？为什么DataX导入速度慢？为什么Hive导入后其数据行数跟ClickHouse对不上？为什么Kafka导入后其数据行数跟...
SQL结果集导出
该实例下的数据库包含您待导出的数据。录入实例的具体操作，请参见 云数据库录入、他云/自建数据库录入。注意事项 SQL结果集导出功能在免费导出数据的行数、单次导出表容量等方面受限于管控模式。更多信息，请参见 各管控模式支持的功能。...
终端节点监控项
bit/s 平均值 VpcEndpointInPps 终端节点流入数据包速率 从VPC网络访问终端节点的数据包速率。packet/s 平均值 VpcEndpointOutPps 终端节点流出数据包速率 从终端节点访问VPC网络的数据包速率。packet/s 平均值 VpcEndpointInDropBps 终端...
终端节点服务监控项
bit/s 平均值 VpcEndpointServiceInPps 终端节点服务流入数据包速率 从VPC网络访问终端节点服务的数据包速率。packet/s 平均值 VpcEndpointServiceOutPps 终端节点服务流出数据包速率 从终端节点服务访问VPC网络的数据包速率。packet/s ...
监控IPsec连接
IPsec连接监控指标 IPSec连接流入包速率：表示监控IPsec连接接收到的数据包的速率。IPSec连接流出包速率：表示监控IPsec连接发出的数据包的速率。IPSec连接流入带宽：表示监控IPsec连接接收到的流量速率。IPSec连接流出带宽：表示监控IPsec...
监控VPN网关实例
监控项 说明 VPN网关入方向数据包速率 VPN网关实例接收数据包的速率。单位：packet/s。VPN网关出方向数据包速率 VPN网关实例发出数据包的速率。单位：packet/s。VPN网关入方向流量速率 VPN网关实例接收流量的速率。单位：bps。VPN网关出...
新建注册上挂指标
您可以将物理表中的指标字段上挂至汇总逻辑表进行数据分析。...参数 描述 数据类型 选择上挂指标的数据类型。度量单位 选择上挂指标的度量单位。业务负责人 选择上挂指标的业务负责人。描述 填写对上挂指标的简单描述。配置完成后单击 确定。
新建注册上挂指标
您可以将物理表中的指标字段上挂至汇总逻辑表进行数据分析。...参数 描述 数据类型 选择上挂指标的数据类型。度量单位 选择上挂指标的度量单位。业务负责人 选择上挂指标的业务负责人。描述 填写对上挂指标的简单描述。配置完成后单击 确定。
监控转发路由器实例
流入包速率 转发路由器实例从网络实例连接接收的数据包速率。单位：pps。流出包速率 转发路由器实例向网络实例连接发送的数据包速率。单位：pps。流入流量字节数 转发路由器实例从网络实例连接接收的流量字节数。单位：Byte。流出流量字节...
如何处理Tair集群数据倾斜
下图介绍两个典型的数据倾斜场景，如下图所示，虽然Key均匀地分布在集群中，每个数据分片节点2个Key，但仍产生了数据倾斜：Replica 1 节点中 key1 的QPS明显高于其他Key，属于典型的 数据访问倾斜，会导致该Key所在的数据分片节点CPU使用率...
如何处理Redis集群数据倾斜
下图介绍两个典型的数据倾斜场景，如下图所示，虽然Key均匀地分布在集群中，每个数据分片节点2个Key，但仍产生了数据倾斜：Replica 1 节点中 key1 的QPS明显高于其他Key，属于典型的 数据访问倾斜，会导致该Key所在的数据分片节点CPU使用率...
监控与报警
入方向限速丢包速率 EIP实例入方向因带宽限速，被丢弃的数据包速率。单位：pps。出方向限速丢包速率 EIP实例出方向因带宽限速，被丢弃的数据包速率。单位：pps。网络流入带宽利用率 外部访问EIP实例所消耗的带宽占该EIP实例总带宽的百分比...
查看云企业网资源监控信息
流入包速率 转发路由器实例从网络实例连接接收的数据包速率。单位：pps。流出包速率 转发路由器实例向网络实例连接发送的数据包速率。单位：pps。流入流量字节数 转发路由器实例从网络实例连接接收的流量字节数。单位：Byte。流出流量字节...
监控与报警
云监控（CloudMonitor）可以...出限速丢包速率 共享带宽 实例出方向限速丢包时，被丢弃的数据包速率。单位：pps。入限速丢包速率 共享带宽 实例入方向限速丢包时，被丢弃的数据包速率。单位：pps。相关文档 附录1 云产品监控指标 创建报警规则
敏感数据溯源
背景信息 通过DataWorks的 数据保护伞 的 数据脱敏管理，开启目标 数据识别规则 的 数据水印 功能后，则在DataWorks中，对命中该规则的数据所执行的所有操作（例如查询、下载等）均会自动生成水印信息。水印信息用于记录用户的访问行为，...
SAG App流量监控
管理员可以在智能接入网关SAG（Smart Access Gateway）管理控制台查看智能接入网关App实例的...SAG实例的应用加速带宽包限速丢弃丢包数 指智能接入网关App实例关联的客户端加速访问应用时，因应用加速带宽限速丢弃的数据包速率。单位：pps。
集群任务限流
Read 阶段 Reader 读取一批数据，读取数据接口返回数据列表和后续是否有新的数据标志。Reader 根据 limiter 的限流速率向 Processor 推送数据。Process 阶段 Processor 接收到数据后，通过多线程的方式对这批数据进行处理。处理后通过队列...
表删除，更新和合并
更新表格 可以更新与Delta表中谓词匹配的数据。例如，要修复eventType中的拼写错误，可以运行以下命令：SQL%sql UPDATE events SET eventType='click' WHERE eventType='clck' UPDATE delta.`/data/events/` SET eventType='click' WHERE ...
数据倾斜诊断
您也可以添加过滤条件，查看指定Schema或指定表的数据倾斜情况，查询语句如下：查看指定Schema下所有表的数据倾斜情况：SELECT*FROM adbpg_toolkit.diag_skew_tables WHERE schema_name='名称>';查看指定表的数据倾斜情况：SELECT*FROM ...
加速服务
通过使用加速服务，您可以在调用API时提高数据查询的速率和性能。本文为您介绍两种加速方案的使用方法。背景信息 DataWorks数据服务的加速方案有两种：加速服务 和 MCQA，您可以 点击这里 加入DataWorks用户钉群进行咨询。两种方案的对比...
导入数据
原因类别 根据实际情况选择数据导入的原因。业务背景 详细填写本次操作的业务背景，减少沟通成本。执行方式 根据需求，选择工单执行方式：审批通过后，提交者执行。审批通过后，自动执行。最后一个审批人执行。文件编码 选择数据库的文件...
普通数据变更
数据管理DMS的普通数据变更功能支持INSERT、UPDATE、DELETE、TRUNCATE、CREATE TABLE等SQL语句，可以对数据库中的数据进行变更操作，用于数据初始化、历史数据清理、问题修复、功能测试等场景。本文介绍在DMS中进行普通数据变更的方法。...
迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
本文为您介绍如何使用数据传输迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
技术原理
全量迁移 系统选择当前时间之前的一个时间点，将这个时间点之前的数据进行全量的数据复制迁移。增量数据同步 完成全量迁移后，基于全量迁移开始之前时间点的增量变更日志进行增量同步，最终原分库和目标分库数据实时同步。数据校验 增量...
授权和回收数据板块权限
授权原因 填写授予数据板块权限的原因。单击 确定，完成数据板块权限的授权。回收数据板块权限 按照下图操作指引，进入 数据板块回收 对话框。在 数据板块回收 对话框，配置参数。参数 描述 回收用户 选择需要回收数据板块权限的用户。逻辑...
授权和回收数据板块权限
授权原因 填写授予数据板块权限的原因。单击 确定，完成数据板块权限的授权。回收数据板块权限 按照下图操作指引，进入 数据板块回收 对话框。在 数据板块回收 对话框，配置参数。参数 描述 回收用户 选择需要回收数据板块权限的用户。逻辑...
使用DTS进行数据迁移是否会覆盖掉已存在数据
概述 本文介绍使用DTS进行数据迁移是否会覆盖掉已存在数据。详细信息 如果配置迁移任务时，只迁移几个表，那么预检查...因此在目标库有数据的情况下，DTS不支持进行数据迁移，所以DTS数据迁移不会覆盖掉已存在的数据。适用于 数据传输服务 DTS
PolarDB MySQL版迁移至MaxCompute
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将 PolarDB MySQL版 集群的数据迁移至MaxCompute。前提条件 已开通MaxCompute并创建MaxCompute项目。更多信息，请参见 开通MaxCompute和DataWorks 和 创建MaxCompute项目。...
离线同步任务调优
} } throttle 包括 true 和 false：当 throttle 设置为 true 时，表示限速，您必须设置 mbps 具体的数据值。如果没有设置 mbps，程序运行将会出错或者速率异常。当 throttle 设置为 false 时，表示不限速，则 mbps 的配置无意义。流量度量...
常见问题
因为含增量任务的同步实例暂停期间，仅目标端的数据写入暂停，源端增量变化的数据依然会进行采集。为什么数据同步的价格要高于数据迁移的价格？因为数据同步具有更多的高级特性，例如支持在线调整同步对象、支持配置MySQL数据库之间的双向...
发起升级批次任务
按照以上变化趋势类推，后续依次以每分钟800、1600、3200、6400的速率推送升级消息，直到总推送设备数达到8,000后，根据 增量因子 提升速率，此时推送速率为12,800，大于 最大推送速率 值10,000，因此不会以每分钟12,800的速率，而是以每...
开发前准备：绑定数据源或集群
若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发（DataStudio）模块。绑定后，才可读取数据源或集群中的数据，并进行相关开发操作。前提条件 您需根据后续要开发和调度...
授权与回收数据源权限
③ 列表区 为您展示授权的数据源账号、权限类型、有效期至、权限来源信息，同时，您可以在 操作 列下对数据源进行 回收 操作。回收：回收单个账号的整体数据源权限。在 数据源回收 对话框，填写 回收原因。单击 确定。④ 批量操作区 回收：...
授权与回收数据源权限
③ 列表区 为您展示授权的数据源账号、权限类型、有效期至、权限来源信息，同时，您可以在 操作 列下对数据源进行 回收 操作。回收：回收单个账号的整体数据源权限。在 数据源回收 对话框，填写 回收原因。单击 确定。④ 批量操作区 回收：...
PolarDB-X 1.0迁移至PolarDB-X 2.0
如仅执行全量数据迁移，请勿向源实例中写入新的数据，否则会导致源和目标数据不一致。为实时保持数据一致性，建议选择结构迁移、全量数据迁移和增量数据迁移。其他限制 PolarDB-X 1.0 的存储类型支持为RDS MySQL（包括私有定制RDS和单独...
管理Dataphin数据源权限
如果需要查看字段的数据，则选择 查询权限。权限账号 系统默认选择为 应用。权限账号所属项目 系统默认选择为默认项目。应用 选择应用的分组及应用。有效期至 选择权限的截至时间。您也可以选择自定义后，指定截至时间。申请原因 填写申请...
配置任务常见错误码及排查方法
DTS.Msg.InvalidIpAddress 配置 接入方式 为 公网IP、专线/VPN网关/智能网关 或 云企业网CEN 的数据库实例的DTS任务时。原因：输入的IP地址格式错误，导致无法解析。解决方法：输入正确的IP地址后重试。DTS.Msg.PauseDenied....
数据库迁移
说明 如果存在不一致数据，可单击 查看详情 查看不一致的概览信息，在概览信息对话框中单击 详情 查看不一致的具体数据：如果数据量比较少，可以通过手动修改的方式同步数据，如果数据量比较大，查明数据不一致的原因，清理目标数据库后...
权限操作审计
区域 描述 ① 搜索及筛选区 您可根据数据对象的名称关键字进行模糊搜索，可勾选 我管理的，筛选当前账号管理的数据表，也可根据权限类型、操作类型筛选数据表。② 导出区 查看导出记录：支持查看权限操作审计的导出记录。在 导出记录 ...
- 产品推荐
- 这些文档可能帮助您