Quick BI连接MaxCompute

数据源权限控制问题请参见 Quick BI关于业务分析人员连接MaxCompute数据源权限控制问题解决方案及常见报错解析。测试成功后,单击 确定,完成数据源的添加。此时您可以在数据源列表中,看到您创建的数据源。说明 Quick BI添加MaxCompute云...

确认表血缘

导致下游取数出现问题 若当前节点 Job_B 代码中配置了依赖A表的数据,但未将产出A表数据的节点 Job_A 作为当前节点依赖的上游,则可能会出现A表数据未产出,当前节点便开始执行,最终导致 Job_B 节点产出的表数据出现问题。虽然 Job_A 的...

时空数据库版本发布记录

新增 ST_UserData 函数支持用户自定义的附加属性数据存取功能。新增 ST_ECEFToENU 函数支持地心坐标到站心坐标转换。缺陷修复 修复运行st_buildhistogram后raster对象变为空的问题。修复轨迹ST_AsTable传入空值导致崩溃问题和z值错误问题。...

时空数据库版本发布记录

新增 ST_UserData 函数支持用户自定义的附加属性数据存取功能。新增 ST_ECEFToENU 函数支持地心坐标到站心坐标转换。缺陷修复 修复运行st_buildhistogram后raster对象变为空的问题。修复轨迹ST_AsTable传入空值导致崩溃问题和z值错误问题。...

SDK概述

解决添加OSS数据源时部分hadoop命令不可用问题解决“java.text.ParseException:Unparseable date”问题。优化emr-core支持本地调试运行。兼容老版本的产生的“_$folder$”文件,解释成目录,不再当作普通文件处理。Hadoop和Spark读写OSS...

离线同步数据质量排查

本文将为您列举一些常见数据质量方面的场景,方便您排查是否存在符合的场景,根据对应解决方案解决数据同步质量问题。背景信息 讲述数据集成数据同步的原理机制,理解数据同步的过程,进而对数据同步的执行效果有判断能力,判断数据同步...

聚合支付:Ping+

Mycat前期人力成高、后期需要部署维护,问题解决成本高、时间长。PolarDB-X 商务成本相对可接受,产品化能力丰富,运维便捷,最后选型阿里云 PolarDB-X。解决方案 Ping+业务早期均构建于RDS MySQL之上,数据体量从2016年1个亿至2017年5个亿...

权限管理与规范化数据开发

根据表血缘来配置节点调度依赖后,可以保障调度任务在运行时能取到正确的数据,避免下游节点取数据时,上游表数据还未正常产出,导致下游节点取数出现问题。在DataWorks依赖配置中,上游节点的输出作为下游节点的输入,形成节点依赖关系。...

他云/自建数据库录入

RegisterInstance-录入新的数据库实例 常见问题 Q:已将DMS IP地址添加至Azure SQL数据库白名单,但是在DMS控制台进行新增数据库实例操作时,仍然出现如下图的报错信息,该如何解决?A:请您在配置 新增实例 信息时,在数据库账号一栏中填...

B-tree并发控制优化

为了解决上述的数据读写错误问题,InnoDB采用同时持有多个节点锁的方式来保证B-tree并发读写的一致性,并设计了加锁规则以防止多个线程访问B-tree结构时出现死锁的问题。在B-tree并发控制算法的实现上,InnoDB进行了多次优化迭代,改进的...

数据质量:全流程的质量监控

DataWorks的全流程数据质量监控功能为您提供35种预设表级别、...数据质量为您解决以下问题数据库频繁变更问题 业务频繁变化问题 数据定义问题 业务系统的脏数据问题 系统交互导致质量问题 数据订正引发的问题 数据仓库自身导致的质量问题

数据开发常见问题

本文汇总了数据开发时的常见问题。组件相关问题:Hive常见问题 Spark常见问题 Sqoop常见问题 作业问题:环境变量过多或者参数值过长时,为什么提交作业失败?为什么Shell作业状态和相关的YARN Application状态不一致?创建作业和执行计划的...

如何基于LSM-tree架构实现一写多读

MVCC(多版本并发控制)物理复制技术解决数据同步的问题,为存储计算分离打下了基础。为了实现弹性、动态升降配和增删只读节点的能力,需要只读节点具备一致性读的能力,另外RW节点和RO节点共享一份数据,历史版本回收也是必需要考虑的...

SQL Console初体验

当您成功在DMS上登录数据库后,可在SQL Console中进行创建数据库、创建表、查询表数据、变更表数据等操作。本文以在RDS MySQL数据库中进行操作举例。创建数据库 在RDS控制台创建数据库 访问 RDS实例列表,在上方选择地域,然后单击目标实例...

常见问题概览

连接访问 打开SQLConsole页面时提示“未获取到数据库相关信息”的报错 MySQL中出现“Too many connections”报错 新增ECS自建数据库提示“因白名单问题无法连接数据库”账号或权限 如何在DMS控制台中查看数据库对应的DBA 在DMS控制台添加...

常见问题

将上传延迟的OSS requestID发送给 技术支持,查看出现问题时访问是否存在延迟。通过抓包获取上传数据进行分析,可通过如下参数分析数据包:tcpdump-i<出口网卡>-s0(本机出口IP and OSS域名)-w result.pcap 案例:有效请求率降低 问题现象:...

预检查常见问题

本文介绍目标数据库PolarDB O引擎在预检查过程中遇到的常见问题解决方案。目标库账号权限错误 问题描述 目标库账号无权限:目标库账号权限不足。原因 生成迁移计划时,用户名 为目标数据库的普通账号。解决方案 重新生成迁移计划,用户名...

慢日志

数据库自治服务DAS(Database Autonomy Service)支持慢日志分析功能,会统计并分析数据库中执行时间超过阈值的SQL语句,并提供相应的治理方案,帮助您快速定位并解决数据库性能问题,提高系统的稳定性和可靠性。背景信息 慢日志由数据库...

外部表概述

第二种方法通常需要申请UDF网络访问权限,还需要开发者自己控制作业并发数,解决数据如何分片的问题。因此,MaxCompute提供了外部表来解决上述问题。外部表的功能旨在提供除MaxCompute内部表格以外的其他数据的处理能力。通过一条简单的DDL...

数据资产等级定义

一般性质:数据主要用于日常数据分析,出现问题带来的影响极小。标记为A4。未知性质:无法明确数据的应用场景。标记为Ax。这些性质的重要性依次降低,即重要程度为A1>A2>A3>A4>Ax。如果一份数据出现在多个应用场景汇总,则根据其最重要程度...

数据源管理常见问题

本文介绍在DataV中连接数据源时,经常遇到的问题及相应的解决方法。DataV小课堂直播视频:数据源管理-常见问题。CSV数据源类问题 如何为组件配置CSV数据源?您可以在DataV控制台单击 我的数据>数据源管理,选择+添加数据,进入 添加数据 ...

数据源管理常见问题

本文介绍在DataV中连接数据源时,经常遇到的问题及相应的解决方法。DataV小课堂直播视频:数据源管理-常见问题。CSV数据源类问题 如何为组件配置CSV数据源?您可以在DataV控制台单击 我的数据>数据源管理,选择+添加数据,进入 添加数据 ...

不同阿里云账号下RDS实例间的数据同步

注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较大的情况下(例如源库有大量慢SQL、存在无主键表或目标库存在死锁等),可能会加重数据库压力,...

重启节点

PolarDB 提供了重启节点功能,您可以在控制台上手动重启节点解决数据库连接和性能问题。注意事项 重启只读节点之后新建的读写分离连接会转发请求到该只读节点。重启只读节点之前建立的读写分离连接不会转发请求到重启后的只读节点,您可以...

重启节点

PolarDB 提供了重启节点功能,您可以在控制台上手动重启节点解决数据库连接和性能问题。注意事项 重启只读节点之后新建的读写分离连接会转发请求到该只读节点。重启只读节点之前建立的读写分离连接不会转发请求到重启后的只读节点,您可以...

从ECS上的自建MySQL同步至RDS

数据传输服务DTS(Data Transmission Service)支持ECS上的自建MySQL同步至 RDS MySQL 或RDS MySQL Serverless 实例,实现增量数据的实时同步。前提条件 自建MySQL数据库版本为5.1、5.5、5.6、5.7或8.0版本。已创建 RDS MySQL实例 或 ...

不同阿里云账号下RDS实例间的数据同步

注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较大的情况下(例如源库有大量慢SQL、存在无主键表或目标库存在死锁等),可能会加重数据库压力,...

PolarDB MySQL版间的单向同步

说明 若数据传输控制台自动跳转至数据管理DMS控制台,您可以在右下角的 中单击,返回至旧版数据传输控制台。在左侧导航栏,单击 数据同步。在 同步作业列表 页面顶部,选择同步的目标实例所属地域。定位至已购买的数据同步实例,单击 配置...

2023年

您可以在 云原生数据仓库AnalyticDB PostgreSQL版 控制台将实例升级至最新发布的小版本。升级小版本的具体操作,请参见 版本升级。2023年10月(V2.1.1.2)类别 功能 功能描述 相关文档 优化 查询性能 新建实例时减少Hash bucket数。优化...

慢日志

数据库自治服务DAS(Database Autonomy Service)支持慢日志分析功能,会统计并分析数据库中执行时间超过阈值的SQL语句,帮助您快速定位并解决数据库性能问题,提高系统的稳定性和可靠性。背景信息 慢日志由数据库内核输出,不同数据库引擎...

慢日志

数据库自治服务DAS(Database Autonomy Service)支持慢日志分析功能,会统计并分析数据库中执行时间超过阈值的SQL语句,并提供相应的治理方案,帮助您快速定位并解决数据库性能问题,提高系统的稳定性和可靠性。前提条件 数据库引擎为 ...

慢日志

数据库自治服务DAS(Database Autonomy Service)支持慢日志分析功能,会统计并分析数据库中执行时间超过阈值的SQL语句,并提供相应的治理方案,帮助您快速定位并解决数据库性能问题,提高系统的稳定性和可靠性。前提条件 数据库引擎为:...

重启节点

PolarDB 提供了重启节点功能,您可以在控制台上手动重启节点解决数据库连接和性能问题。注意事项 重启只读节点之后新建的读写分离连接会转发请求到该只读节点。重启只读节点之前建立的读写分离连接不会转发请求到重启后的只读节点,您可以...

慢日志

数据库自治服务DAS(Database Autonomy Service)支持慢日志分析功能,会统计并分析数据库中执行时间超过阈值的SQL语句,帮助您快速定位并解决数据库性能问题,提高系统的稳定性和可靠性。背景信息 慢日志由数据库内核输出,不同数据库引擎...

PolarDB MySQL版间的单向同步

说明 若数据传输控制台自动跳转至数据管理DMS控制台,您可以在右下角的 中单击,返回至旧版数据传输控制台。在左侧导航栏,单击 数据同步。在 同步作业列表 页面顶部,选择同步的目标实例所属地域。定位至已购买的数据同步实例,单击 配置...

慢日志

数据库自治服务DAS(Database Autonomy Service)支持慢日志分析功能,会统计并分析数据库中执行时间超过阈值的SQL语句,帮助您快速定位并解决数据库性能问题,提高系统的稳定性和可靠性。背景信息 慢日志由数据库内核输出,不同数据库引擎...

从RDS MySQL同步至PolarDB MySQL版

注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升,在数据库性能较差、规格较低或业务量较大的情况下(例如源库有大量慢SQL、存在无主键表或目标库存在死锁等),可能会加重数据库压力,...

从PolarDB MySQL版同步至RDS MySQL

本文介绍如何使用数据传输服务DTS(Data Transmission Service),将 PolarDB MySQL版 同步至RDS MySQL,实现增量数据的实时同步。前提条件 已购买 PolarDB MySQL版 集群,详情请参见 创建PolarDB MySQL集群。PolarDB MySQL版 集群已开启...

技术面临的挑战与革新

这种类型的架构好处显而易见,数据Sharding的方式让数据存取以及处理可以并行化,计算存储本地化最大化提升了数据读写的带宽以及延时。在过去网络IO还是一大瓶颈的年代,分布式系统设计以及优化的一大原则就是尽量使得计算存储本地化,避免...

淘宝万亿级交易订单背后的存储引擎

基于X-Engine引擎的PolarDB-X集群支撑了淘宝历史订单数据库业务,解决了使用HBase数据库遗留的问题,降低存储成本的同时,满足了用户随时查询订单的需求。背景信息 阿里巴巴旗下的淘宝是中国著名的在线购物平台,活跃用户数量超过数亿人。...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据传输服务 云数据库 Redis 版 云数据库 RDS 数据库备份 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用