MaxCompute分区表数据导入
此SQL语句用于删除子表 holo_sale_detail_20210816 并将临时表 holo_sale_detail_tmp_20210816 绑定至 holo_sale_detail 分区表的20210816分区。已有子表时替换子表 BEGIN;删除旧子表 DROP TABLE IF EXISTS holo_sale_detail_20210816;将...
PyMySQL 连接 OceanBase 数据库示例程序
test_sql.py 代码介绍 本文获取的 test_sql.py 文件中的代码定义了数据库操作的 SQL 语句，包括创建表、插入数据、查询数据和删除表，这些 SQL 语句可以通过 PyMySQL 连接数据库后执行，以实现相应的功能。该文件中的代码主要包括以下几个...
Dataphin编辑治理项规则自定义SQL如何书写
示例中的select字段不是必填的，但是需要和自己新建的元数据表的字段对应，并且select来源表需要为自己新建的元数据表（SQL编辑框上面也有选择元数据表的地方）。2.对于物理表自定义SQL，需要输出主键table_guid字段，规则[maxcompute]....
功能特性
普通数据变更 无锁数据变更 可以将单个SQL拆分成多个批次执行，能更好地满足业务方变更大量表数据且不锁表的需求，例如历史数据清理、全表更新字段等，保证执行效率，减小对数据库性能、数据库空间等的影响。无锁数据变更概览 无锁变更 ...
新增逻辑表质量规则
多表自定义SQL：通过 自定义SQL 和 关联自定义SQL 语句，使用两个表的SQL执行两个结果定义质量规则。在 自定义SQL 中输入自定义SQL语句。选择 比较方式 并输入 期望值。单击 确定。操作完成后可以查看已创建的自定义SQL规则。步骤四：设置...
新增逻辑表质量规则
多表自定义SQL：通过 自定义SQL 和 关联自定义SQL 语句，使用两个表的SQL执行两个结果定义质量规则。在 自定义SQL 中输入自定义SQL语句。选择 比较方式 并输入 期望值。单击 确定。操作完成后可以查看已创建的自定义SQL规则。步骤四：设置...
通过控制台使用SQL查询
说明 当不存在映射表时，单击 SQL查询 页签，系统会自动弹出 创建映射表 对话框。在 创建映射表 对话框，根据下表说明配置参数。参数 描述 表类型 表类型。取值范围如下：普通表（默认）：为数据表创建映射关系时，选择此项。时序表：为...
通过SQL Server Management Studio导入SQL Server...
背景信息 本文中的源数据库和目标数据库均以Windows操作系统云虚拟主机SQL Server 2008数据库为例，其中，源数据库数据以从SQL Server 2008数据库中导出的数据表（SQL脚本类型）为例。导入数据前，请您了解SQL Server数据库的相关基础知识...
SQL Workbench/J连接MaxCompute
MaxCompute支持您通过数据库管理工具SQL Workbench/J访问MaxCompute项目，进行数据管理...查看表数据 创建SQL Workbench/J和MaxCompute数据连接后，SQL Workbench/J会自动跳转到SQL执行界面，您可以直接执行SELECT查询语句查看表数据信息。
Delta Lake 快速开始一
count")).orderBy("date","action").createOrReplaceTempView("tempDisplay")可视化该临时表%sql select*from tempDisplay 我们可以很方便的使用append模式追加新数据%pyspark#该操作主要将数据中时间前移2天（172800秒）historical_events...
SQL Pattern
表名 SQL Pattern扫描的数据库表。创建时间 在查询时间范围内，Pattern相关SQL的最早提交时间。执行次数 在查询时间范围内，Pattern相关SQL的执行次数。如果实例出现资源水位突增的情况，用户可以通过执行次数排序，查看实例运行异常时段...
数据查询最佳实践
多表关联 不同多表关联场景下，SQL优化原则不同，其中：普通表JOIN普通表，尽量包含分区列条件。如果不包含，则尽量通过WHERE条件过滤掉多余的数据。维度表JOIN普通表，没有限制。多表关联查询WHERE条件中，需要明确写明每一个表的过滤条件...
数据管理
⑤ DDL语句 查看创建表的SQL语句，仅支持查看不支持编辑。⑥ 前往SQL开发 单击后会跳转到 SQL开发 页面，关于 SQL开发 的详细信息，请参见 SQL开发。视图 页签 序号 区域 说明 ① 搜索栏 根据视图名的模糊搜索。根据视图类型（普通视图或...
SQL请求行为识别
下表是SQL监控指标的参数说明表。监控指标参数 参数说明 聚合图像 每一个聚类图像下的指标会做聚合。cpu_usage相关度 越接近1.00的监控指标类别与异常指标的关联度越高。SQL模板数 SQL模板的数量，SQL模板定义请参见 使用说明。平均耗时 ...
2.0版SQL开发规范
高QPS，分区裁剪 业务系统要求高QPS、毫秒级RT时，表和SQL必须设计为分区裁剪模式。常见SQL优化细节 去掉不必要的列 云原生数据仓库AnalyticDB MySQL版 2.0集群是列存数据库，返回的列的数量直接影响性能，在编写SQL时一定要确认业务需要...
数据库自治服务的审计事件
GetSqlListByTable 根本表获取SQL。GetSqlOptimizeAdvice 查询自动SQL优化产生的诊断建议。GetSqlOptimizeDataDetail 获取SQL治理的明细。GetSqlOptimizeDataTop 获取SQL治理的红黑榜数据。GetSqlOptimizeDataTrend 查询SQL治理的趋势数据...
表批读写
SQL AS OF 语法%sql SELECT*FROM events TIMESTAMP AS OF timestamp_expression SELECT*FROM events VERSION AS OF version 说明 timestamp_expression为实际的时间，你可以通过 DESCRIBE HISTORY events查看表的历史版本 table_identifier...
SQL限流
未创建索引表 例如SQL调用量特别大，并且没有创建索引表，导致整体系统繁忙。限流模式 支持的限流模式如下：参数 说明 支持的数据库 通过关键词限流 根据SQL语句中的关键词进行匹配从而限流。RDS MySQL PolarDB MySQL版 PolarDB-X 2.0 通过...
消费监控告警
有些SQL目前无法预估（如执行外部表的SQL），则此功能无法对这类SQL生效。在实际操作中，建议您：根据项目中历史SQL消费以及您的预期消费设定Project级别的 m_value。您可以下载每天的详细计量信息，以Project为粒度，计算SQL任务（数据...
计算费用（按量付费）
一般情况下，计费单价如下：公共云：0.1元/GB 金融云：0.19元/GB 按量付费闲时版 引用外部表的SQL作业（包括OTS外部表作业、OSS外部表作业、Spot OTS外部表作业、SpotOSS外部表作业）SQL作业当日总费用=计算输入数据量×单价 一般情况下，...
2020年
2020-02-26 全部区域 创建OSS外部表 支持SQL中列名书写智能纠错 运行SQL时，如果输入的字段名有误，SQL引擎将进行联想并提示您正确的字段名。2020-02-26 全部区域 公告 支持Python 3 UDF Python 2官方即将停止维护，MaxCompute支持Python 3...
配置SQL审核优化建议
类别 检测点 无 优化主键为 int 类型的表：OPTIMIZE_PRIMARY_IS_INT_TABLE 预警自增主键剩余可用空间风险：SNIFFING_AUTO_PRIMARY_REMAIN_SPACE 预警唯一索引（uk）null 值风险：SNIFFING_UNIQUE_EXIST_NULL_RISK DDL锁表或变更失败预警与...
API概览
GetBlockingDetailList 查询RDS SQL Server实例的锁阻塞列表 调用GetBlockingDetailList接口，查询RDS SQL Server实例的锁阻塞列表。索引诊断 API 标题 API概述 GetInstanceMissingIndexList 查询RDS SQL Server实例索引缺失情况 调用...
SQL Server数据源
关闭其他数据写入方，保证当前数据为静态数据，例如锁表、关闭备库同步等。缺点是可能影响在线业务。数据库编码问题 SQL Server Reader底层使用JDBC进行数据抽取，JDBC天然适配各类编码，并在底层进行了编码转换。因此SQL Server Reader不...
dbms_sql.reload_trace
您可以使用存储过程 dbms_sql.reload_trace 将 mysql.sql_sharing 表中的模板化SQL语句载入到 information_schema.sql_sharing 表中。语法 dbms_sql.reload_trace()示例 将 mysql.sql_sharing 表中的模板化SQL语句载入到 information_...
配置SQL执行控制
无锁结构变更运行参数包括：配置切换表时锁表超时时间 配置切换表失败时重试次数 配置全量拷贝策略和大小 配置切换表的时间窗口 配置切换表完成后原表清理策略 说明 正常情况下，您无需配置任何参数，DMS自动采用最优和最安全的方式执行...
dbms_sql.delete_trace
语法 dbms_sql.delete_trace('<schema>','<query>')说明 执行该存储过程后，SQL语句中的常量会被自动模板化，并删除 mysql.sql_sharing 表中与其模板化后的SQL语句匹配的模板化SQL语句，且后续与该模板匹配的SQL语句不会被SQL Trace功能...
SQL 诊断概述
疑似锁冲突 SQL 存在重试，可能是锁冲突导致，请排查业务逻辑，是否存在锁冲突场景。DML 访问过多分区数 请改写 SQL，保证 SQL 能进行分区裁剪。疑似 Buffer 表 请确认相关表是否在频繁更新。疑似存在大小账号 请排查是否存在数据倾斜问题...
回收表碎片空间
常规的回收表空间碎片操作（例如Optimize Table回收表空间）可能会锁表并影响业务运行。本文为您介绍在DMS中提交无锁结构变更工单来自动整理并回收碎片空间，有效避免因数据库变更而导致的锁表阻塞业务问题，提高数据库性能和效率，并降低...
SQL 诊断概述
疑似锁冲突 SQL 存在重试，可能是锁冲突导致，请排查业务逻辑，是否存在锁冲突场景。DML 访问过多分区数 请改写 SQL，保证 SQL 能进行分区裁剪。疑似 Buffer 表 请确认相关表是否在频繁更新。疑似存在大小账号 请排查是否存在数据倾斜问题...
解决SQL Server实例空间满自动锁的问题
方法二：通过SQL语句查看所有数据库的数据文件（mdf和ndf文件）和日志文件（ldf文件）的大小，详情请参见 RDS for SQL Server如何查看实例、数据库及表占用的空间大小。解决空间满自动锁问题 升级实例的存储空间 升级实例存储空间后即可...
解决SQL Server实例空间满自动锁的问题
方法二：通过SQL语句查看所有数据库的数据文件（mdf和ndf文件）和日志文件（ldf文件）的大小，详情请参见 RDS for SQL Server如何查看实例、数据库及表占用的空间大小。解决空间满自动锁问题 升级实例的存储空间 升级实例存储空间后即可...
查看资源和引擎监控
平均每秒全表扫描数 每秒全表扫描次数。每秒SQL编译 实例中每秒编译的SQL语句数。每秒锁超时次数 实例中每秒锁超时次数。每秒死锁次数 实例中每秒锁定次数。每秒锁等待次数 实例中每秒锁等待次数。常见问题 RDS SQL Server CPU使用率高问题...
使用说明
清理完成后，如果需要再次统计通过 dbms_sql.add_trace 存储过程添加的SQL语句的执行情况，您可以通过 dbms_sql.reload_trace 存储过程将 mysql.sql_sharing 表中模板化SQL语句重新导入至 information_schema.sql_sharing 表中。...
SQL查询
SQL查询功能适用于在海量数据中进行在线数据访问类型的场景，SQL访问的延时从毫秒、秒到分钟级别不等，包括基于数据表主键的Point Query（GetRow操作）、多元索引的精确查询（TermQuery）等以及通过多元索引的统计聚合能力进行查询，例如...
SQL查询
SQL示例 使用时序表的多值模型映射表查询数据的SQL示例如下：查询某台车辆一段时间内的位置坐标 select gps from `vehicles_timeseriesdata:multi_model` where_m_name='vehiclesSeriesData' and_data_source='vin_id_1488' and_time>...
SQL数据类型映射
SQL中所用字段对应于表中同名字段，两者的数据类型必须相匹配。本文介绍了SQL中字段数据类型、数据表中字段数据类型和多元索引中字段数据类型的映射关系。使用SQL过程中请确保SQL中和数据表中字段数据类型相匹配。重要 SQL中主键列的数据...
数据方案概览
表一致性修复 用于对比不同表之间的表结构，找出差异并在目标表执行差异脚本，以保障不同表之间的表结构一致性 无锁结构变更 可以较好地规避因锁表以致于阻塞业务和数据库原生OnlineDDL带来的主备延迟问题。数据变更 普通数据变更 支持数据...
无锁结构变更
DMS为解决结构变更时的锁表问题而推出的无锁结构变更功能，能较好地规避因数据库变更导致锁表以至于阻塞业务的现象、以及数据库原生Online DDL带来的主备延迟现象。前提条件 实例的管控模式为稳定变更或安全协同。更多信息，请参见 管控...
在Dataphin的SQL中如何自动解析出物理表上游依赖
产品名称 Dataphin 产品模块 代码任务 概述 本文描述如何为SQL自动解析出上游依赖的物理表？问题描述 当您进行SQL开发过程中，从物理表获取数据时，需要将物理表添加为上游依赖，确保在调度过程中，引用的物理表中存在数据。问题原因 NA ...
- 产品推荐
- 这些文档可能帮助您