查询治理
数据库自治服务DAS（Database Autonomy Service）为RDS MySQL提供查询治理功能，通过离线数据分析技术，在每天凌晨1点将全部实例在昨天产生的慢SQL进行统计分析和自动打标，帮助您对慢SQL进行自动分类和划分治理优先级，同时提供治理建议和...
查询治理
数据库自治服务DAS（Database Autonomy Service）通过离线数据分析技术，在每天凌晨1点将全部实例在昨天产生的慢SQL进行统计分析和自动打标，帮助您对慢SQL进行自动分类和划分治理优先级，同时提供治理建议和数据导出功能。前提条件 目标...
PyMySQL 连接 OceanBase 数据库示例程序
test_sql.py 代码介绍 本文获取的 test_sql.py 文件中的代码定义了数据库操作的 SQL 语句，包括创建表、插入数据、查询数据和删除表，这些 SQL 语句可以通过 PyMySQL 连接数据库后执行，以实现相应的功能。该文件中的代码主要包括以下几个...
使用Spark SQL进行作业开发
重要 选择 继续执行 时，SQL语句为批量执行，SQL语句运行在单独的Spark App中，可以保证资源隔离和稳定性。本次入门教程推荐使用 继续执行。选择 启动ThriftServer 时，SQL语句为交互式执行，资源隔离为线程级的，且需要配置Spark ...
导入数据
如需调整，可以由DBA或管理员在 安全规则>SQL变更>批量数据导入 中修改。CSV格式：文件中的分隔符必须为逗号。Excel格式：Excel文件中可以有表头（属性），也可以直接是数据。目标表 选择导入数据的目标表。数据位置 选择数据的位置：第1...
数据导入
若批量数据导入脚本中包含了结构变更SQL，即使实例已开启无锁结构变更，该结构变更SQL也只能通过原生方式执行，不会通过无锁结构变更的方式执行。操作步骤 说明 以管控模式为安全协同的RDS MySQL数据库为例，介绍配置流程。登录 数据管理...
Commons Pool 连接 OceanBase 数据库示例程序
本文将介绍如何使用 Commons Pool、MySQL Connector/J 和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入数据、更新数据、删除数据、查询数据和删除表等。点击下载 commonpool-mysql-client 示例工程 前提条件...
使用Spark SQL进行作业开发
重要 选择 继续执行 时，SQL语句为批量执行，SQL语句运行在单独的Spark App中，可以保证资源隔离和稳定性。本次入门教程推荐使用 继续执行。选择 启动ThriftServer 时，SQL语句为交互式执行，资源隔离为线程级的，且需要配置Spark ...
将Excel的数据导入数据库
如需调整，可以由DBA或管理员在 安全规则>SQL变更>批量数据导入 中修改。CSV格式：文件中的分隔符必须为逗号。Excel格式：Excel文件中可以有表头（属性），也可以直接是数据。目标表 需要导入数据的目标表名称。数据位置 选择数据的位置：...
批量创建质量规则
批量创建质量规则可帮助您为监控对象配置统一的质量规则，并设置异常告警信息，实时监控对象的动态。本文为您介绍如何批量配置质量规则。前提条件 已将数据表或指标发布至生产环境，发布详情请参见 管理发布任务。权限说明 超级管理员、...
批量创建质量规则
批量创建质量规则可帮助您为监控对象配置统一的质量规则，并设置异常告警信息，实时监控对象的动态。本文为您介绍如何批量配置质量规则。前提条件 已将数据表或指标发布至生产环境，发布详情请参见 管理发布任务。权限说明 超级管理员、...
SQL审核最佳实践
数据管理DMS 的SQL审核功能，支持对SQL语句进行批量审核并提供优化建议，避免无索引或不规范的SQL语句，降低SQL注入风险。本文以对XML文件中多个SQL语句进行审核为例，向您展示配置SQL审核规则、审核目标文件中SQL语句的流程。背景信息 在...
批量上传质量规则
仅支持批量上传自定义SQL的质量规则。权限说明 质量管理员支持为所有质量监控对象配置质量规则。质量负责人仅支持为自己所负责的监控对象配置质量规则。Excel上传质量规则 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 ...
批量上传质量规则
仅支持批量上传自定义SQL的质量规则。权限说明 质量管理员支持为所有质量监控对象配置质量规则。质量负责人仅支持为自己所负责的监控对象配置质量规则。Excel上传质量规则 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 ...
管控模式
研发流程审批 N N Y：支持按需自定义 配置逻辑库 N N Y 批量操作表 Y Y Y 数据开发周期任务调度 N N Y SQL窗口 查询与变更表结构 Y-Y 超级SQL模式 N N Y 管理表结构版本 Y Y Y 调整字段敏感等级 Y Y Y 监测数据质量 N N Y 跨库查询 N N Y：...
DBCP 连接池连接 OceanBase 数据库示例程序
本文将介绍如何使用 DBCP 连接池、MySQL Connector/J 和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入、删除、更新和查询数据等。点击下载 dbcp-mysql-client 示例工程 前提条件 您已安装 OceanBase 数据库...
Druid 连接池连接 OceanBase 数据库示例程序
本文将介绍如何使用 Druid 连接池、MySQL Connector/J 和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入数据、更新数据、删除数据、查询数据和删除表等。点击下载 druid-mysql-client 示例工程 前提条件 您已...
使用批量更新
本文介绍了 AnalyticDB PostgreSQL版 中数据合并的方法和背后的原理，进而介绍如何使用批量操作，快速地更新数据。更新，又称为合并（Merge），指把数据最新版本更新到 AnalyticDB PostgreSQL版 中。如果数据已经存在，则将它们替换为新...
DML差异
MySQL 云原生数据仓库AnalyticDB MySQL 定义 CALL 不支持 调用存储过程。DELETE 支持，详情请参见 DELETE。从表中删除行。DO 不支持 执行表达式，但不返回任何结果。HANDLER 不支持 直接访问...暂不支持批量更新多条SQL语句。修改表中的数据。
网络问题
本文介绍网络问题对数据库性能的影响。前端协议 简单查询：一个简单查询周期是由前端发送一条Query消息给后端进行初始化开始。这条消息包含一个用文本字符...解法：使用 insert into values(),(),()的方式批量进行发送，避免网络的多次交互。
2020年
2020-10-30 全部区域 创建OSS外部表 批量Drop Partition支持条件筛选 如果用户希望一次性删除符合某个规则条件的一个或多个分区，可以使用条件表达式匹配分区进行批量删除。2020-10-30 全部区域 分区和列操作 新增WIDTH_BUCKET函数且时间...
数据追踪
在DMS的SQL窗口中对数据库进行变更操作时，可能由于误更新、误删除、误写入等原因导致数据不符合预期。DMS 的数据追踪功能支持按需查找目标时间段内（数据库Binlog保存时长内）的相关更新信息，并生成回滚脚本，帮助您快速将数据恢复到变更...
创建并管理数据集
Quick BI中数据集是可视化分析的基础，您可以将需要分析的数据表创建为数据集，Quick BI支持可视化配置或自定义SQL方式创建数据集。前提条件 您已获取数据，请参见 连接数据源。功能入口 在Quick BI产品首页，通过以下入口，进入创建数据集...
执行分析
在 SQL 窗口中，编辑 SQL 语句以查询插入表 employee 的数据。SELECT `emp_no`,`birthday`,`name` FROM `odc_test`.`employee`;如上图所示，选中 SQL 语句并单击执行计划图标，可以在执行 SQL 语句前系统预估执行数据（EXPLAINPLAN 操作的...
Flink_SQL任务开发方式
Dataphin的Flink_SQL任务支持多种开发方式，包括原生DDL+DML开发、使用Dataphin元表进行开发、使用Dataphin数据源表进行开发、以及使用计算源物理表进行开发，且不同开发方式所创建的表支持任意混用，包括镜像表。不同开发方式的使用方法、...
云数据库 RDS SQL Server 版如何批量导入数据
云数据库 RDS SQL Server 版支持Bulk Insert批量导入数据，但是存在一定限制，限制原因是因为会触发RDS for SQL Server 2008R2版本实例的一个BUG，需要在使用时将 CheckConstraints选项开启。通过BCP命令方式 生成XML格式文件，示例如下。...
Flink_SQL任务开发方式
Dataphin的Flink_SQL任务支持多种开发方式，包括原生DDL+DML开发、基于Catalog开发、使用Dataphin元表进行开发、使用Dataphin数据源表进行开发、以及使用计算源物理表进行开发，且不同开发方式所创建的表支持任意混用，包括镜像表。...
基于Python DB-API的应用开发
with connection.cursor()as statement:#创建表 sql_create_table="create table if not exists test_python(c1 integer,c2 integer,primary key(c1))"print(sql_create_table)statement.execute(sql_create_table)#插入一行数据 sql_...
基于Python的应用开发
python(c1 integer,c2 integer,primary key(c1))"print(sql_create_table)statement.execute(sql_create_table)#插入一行数据 sql_upsert="upsert into test_python(c1,c2)values(1,1)"print(sql_upsert)statement.execute(sql_upsert)#...
新建镜像表
系统支持SQL导入字段、批量导入字段和单行导入字段的方式，新建主表字段：SQL语句导入字段。单击 SQL导入字段。在 SQL导入 对话框，单击 参考示例，查看代码示例，编写导入字段的代码，代码示例如下。create table dwi_pub_hbd_cate_mtr...
新建镜像表
系统支持SQL导入字段、批量导入字段和单行导入字段的方式，新建主表字段：SQL语句导入字段。单击 SQL导入字段。在 SQL导入 对话框，单击 参考示例，查看代码示例，编写导入字段的代码，代码示例如下。create table dwi_pub_hbd_cate_mtr...
SQL 编辑和执行
将批量数据粘贴在 SQL 编辑区后，选择复制的数据，单击 IN 值转化 按钮，即可转化成 in（'A','B'）格式。列值分隔符号为换行符。行值分隔符为空格或 TAB 值。大小写 提供 全部大写、全部小写 和 首字母大写 三种效果，将您在脚本中选中的...
Python
cities 表中插入两组数据 sql="insert into cities values(1,'hangzhou'),(2,'shanghai')"cur.execute(sql)#查询 cities 表中的所有数据 sql='select*from cities' cur.execute(sql)ans=cur.fetchall()print(ans)#删除表 cities sql='drop ...
管理函数
将批量数据粘贴在 SQL 编辑区后，选择复制的数据，单击 IN 值转化 按钮，即可转化成 in（'A','B'）格式。列值分隔符号为换行符。行值分隔符为空格或 TAB 值。代码片段 提供内置语法片段和自定义语法片段供您查看和引用。详情请查看 代码...
功能更新动态（2024年）
创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 新建Doris数据源 创建GreenPlum数据源 新建Amazon S3数据源 离线集成 新增集成任务列表，支持批量提交...
管理存储过程
将批量数据粘贴在 SQL 编辑区后，选择复制的数据，单击 IN 值转化 按钮，即可转化成 in（'A','B'）格式。列值分隔符号为换行符。行值分隔符为空格或 TAB 值。储存过程运行结果页面 存储过程执行完毕后，可查看 运行结果 和 DBMS 输出 信息...
文档更新动态（2024年）
新增集成任务列表，支持批量提交、批量下线删除、批量调度/依赖/参数/运行配置、批量移动目录、批量转交开发负责人、批量获取锁操作。新增Amazon S3输入输出组件。脚本模式输入输出组件字符数扩增至50万。过滤组件新增START WITH和END WITH...
导出结构和数据
批量提交数量（SQL 格式）选择导出 SQL 格式数据时，通过指定批量提交数量，可在导出文件中导出指定数量数据时添加一句 COMMIT 命令。使用全局快照 勾选该项后 ODC 将导出全局中指定表的最新快照点中的数据，勾选该项可以保证全局数据的...
自动优化
在该案例中，我们创建一个新表，并使用一个for循环，不断的向该表中插入数据：%sql CREATE TABLE student(id INT,name STRING)USING delta LOCATION"oss:/databricks-delta-demo/auto_optimize"TBLPROPERTIES(delta.autoOptimize....
使用OPTIMIZE和Z-ORDER优化商品库存查询性能
查看当前Parquet表的数据%spark.sql-查看某个StockCode下的数据 SELECT*FROM current_inventory WHERE StockCode IN('21877','21876')步骤1：向Parquet表中插入记录%pyspark#创建2条记录，准备插入到表中并转换为DataFrame items=[('...
- 产品推荐
- 这些文档可能帮助您