Flink Table Store与Spark集成
操作步骤 步骤一：创建Catalog Flink Table Store将数据和元数据都保存在文件系统或对象存储中，存储的根路径由 spark.sql.catalog.tablestore.warehouse 参数指定。如果指定的warehouse路径不存在，将会自动创建该路径；如果指定的...
管理Notebook单元
运行：运行当前SQL单元中的SQL代码。查询加速：当前Notebook的项目为MaxCompute计算引擎时，支持查询加速。开启查询加速后，将使用MaxCompute MCQA加速查询，MCQA每一个租户下，作业数量与并发数有限制，可能会导致加速失败，执行报错。更...
批计算谓词下推配置
批计算中的多元索引查询方式可以自定义谓词下推配置。目前只能设置与Long、String类型的列做大小比较的谓词是否下推。背景信息 谓词下推适用于当多元索引中多字段过滤的中间结果数据量较大，则中间结果的合并较为耗时的场景。此时可以将...
管理Notebook单元
运行：运行当前SQL单元中的SQL代码。查询加速：当前Notebook的项目为MaxCompute计算引擎时，支持查询加速。开启查询加速后，将使用MaxCompute MCQA加速查询，MCQA每一个租户下，作业数量与并发数有限制，可能会导致加速失败，执行报错。更...
计算与分析概述
分析工具 适用模型 操作 描述 MaxCompute 宽表模型 使用MaxCompute 通过MaxCompute客户端为 表格存储 的数据表创建外部表，即可访问 表格存储 中的数据。Spark 宽表模型 使用Spark计算引擎 使用Spark计算引擎时，支持通过E-MapReduce SQL...
概述
使用指定模式创建的黑白名单SQL语句，即使对应的黑白名单规则都被禁用或被删除，其在数据库表中的SQL语句仍然会被保留。如果对应的黑白名单再次被启用，同账号的规则还是会生效。如果您想彻底删除黑白名单，可通过超级账号连接到对应集群的...
Delta Lake 快速开始一
order）%sql DESCRIBE HISTORY events 优化后，文件被自动合并做性能优化，表中只有5个文件%sql DESCRIBE DETAIL events Describe formatted 命令也在DDI中支持%sql DESCRIBE FORMATTED events 附录 清理数据库%sql/*DROP DATABASE IF ...
Spark-SQL命令行工具
提交离线SQL作业 spark-sql工具，提供-e 用于执行以分号隔开的多条sql语句，以及-f 用于执行sql文件中的语句（每条sql语句以分号结尾）。用户可将conf字段指定的配置放入 conf/spark-defaults.conf 中，然后按照如下格式提交：#使用-e命令...
删除账号
登录成功后，在页面上方的菜单栏中，选择 SQL操作>SQL窗口。执行如下删除账号的命令：DROP USER 'username';单击 执行 以删除账号。相关API API 描述 DeleteAccount 删除账号（包含高权限账号和普通账号）。相关文档 创建账号
删除账号
登录成功后，在页面上方的菜单栏中，选择 SQL操作>SQL窗口。执行如下删除账号的命令：DROP USER 'username';单击 执行 以删除账号。相关API API 描述 DeleteAccount 删除账号（包含高权限账号和普通账号）。相关文档 创建账号
SQL洞察和审计
当您在安全合规审计、性能分析、故障排除等场景下需要监控和管理RDS PostgreSQL实例中执行的SQL语句时，可以利用SQL洞察和审计功能对SQL语句的执行情况进行记录和聚合分析。开启该功能后会自动记录来自数据库内核的SQL语句，以及SQL语句的...
查看统计图表
写入模式 选择 日志库导入日志库，即表示源Logstore中的数据通过定时SQL处理后将存储到目标Logstore中。SQL代码 显示您在步骤 4 中输入的查询和分析语句。此处的预览操作与步骤 4 中的操作一致，用于验证您所使用的查询和分析语句是否正确...
日志字段
本文将介绍 PolarDB-X 1.0 SQL审计日志中包含的日志字段详情。字段名称 字段说明_topic_日志主题，格式为 drds_audit_log_{instance_id}_{db_name}，例如 drds_audit_log_drdsxyzabcd_demo_drds_db。autocommit SQL执行时 autocommit 是否...
COST SQL
参数说明 sql_sentence：待估算费用的SQL语句。使用示例 cost sql select*from sale_detail;返回结果如下。ID=20150715113033121xxxxxxx UDF:0 Complexity:1.0 Input:0 Bytes 参数说明如下：UDF：表示SQL中运行的UDF个数。Complexity：表示...
HikariCP 连接池连接 OceanBase 数据库示例程序
本文将介绍如何使用 HikariCP 连接池、MySQL Connector/J 和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入、删除、更新和查询数据等。点击下载 hikaricp-mysql-client 示例工程 前提条件 您已安装 OceanBase...
任务编排
本文介绍如何使用 数据管理DMS 任务编排的...前往SQL窗口验证test表中的历史数据是否已迁移至目标表，及test表中已迁移的数据是否已被删除。具体操作，请参见 使用SQL语句查询数据。相关文档 任务编排概述 基本概念 变量概述 发布或下线任务流
TOP SQL
说明 实时TOP SQL的数据来源于实例启动后缓存中的数据，当有新增SQL或者原有SQL被执行时，缓存中的数据会同步更新，您可以在 实时TOP SQL-列表 中，查看SQL的 最后执行时间。可以在 实时TOP SQL-列表 框中单击 Statement 和 SQL文本 列中的...
设置白名单规则
白名单规则 设置白名单规则后，任何不包含在白名单中的SQL语句都会被拦截或报警。此模式用于保护您的主业务使用的账号。即只允许此账号执行业务中使用的SQL语句，不允许执行任何业务外的SQL语句。由于实际业务中使用的SQL语句可能会很多，...
SQL限流
限流模式 支持的限流模式如下：参数 说明 支持的数据库 通过关键词限流 根据SQL语句中的关键词进行匹配从而限流。RDS MySQL PolarDB MySQL版 PolarDB-X 2.0 通过SQL模板ID限流 对SQL模板ID进行匹配从而限流，可从SQL日志、会话、EXPLAIN...
动态 SQL
到目前为止，在 SPL 程序中演示的 SQL 命令都是静态 SQL：必须先知道完整的命令（变量除外）并将其编码到程序中，然后程序本身才能开始执行。因此，通过使用动态 SQL，执行的 SQL 可在程序运行时发生更改。此外，动态 SQL 是唯一可从 SPL ...
SQL 审计
关键词 选择需要查看的 SQL 语句中可能存在的关键词。可填写多个关键词，关键词之间可为“和”或“且”的关系。时间范围 可选择近五分钟、半小时、一小时、六小时或其他自定义时间区间。时间范围跨度不能超过 6 小时。用户名 填写需要查看...
安全审计
数据库自治服务DAS 提供安全审计功能，可以自动识别高危操作、SQL注入、新增访问等风险。本文介绍如何在SQL洞察和审计功能中进行安全审计。前提条件 数据库实例为：RDS MySQL PolarDB MySQL版 已在DAS中接入对应的数据库实例，并且接入状态...
使用Java SDK创建定时SQL任务
metric2metric：时序库导入时序库，即表示源MetricStore中的数据通过定时SQL处理后将存储到目标MetricStore中。fromTimeExpr@m-12s SQL时间窗口开始表达式。更多信息，请参见 时间表达式语法。toTimeExpr@m SQL时间窗口结束表达式。更多...
dbms_sql.add_trace
语法 dbms_sql.add_trace('<schema>','<query>')说明 执行该存储过程后，SQL语句中的常量会被自动模板化，匹配该模板的SQL语句会被SQL Trace功能跟踪。参数说明 参数 说明 schema Schema名称。query 具体的SQL语句。注意事项 当在主节点...
微软云数据源SQL Server
本文为您介绍新建SQL Server类型...将SQL Server数据源中的数据表或自建的自定义SQL添加到Quick BI，请参见 创建并管理数据集。添加可视化图表并分析数据，请参见 新建仪表板 和 可视化图表概述。钻取并深度分析数据，请参见 钻取设置与展示。
查找最耗费资源的 SQL（Top SQL）
SQL 优化是数据库优化的手段之一，而为了达到 SQL 优化的最佳效果，您首先需要了解最消耗资源的 SQL（Top SQL），例如 IO 消耗最高的 SQL。数据库资源分为多个维度，包括CPU、内存、IO 等，为能够从各个维度层面查找最消耗数据库资源的 SQL...
慢 SQL 监控
数据访问代理中，慢 SQL 监控 是通过 阿里云日志服务 SLS 收集数据访问代理实例的 SQL 执行日志，将日志存储到用户空间中，在收集到 SQL 数据后，以图表的方式展示出收集到的 SQL 详情。其中，慢 SQL 是指执行耗时大于等于 500ms 的 SQL。...
自动SQL限流
当数据库存在突发流量导致SQL并发量急剧上升、部分SQL占用大量数据库资源、或者大量未创建索引的SQL被调用等问题影响正常业务时，需要限制问题SQL的并发度，保障大部分的业务正常运转。数据库自治服务DAS支持自动SQL限流，会自动提取SQL...
SQL翻译
RDS PostgreSQL提供SQL翻译功能，支持将其他数据库引擎的SQL翻译成PostgreSQL的SQL，方便您使用RDS PostgreSQL。背景信息 SQL翻译目前仅支持将Oracle的SQL翻译成PostgreSQL的SQL。操作步骤 访问 RDS实例列表，在上方选择地域，然后单击目标...
自动SQL限流
当数据库存在突发流量导致SQL并发量急剧上升、部分SQL占用大量数据库资源、或者大量未创建索引的SQL被调用等问题影响正常业务时，需要限制问题SQL的并发度，保障大部分的业务正常运转。数据库自治服务DAS支持自动SQL限流，会自动提取SQL...
设置黑名单规则
即检测到符合黑名单中的SQL语句时，进行拦截。数据库账号名 否 需要应用当前规则的数据库账号名称。支持以下选项：所有数据库账号：表示当前规则对该集群中的所有数据库账号生效，此时右侧文本框无需填写任何内容。包含：表示当前规则仅对...
SQL查询
通过SQL查询功能，您可以对表格存储中数据进行复杂的查询和高效的分析。SQL查询在车联网场景中作为不同类型数据的统一查询接口。说明 关于SQL查询的更多信息，请参见 SQL查询。概述 SQL查询兼容MySQL的查询语法，同时提供基础的SQL DDL建表...
查询账单
包年包月的费用仅包括实例和存储空间费用，如果使用了只读实例、SQL洞察、收费性能监控、数据库代理，或备份空间过大，都会产生额外费用，您可以在 明细账单 中的 计费项 列查看。计费项的详细说明，请参见 计费项。按量付费、Serverless ...
2020年
2020-12-16 慢日志 2020年11月 引擎 功能名称 功能描述 发布时间 相关文档 RDS MySQL SQL洞察与审计 DAS的SQL洞察和审计融合了搜索、SQL洞察、安全审计三个功能，帮助您更好地获取SQL语句的具体信息、性能问题排查、识别高危风险来源等。...
配置循环SQL节点
任务流常量为固定值，在所有节点中都可使用，在SQL中的使用格式为${name}。单击 任务流变量 页签，配置任务流变量。配置方法，请参见 配置时间变量。单击 输入变量 页签，查看输入变量。在 循环SQL 节点配置页，配置如下信息。类别 配置项 ...
准备工作
步骤一：确认与获取 如果备份ECS实例中的数据库，需要为ECS实例安装阿里云云助手。ECS备份客户端需要和阿里云云助手配合使用。如果需要备份的ECS实例是2017年12月01日之前购买的，需要您自行安装云助手客户端。更多信息，请参见 安装云助手...
Hive SQL作业配置
hive-e {SQL CONTENT} 其中 SQL_CONTENT 为作业编辑器中填写的SQL语句。单击 确定。编辑作业内容。在 作业内容 输入框中填入Hive SQL语句。SQL语句示例。SQL语句最大不能超过64 KB。show databases;show tables;系统会自动为SELECT语句加上...
SQL查询
通过SQL查询功能，您可以对表格存储中数据进行复杂的查询和高效的分析。SQL查询在车联网场景中作为不同类型数据的统一查询接口。概述 SQL查询兼容MySQL的查询语法，同时提供基础的SQL DDL建表能力。对于已有数据表，通过执行CREATE TABLE一...
多元索引虚拟列
使用多元索引虚拟列功能时，您可以通过修改多元索引schema或者新建多元索引来实现新字段新数据类型的查询功能，而无需修改表格存储的存储结构及数据。说明 关于多元索引虚拟列的更多信息，请参见 虚拟列。注意事项 SQL查询目前不支持多元...
计划缓存(Auto Plan Cache)
获取Plan Cache中的缓存信息 SQL语句的执行计划存储在SQL Sharing模块中，您可以通过以下SQL语句在 INFORMATION_SCHEMA.SQL_SHARING 表中查询Plan Cache中的缓存信息。SELECT TYPE,REF_BY,SQL_ID,SCHEMA_NAME,DIGEST_TEXT,PLAN_ID,PLAN,...
- 产品推荐
- 这些文档可能帮助您