湖仓版作业调度

已有的SQL语句是在 作业编辑器>SQL开发 保存的SQL模板。自定义参数 自定义业务参数,作为变量替换到SQL语句中。例如SQL语句为 select*from${table};可设置自定义参数的prop为customer,value为${table},那么执行的SQL等同于 select*from...

计算费用(按量付费)

实际SQL开发中,调用 SQLCostTask 接口估算SQL费用。详情请参见 ODPS SDK。在实际生产环境中,正式上线一个分析SQL前,通过Cost SQL命令估算该SQL作业的费用。详情请参见 计量预估。说明 预估的费用不一定等于真实费用,真实费用以最终账单...

镜像管理

场景实践 在SQL UDF开发中使用镜 像 以下以使用Pandas实现一个列求和的UDF为例,为您介绍如何在SQL UDF开发中使用镜像。编写Python UDF脚本,并将其保存为 sum_pandas.py 文件。脚本示例如下:from odps.udf import annotate import pandas...

开发ODPS SQL任务

编辑代码:进阶示例 更复杂的ODPS SQL任务示例如下:与标准SQL的主要区别及解决方法 MaxCompute SQL中的关联操作 JSON数据从OSS迁移至MaxCompute 基于GitHub公开事件数据集的离线实时一体化实践 基于MaxCompute UDF将IPv4或IPv6地址转换为...

SQL语法指南

统一服务在支持ANSI SQL标准语法的DML(data manipulation language)基础上,针对API开发过程中SQL语法使用的具体需求,定义了自己的扩展,以支持参数声明、动态SQL、范围参数生成等用法。本文为您介绍SQL语法指南。使用限制 仅支持SELECT...

开发ODPS SQL任务

编辑代码:进阶示例 更复杂的ODPS SQL任务示例如下:与标准SQL的主要区别及解决方法 MaxCompute SQL中的关联操作 JSON数据从OSS迁移至MaxCompute 基于GitHub公开事件数据集的离线实时一体化实践 基于MaxCompute UDF将IPv4或IPv6地址转换为...

全局变量管理

查询全局变量 示例:在 SQL 开发窗口,查询数据源 mysql420 下数据库变量。在 SQL 开发窗口,单击 运维管理>全局变量。选择数据源 mysql420,并单击 确定。在 全局变量 页面,可以查询数据源 mysql420 下所有数据库变量信息。编辑全局...

自动SQL优化

单击目标事件的 详情,在 慢SQL诊断(诊断优化)的 根因分析和建议 页签查看 问题SQLSQL优化、索引推荐 和 语句优化 的详细信息。相关文档 如果您需要手动优化目标SQL时,请参见 SQL优化。相关API API 描述 ...

其它操作

本文为您介绍使用MaxCompute SQL开发...ID=20150715113033121xxxxxxx UDF:0 Complexity:1.0 Input:0 Bytes 参数说明如下:UDF:表示SQL中运行的UDF个数。Complexity:表示SQL的复杂度,详情请参见 SQL复杂度。Input:表示SQL扫描的数据量。

回收站管理

查询回收站 示例:在 SQL 开发窗口,查询数据源 mysql420 下的数据库对象。在 SQL 开发窗口,单击 运维管理>回收站。选择数据源 mysql420,并单击 确定。在 回收站 页面,可以查询数据源 mysql420 下所有被删除的数据库对象。信息 说明...

SQL 计划任务

信息项 示例值 所属数据源 mysql_4.2.0 数据库名称 odc_test 表名称 employee 在 SQL 开发窗口,单击 任务>SQL 计划>新建 SQL 计划。在 新建 SQL 计划 面板,输入以下信息。信息项 说明 数据库 选择数据库。SQL 内容 支持两种指定 SQL ...

变量和密钥管理

SQL作业 支持SQL作业开发中使用变量,并在作业启动时可再次修改变量值。单击Flink开发控制台左侧导航栏的 SQL开发。在目标作业草稿的SQL编辑器中使用${变量名} 格式创建变量,示例如下。在WITH参数中使用时,需要使用单引号,'${变量名} '...

会话管理

查询会话 示例:在 SQL 开发窗口,查询数据源 obmysql4.2.0 下数据库 odc_test 的所有会话信息。信息项 示例值 所属数据源 obmysql4.2.0 数据库名称 odc_test 在 SQL 开发窗口,单击 运维管理>会话管理。选择数据源 obmysql4.2.0,并单击...

Quick BI创建SQL数据集,能够执行但是保存报错

问题原因 用户SQL中参数或者占位符格式填写错误。参数:WHERE条件中添加${物理字段名:参数变量名};占位符:SQL中替换字符${替换的字符}。在查询控件中可引用。解决方案 按照正确的格式使用占位符或者参数。适用于 Quick BI

Dataphin同样的SQL脚本在开发环境执行正常,在生产...

问题原因 开发环境除了建表语句或者事务这种等特殊场景,其他SQL语句以分号结尾算是一个脚本任务;一个脚本页面可能有多个脚本任务,任何一个脚本任务语句超限都会报错。生产环境一个脚本页面全部脚本算是一个脚本任务。所以有时开发环境...

Dataphin的sql代码任务SQL语句数有什么限制

产品名称 Dataphin 产品模块 代码任务 概述 本文为您介绍在Dataphinsql代码任务的限制 问题描述 您的sql代码任务在开发环境可以执行,但在生产环境却执行失败是什么原因?Not Support:sql count>=100 in a script 问题原因 Dataphin对...

SQL开发编辑器

如果您在SQL中自定义的LIMIT行数小于您在控制台选择的LIMIT行数,导出结果的行数以SQL中自定义的LIMIT行数为准,反之,以控制台选择的LIMIT行数为准。导出查询结果:在 执行结果 页签的右上角单击 下载 按钮,可导出查询结果。保存SQL脚本 ...

内置的安全审计规则

运维人员风险操作 DBA权限授权(ORACLE语法) 运维人员风险操作 访问ALL_TABLES表的行为 运维人员风险操作 访问ALL_TAB_COLUMNS表的行为 运维人员风险操作 执行FLUSH_PRIVILEGES操作 运维人员风险操作 查询INFORMATION库表 ...

安装宽表SQL Driver

SQL的开发与测试 需要编写在应用逻辑的SQL语句建议在开发阶段先进行充分验证后再固化在业务逻辑。面向开发阶段的SQL验证与测试,Lindorm提供了一个可交互式的SQL命令行工具 lindorm-cli 帮助开发人员。关于lindorm-cli的安装与使用,请...

处理慢SQL问题

操作视频 解决方案 您可以通过DAS从以下三个方面来解决慢SQL问题:查看并优化单个实例的慢SQL 查询治理所有实例上的慢SQL 开启自动SQL优化 查看并优化单个实例的慢SQL 通过DAS慢日志分析功能查看慢SQL趋势、统计和明细,具体请参见 慢日志...

使用SQL开发编辑器执行内置测试脚本

通过 云原生数据仓库AnalyticDB MySQL版 湖仓版(3.0)的内置数据集可以...在左侧导航栏,单击 作业开发>SQL开发。在 脚本 页签,双击脚本并在 SQLConsole 运行SQL语句对集群进行测试。说明 内置数据集中表详情,请参见 内置数据集表详情。

Flink SQL常见问题和解法

相关文档 SQL常见问题 SQL与Catalog报错问题

Quick BI自定义SQL创建数据集预览报错“INTERNAL:java...

问题描述 Quick BI自定义SQL创建数据集预览报错:INTERNAL:java.sql.SQLException:[30013,2022010912410819216819900303151881170]:Can not cast '00628ee37d8a9f8879d' to DOUBLE 问题原因 用户自定义SQL中写了中文逗号,引起数据库抛错。...

HoloStudio快速入门

HoloStudio开发 进入HoloStudio之后,即可进行Hologres开发SQL Console纯SQL开发,详情请参见 SQL Console。表管理可视化UI一键建表、数据预览,详情请参见 创建及管理内部表。一键创建MaxCompute外部表、查询数据,详情请参见 创建及...

SQL 窗口规范

背景信息 系统管理员授予用户开发规范操作权限后,用户可以在 安全规范 的 环境 管理 SQL 窗口规范。用户在 SQL 窗口执行 SQL 语句时,ODC 会根据配置的 SQL 窗口规范检查 SQL 语句。本篇文档旨在介绍如何编辑和执行 SQL 窗口规范。...

Dataphin如何查看SQL计算任务的运行记录

概述 Dataphin某一时间开发环境在SQL计算任务运行了一段SQL,如何查看该段SQL的运行记录。详细信息 在开发-运行记录页面可以查看资产数据预览、数据处理、建模数据预览以及OpenAPI数据查询的运行记录,记录以天为粒度进行划分。相关文档 ...

Dataphin中SQL代码任务提交的时候报错“Column Not ...

问题描述 Dataphin中SQL代码任务提交的时候报错“Column Not Found”。select sum(inatmoney)from${abc_group_ods}.s_abc 问题原因 检查元数据,开发生产环境都存在表s_abc。将项目名变量替换为开发项目名,也是报一样的错误。对开发环境该...

微软云数据源SQL Server

添加微软云SQL Server白名单操作请参见 Azure 虚拟机 SQL Server 的安全注意事项。验证数据源连接并创建数据源。登录 Quick BI控制台。按照下图指引添加数据源 从 创建数据源入口 进入创建数据源界面。选择SQL Server数据源。数据源类型...

SQL数据类型映射

SQL中所用字段对应于表中同名字段,两者的数据类型必须相匹配。本文介绍了SQL中字段数据类型、数据表中字段数据类型和多元索引中字段数据类型的映射关系。使用SQL过程中请确保SQL中和数据表中字段数据类型相匹配。重要 SQL中主键列的数据...

消费监控告警

只对单SQL消费限制不能完全预防意料之外的高额账单,您可能还需要同时使用 实时累计消费监控告警,实时监控Project中SQL和MapReduce任务的累计消费金额。实时累计消费监控告警 项目(Project)为单位,累计统计每个执行成功的SQL/MR/Spark/...

XIHE BSP SQL开发

在左侧导航栏,单击 作业开发>SQL开发。在 SQLConsole 窗口,选择Job型资源组和XIHE引擎。输入要执行的SQL语句,并单击 执行SQL。等待SQL执行完成后,下方 执行结果 页签会显示结果。在 执行记录 页签,可单击 操作 列的 结果 下载执行结果...

概述

严重的慢SQL发生后可能会拖垮整个数据库,对线上业务产生阻断性的风险,对于线上常见的慢SQL问题,MSE服务治理提供了场景化的解决方式。具体详情,请参见 慢SQL治理。数据库层面的数据路由灰度能力,是全链路灰度、开发环境隔离等场景落地...

Spark SQL执行方式

批处理方式执行的SQL中如果包含SELECT语句,这些SELECT语句的执行结果会抽样一部分打印到日志中,您可以在日志中查看。启动方法 在 SQLConsole 窗口,选择Job型资源组和Spark引擎。执行SQL语句时,在弹窗中选择 继续执行。交互式执行 注意...

SQL结果集导出

在顶部菜单栏,选择 数据库开发>数据导出>SQL结果集导出。说明 对于非NoSQL类型的数据库,您也可以在SQL窗口执行SQL语句后,在执行结果区域选择 导出文件>导出更多数据,创建数据导出工单。配置数据导出工单的相关信息。说明 以管控...

SQL 编辑和执行

信息项 示例值 项目名称 odc_4.2.0 所属数据源 mysql410 数据库名称 odc_test 表名称 employee 在项目 odc_4.2.0 单击 登录数据库,进入 SQL 开发窗口。在 SQL 窗口,编辑 SQL 语句以创建表 employee。CREATE TABLE odc_test.employee...

SQL审核最佳实践

本文以对XML文件中多个SQL语句进行审核为例,向您展示配置SQL审核规则、审核目标文件中SQL语句的流程。背景信息 在项目正式发布到线上之前,需要对涉及的SQL进行全面的审核,避免不符合数据库开发规范的SQL发布到线上影响生产服务。而所有...

SQL限流(rds_ccl)

query_id 包含有SQL中对象的信息(即 oid 信息),不同数据库下的同名表不是同一个对象,不同schema下的同名表也不是同一个对象。所以相同的SQL,如果其包含的查询对象不同,那么 query_id 就不相同。如果是SQL中的访问对象的是全局表,...

SQL限流(rds_ccl)

query_id 包含有SQL中对象的信息(即 oid 信息),不同数据库下的同名表不是同一个对象,不同schema下的同名表也不是同一个对象。所以相同的SQL,如果其包含的查询对象不同,那么 query_id 就不相同。如果是SQL中的访问对象的是全局表,...

后续指引

介绍:SQL SQLML PyODPS MapReduce Mars Spark Graph 外部表 Java SDK Python SDK JDBC 实践:数据开发最佳实践 常见问题:错误码 SQL常见问题 PyODPS常见问题 MapReduce常见问题 Spark常见问题 外部表常见问题 Java SDK常见问题 Python ...

SQL优化技术

联动性:对于复杂的线上问题,有时需要综合治理,如突发的恶性慢SQL问题,DAS的自动SQL限流,自动SQL优化需要形成联动效应,实现问题的标本兼治。规模性:如何构建具备足够扩展性的服务架构,以支撑几十万级、百万级的大规模自动优化。实现...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
移动开发平台 mPaaS 云原生数据仓库AnalyticDB MySQL版 大数据开发治理平台 DataWorks 实时计算 Flink版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用