如何发布和调用JDBC数据服务
queryValues：所有查询参数的结构体，每个子结点的“SQL模板参数”对应一个SQL模板的MyBatis参数，“发布入参名”对应客户端发起请求时传入的参数名。此结构体入参结点不可删除。在 接入协议 页面编辑SQL结果参数。CSB根据结果参数配置自动...
基本概念
本文为您介绍DataWorks中，工作空间、业务流程、解决方案、组件、任务、实例、业务日期、定时时间、提交、脚本开发、资源、函数和输出名称等基本概念。工作空间 工作空间 是DataWorks管理任务、成员，分配角色和权限的基本单元。工作空间...
表删除，更新和合并
如果您知道几天之内可能会得到重复的记录，则可以通过按日期对表进行分区，然后指定要匹配的目标表的日期范围来进一步优化查询。SQl%sql MERGE INTO logs USING newDedupedLogs ON logs.uniqueId=newDedupedLogs.uniqueId AND logs.date>...
死锁
您可以执行如下操作：选择 起始日期 和 结束日期，单击 查找 显示指定时间段的死锁信息。说明 指定的时间间隔不能超过30天。单击 近一天、近一周、近一月 快捷查询所选时间段的死锁信息。将鼠标移动到特定的时间点，可查询该时间点内发生的...
V5.4.x系列实例版本说明
修复广播表上包含子查询的可下推单表DELETE，子查询中指定库名导致报错的问题。发布日期：2021-07-05 大版本：V5.4.11 小版本：16251897 类别 说明 新增 支持select into outfile语句，可以按指定分隔符和格式导出数据。支持show table ...
GetFullRequestStatResultByInstanceId-按照SQL ID...
访问级别：是指每个操作的访问级别，取值为写入（Write）、读取（Read）或列出（List）。资源类型：是指操作中支持授权的资源类型。具体说明如下：对于必选的资源类型，用背景高亮的方式表示。对于不支持资源级授权的操作，用 全部资源 ...
死锁
您可以执行如下操作：选择 起始日期 和 结束日期，单击 查找 显示指定时间段的死锁信息。说明 指定的时间间隔不能超过30天。单击 近一天、近一周、近一月 快捷查询所选时间段的死锁信息。将鼠标移动到特定的时间点，可查询该时间点内发生的...
数据源管理
转为SQL查询 说明 数据可由表格模式转为SQL查询模式，不支持回滚。选择任一数据，单击 图标下的 转为SQL查询，将当前数据转为SQL查询模式。单击 图标，查看当前数据的查询SQL语句，您可以根据所需自定义编辑SQL查询语句。确认SQL语句无误后...
云端运行日志转储
开通云端运行日志转储 您需为每个待开通日志转储功能的产品，逐一执行开通操作。登录 物联网平台控制台。在 实例概览 页签的 全部环境 下，找到对应的实例，单击实例卡片。在左侧导航栏，选择 监控运维>日志服务。选择产品，单击 云端运行...
调整实例sql_mode参数
这在某些特定的业务场景下可能是需要的，例如需要记录一些无效日期的情况。重要 ALLOW_INVALID_DATES 参数值在某些情况下可能会引起数据一致性问题，因此在使用时需要谨慎考虑，并确保了解其使用场景和潜在影响。ANSI_QUOTES 支持 支持 ...
GetQueryOptimizeDataStats-获取查询治理模板数据
访问级别：是指每个操作的访问级别，取值为写入（Write）、读取（Read）或列出（List）。资源类型：是指操作中支持授权的资源类型。具体说明如下：对于必选的资源类型，用背景高亮的方式表示。对于不支持资源级授权的操作，用 全部资源 ...
增量查询
Transactional Table 2.0支持增量写入和存储，最重要的一个考虑就是支持增量查询以及增量计算优化，为此，专门设计开发了新的SQL增量查询语法来支持近实时增量处理链路。增量查询的处理过程 增量查询Transactional Table 2.0的处理过程如下...
扫描（Scan）查询概述
日志服务扫描（Scan）查询功能支持免配置索引进行目标字段的扫描，用于查询相关日志。本文介绍扫描查询功能的相关信息。背景信息 日志服务基于索引技术，提供快速查询日志功能，但在某些场景下可能会遇到如下限制，无法创建或使用索引。为...
外部表常见问题
其原理是通过属性值调整执行计划，控制每个Reducer写入外部表OSS的数据大小，使得OSS Store文件不超过3 GB的限制。set odps.sql.mapper.split.size=256;调整每个Mapper读取数据的大小，单位是MB。set odps.sql.reducer.instances=100;调整...
GetQueryOptimizeDataTrend-获取查询治理趋势数据
访问级别：是指每个操作的访问级别，取值为写入（Write）、读取（Read）或列出（List）。资源类型：是指操作中支持授权的资源类型。具体说明如下：对于必选的资源类型，用背景高亮的方式表示。对于不支持资源级授权的操作，用 全部资源 ...
Proxool 连接池连接 OceanBase 数据库示例程序
本文将介绍如何使用 Proxool 连接池、MySQL Connector/J 和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入、删除、更新和查询数据等。点击下载 proxool-mysql-client 示例工程 前提条件 您已安装 OceanBase ...
TF-IDF
每个核心内存 单个节点内存大小，单位为MB。方式二：PAI命令方式 使用PAI命令方式，配置该组件参数。您可以使用SQL脚本组件进行PAI命令调用，详情请参见 SQL脚本。PAI-name tfidf-project algo_public-DinputTableName=rgdoc_split_triple_...
内建函数常见问题
如何将一个JSON字符串中的每个Key当做一个字段？如何将JSON字符串转换为ARRAY格式？其他函数 MySQL的IFNULL函数对应MaxCompute的哪个函数？如何实现一行转多行？使用COALESCE函数时，报错Expression not in GROUP BY key，如何解决？在使用...
公告
那么您需要在运行含有UDF的SQL任务前，将上述的两个参数替换为如下新参数即可，详情请参见 通过UDF访问VPC网络资源。set odps.session.networklink=your_networklink_name 外部表场景 若您在建表DDL语句中加入VPC开关、访问的VPC、对应的IP...
内建函数概述
函数类型 说明 日期与时间函数 支持处理DATE、DATETIME、TIMESTAMP等日期类型数据，实现加减日期、计算日期差值、提取日期字段、获取当前时间、转换日期格式等业务处理能力。数学函数 支持处理BIGINT、DOUBLE、DECIMAL、FLOAT等数值类型...
最佳实践：SQL组件
输入参数 topn：为该参数指定按照销售额正序排序，每个区域的城市排行取前多少名。示例取前10名。输出参数 myoutput：为该参数指定加工输出的结果的表名称 company_sales_top_n。输出表的结构请参见 创建目标输出表。后续步骤 当您完成当前...
DescribeSQLLogRecords-查询实例的SQL审计日志
访问级别：是指每个操作的访问级别，取值为写入（Write）、读取（Read）或列出（List）。资源类型：是指操作中支持授权的资源类型。具体说明如下：对于必选的资源类型，用背景高亮的方式表示。对于不支持资源级授权的操作，用 全部资源 ...
DescribeSQLLogRecords-查询实例的SQL审计日志
访问级别：是指每个操作的访问级别，取值为写入（Write）、读取（Read）或列出（List）。资源类型：是指操作中支持授权的资源类型。具体说明如下：对于必选的资源类型，用背景高亮的方式表示。对于不支持资源级授权的操作，用 全部资源 ...
DescribeSQLLogRecords-查询实例的SQL审计日志
访问级别：是指每个操作的访问级别，取值为写入（Write）、读取（Read）或列出（List）。资源类型：是指操作中支持授权的资源类型。具体说明如下：对于必选的资源类型，用背景高亮的方式表示。对于不支持资源级授权的操作，用 全部资源 ...
通过SQL加工创建离线视图
参数 描述 加工逻辑（SQL）请输入对数据源进行加工的SQL代码。SQL代码说明如下：通过SQL加工的方式构造 主体 与 指标 间的映射关系。SELECT查询至少存在两个字段。通常会把第一个字段解析为“主体”，例如：SQL中的'subjectId'；后续的若干...
通过跨库Spark SQL任务将数据同步到OSS
说明 自由操作模式的实例，每个工单最大生成数据行数为100万行。构建商品表t_product的数据，数据量为1万行。新增跨库Spark SQL任务 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 集成与开发（DTS）>数据开发>任务编排。新增任务流。单击 ...
任务编排
本文介绍如何使用 数据管理DMS 任务编排的单实例SQL节点，将源表中6个月前的数据（历史数据）迁移（归档）至目标表中，并删除源表中已迁移的数据。应用场景 DMS 的任务编排功能提供了强大的自动化编排和调度能力，满足数据同步、数据归档、...
应用总览
主要监控指标如下：Error 系统错误量 PV 页面访问量 Service 被外部调用的服务量 SAL 调用外部的服务量 DAL 数据库访问 SQL 耗时监测 系统指标监控 可用性（端口）MOSN 指标 设置查询条件 支持设置如下查询条件。输入或重置过滤的正则表达...
物化视图
随着MaxCompute的深入使用，会出现对MaxCompute的表有很多重复查询的情况，并且不同使用者之间互相不知道其他人也在使用同样的计算逻辑。为了提高用户的计算效率、减少重复计算，同时加速用户计算。MaxCompute提供物化视图智能计算加速，为...
SQL洞察
SQL洞察是一种可视化的分析工具和技术，用于深入了解SQL查询的行为和性能特点，可以帮助数据库管理员和开发者了解SQL查询的具体执行情况，如查询的耗时、资源占用等详细信息。通过SQL洞察功能，可以实时监控SQL的运行状态，并基于这些数据...
GetPfsSqlSummaries-查询按照SQL ID维度统计的全量...
访问级别：是指每个操作的访问级别，取值为写入（Write）、读取（Read）或列出（List）。资源类型：是指操作中支持授权的资源类型。具体说明如下：对于必选的资源类型，用背景高亮的方式表示。对于不支持资源级授权的操作，用 全部资源 ...
Spark SQL作业配置
cli options 示例如下：e<quoted-query-string>：表示运行引号内的SQL查询语句。f<filename>：表示运行文件中的SQL语句。SQL_CONTENT 填写的SQL语句。单击 确定。编辑作业内容。在 作业内容 中，输入Spark SQL语句。示例如下。SQL语句示例...
Spark SQL
登录 DLA控制台，单击左侧导航栏的 SQL执行，您可以看到所有数据湖中的数据库和表结构，对表进行在线分析查询，以及管理子用户对库表的权限，如下图所示。纯SQL作业 DLA Spark支持直接在控制台写Spark SQL。无需用户打包jar包或者写python...
云原生数据仓库ADS的审计事件
DescribeDiagnosisMonitorPerformance 查询集群查询情况，展示每个SQL的运行耗时、查询时间等信息。DescribeDiagnosisRecords 查询集群SQL的运行明细。DescribeDiagnosisSQLInfo 查询SQL的执行详情。DescribeDownloadRecords 查询集群查询...
SQL Workbench/J
背景信息 SQL Workbench/J是一款免费的、跨平台的SQL查询分析工具，您可以使用SQL Workbench/J通过PostgreSQL驱动连接Hologres进行数据开发。操作步骤 启动SQL Workbench/J，新建至Hologres的连接。配置连接信息。参数说明如下表所示。参数...
DownloadDiagnosisRecords-下载诊断记录
访问级别：是指每个操作的访问级别，取值为写入（Write）、读取（Read）或列出（List）。资源类型：是指操作中支持授权的资源类型。具体说明如下：对于必选的资源类型，用背景高亮的方式表示。对于不支持资源级授权的操作，用 全部资源 ...
Quick BI中加速对SQL语法的要求
加速引擎的逻辑是：数据从MaxCompute同步到Presto中，然后用相同SQL在Presto中查询，所以需要使用二个环境都支持的SQL语法。Presto是一个facebook开源的分布式SQL查询引擎，适用于交互式分析查询，数据量支持GB到PB字节。适用于 Quick BI
get_project_logs
调用CLI命令查询目标Project下的日志，该命令是Project级别的SQL查询命令。注意事项 在使用CLI命令之前，您需要注意以下事项：已安装日志服务CLI，并完成配置。具体操作，请参见 安装CLI 和 配置CLI。已创建日志服务Project、Logstore并...
SQL窗口-MongoDB数据库
数据管理DMS提供的SQL窗口支持关系型数据库和非关系型数据库，安全规则的定义和分类各不相同。本文介绍MongoDB数据库的SQL窗口安全规则。SQL窗口检测点 检测点 描述 基础配置项 规则集的基础配置，包括单次查询最大返回行数和结果集是否...
SQL语句示例
本模块主要涉及面向数据库执行查询的SQL。SQL语句编写规则与示例 规则介绍 SQL对大小写不敏感，大小写均支持。SELECT语句：用于从数据库中选取数据。SELECT DISTINCT语句：用于返回唯一不同的值。WHERE语句：用于过滤记录。AND&OR 运算符：...
- 产品推荐
- 这些文档可能帮助您