步骤一：创建SQL分析任务
本文介绍创建SQL分析任务的操作流程，以及SQL分析工作台的查询对象、SQL语句编写区域和操作栏的功能。前提条件 已购买物联网平台的企业版实例，具体操作，请参见 购买企业版实例。背景信息 您可以使用SQL分析工作台，配置SQL分析任务。更多...
逻辑数仓
展开数据源，双击数据源下的表名，可自动生成单表查询的三段式SQL，如 SELECT*FROM dblink1.schem1.table1 LIMIT 20，单击 执行 查询或手动输入三段式SQL查询并执行查询。单击 虚拟库 页签。在此页面，您可选择添加虚拟库，还可进行如下...
QueryEmbeddedInfo-获取组织嵌入配置
获取组织下的嵌入配置，包括最大嵌入数和已经嵌入数等。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 ...
Java UDF最佳实践
在代码编写页面，单击页面上方的 调度配置，配置调度参数，详情请参见 配置逻辑表调度属性 保存、提交和发布SQL任务。单击页面右上方的 图标，保存代码。单击页面右上方的 图标，提交代码。在 提交备注 对话框，填写备注信息。单击 确定并...
Java UDF最佳实践
（可选）调度运维 如果需要定期的运行SQL任务，则需要配置SQL任务的调度参数并发布至生产环境，参与生产环境的调度。在代码编写页面，单击页面上方的 调度配置，配置调度参数，详情请参见 调度配置。保存、提交和发布SQL任务。单击页面右...
设置黑名单规则
黑名单规则 Proxy提供的一种拦截能力，您可以通过配置黑名单规则来拦截指定类型的SQL语句或具体的SQL语句。当前支持通过以下三种方式配置黑名单规则：固定规则模式：在控制台设置的常见的黑名单规则模式，每一种规则可以设定对某个账号以及...
SQL审核最佳实践
数据管理DMS 的SQL审核功能，支持对SQL语句进行批量审核并提供优化建议，避免无索引或不规范的SQL语句，降低SQL注入风险。本文以对XML文件中多个SQL语句进行审核为例，向您展示配置SQL审核规则、审核目标文件中SQL语句的流程。背景信息 在...
SQL查询概述
Dataphin分析平台提供SQL查询功能，可在平台上创建SQL查询并编写SQL代码查询所需的数据，同时支持根据查询结果进行可视化统计与分析。应用场景 提取并下载数据：通过SQL查询可以对计算源中的数据进行提取、聚合、过滤、排序等操作，并支持...
SQL查询概述
Dataphin分析平台提供SQL查询功能，可在平台上创建SQL查询并编写SQL代码查询所需的数据，同时支持根据查询结果进行可视化统计与分析。应用场景 提取并下载数据：通过SQL查询可以对计算源中的数据进行提取、聚合、过滤、排序等操作，并支持...
超级SQL模式
开启超级SQL模式后，管理员和DBA在SQL Console中执行SQL语句，将不受安全规则的限制。例如禁止在SQL Console中执行DELETE语句、禁止在SQL Console中执行CREATE_INDEX语句等安全规则限制。前提条件 系统角色为管理员或DBA，关于用户角色信息...
报表嵌入的基础方案
展示型配置 嵌入后，是否携带当前仪表板的标题。安全认证类型 和 Ticket链接 选择Ticket认证并生成Ticket链接。您可以手动输入Ticket链接或者单击 快捷生成，生成Ticket。说明 在生成Ticket的界面，基础方案 仅支持设置 有效时长。若您购买...
步骤三：设置任务调度策略并发布
如果需要调整SQL分析任务输出的存储表的结构，且保留原已生成的数据存储表的数据，请重新创建并配置SQL分析任务。修改或删除已发布的SQL分析任务前，需先撤销该任务。仅可修改或删除状态为 未上线 和 已下线 的SQL分析任务。不可恢复已删除...
SQL窗口-关系型数据库
SQL窗口模块检测点 检测点 规则说明 基础配置项 规则集的基础配置，包括单次查询最大返回行数、结果集是否支持编辑、是否允许对敏感数据进行计算等。SQL执行数量规范 控制单次提交SQL的个数。DQL SQL规范 增加执行DQL SQL类型的限制。其他...
SQL Server逻辑备份
配置备份计划 本文以配置RDS SQL Server逻辑备份计划为例，介绍配置流程。登录 DBS控制台。单击左侧导航栏中的 备份计划，然后在上方选择目标地域。找到目标备份计划ID，单击右侧 操作 列下的 配置备份计划。在 配置备份源和目标 页面，...
任务编排之电商打标
配置条件表达式如下：选中 单实例SQL，配置单实例SQL节点。输入SQL语句如下：INSERT INTO `voucher_send_list`(`user_id`,`consumption_sum`,`quota`)SELECT*FROM(SELECT `user_id`,sum(count)AS consumption_sum,${Quota} FROM `...
开启SQL独享版
当您使用SQL分析时，如果数据量较大，SQL普通版无法在一次查询中完整扫描指定时间段内的所有日志，返回的结果可能不包括所有匹配的数据，增加Shard可以提升读写能力，但只对新写入的数据生效。您可以通过开启SQL独享版，增加计算资源，提升...
使用Kafka Connect将SQL Server数据同步至云消息队列 ...
cat inventory.sql|docker exec-i tutorial_sqlserver_1 bash-c '/opt/mssql-tools/bin/sqlcmd-U sa-P$SA_PASSWORD' 可选：如果您需要监听SQL Server中已有的数据表，请完成以下配置：执行以下命令开启CDC配置。开启CDC模板数据库。USE ...
SQL Server物理备份
数据库备份DBS提供全量备份、增量备份和数据恢复能力，本文介绍配置SQL Server物理备份的操作步骤。前提条件 数据库的版本为：SQL Server 2019、2017、2016、2014、2012、2008R2、2005、2000。说明 仅支持本地自建数据库和云服务器上的自建...
设置白名单规则
如果该SQL语句没有包含在白名单中，Proxy会进行记录和拦截，且执行结果如下：ERROR 1141(HY000):This SQL is rejected by SQL Firewall.Access denied for user 'xzh'@'x.x.x.x' to database 'xzh':This SQL is not in whitelist wl_test....
离线集成管道通道配置
数据库配置 SQL执行超时时长 应用于准备语句SQL和完成语句SQL的执行超时时长，任一SQL语句执行超过该时长则置任务失败。默认30分钟，最小值为1，最大值为2880分钟（48小时）。重要 输出组件所配置的查询超时优先于管道配置的查询超时时间。...
离线集成管道通道配置
数据库配置 SQL执行超时时长 应用于准备语句SQL和完成语句SQL的执行超时时长，任一SQL语句执行超过该时长则置任务失败。默认30分钟，最小值为1，最大值为2880分钟（48小时）。重要 输出组件所配置的查询超时优先于管道配置的查询超时时间。...
2020年
新功能 MaxCompute支持通过代码嵌入式UDF（Embedded UDF）将Java或Python代码嵌入SQL脚本。UDF（嵌入式）UDT示例 2020-07-23 MaxCompute的包年包月项目支持对指定SQL作业使用按量计费资源。新功能 MaxCompute管家支持设置包年包月项目使用...
新功能发布记录
02-20【新功能/规格】RDS SQL Server Serverless公测活动结束，正式版上线 01月 类别 功能名称 功能描述 发布时间 相关文档 优化 变更配置 对于驱动已经更新的RDS SQL Server实例支持无损扩容，您在仅变更存储类型等级（PL等级）和存储空间...
SQL结果集导出
前提条件 数据库类型如下：数据库类型 关系型数据库：MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB分布式版、其他来源MySQL SQL Server：RDS SQL Server、MyBase SQL Server、其他来源SQL Server PostgreSQL：RDS PostgreSQL...
新功能发布记录
配置ECS远程命令节点 05月 功能名称 变更类型 功能描述 相关文档 任务编排中新增Lindorm Spark节点 新增 通过Lindorm计算引擎高效地完成分布式计算任务，满足用户在数据生产、交互式分析、机器学习和图计算等场景中的计算需求。配置Lindorm...
基本语句
正如以前所解释的，这样一个语句中的表达式被以一个 SQL SELECT 命令被发送到主数据库引擎的方式计算。该表达式必须得到一个单一值（如果该变量是一个行或记录变量，它可能是一个行值）。该目标变量可以是一个简单变量（可以选择用一个块名...
新建SPARK_SQL任务
前提条件 项目的Hadoop计算源的Spark SQL服务配置已开启Spark SQL任务。更多信息，请参见 创建Hadoop计算源。操作步骤 在Dataphin首页，单击顶部菜单栏中的 研发。默认进入 开发 页面。按照下图操作指引，进入 新建SPARK_SQL任务 对话框。...
什么是ETL
说明文档 配置文档 通过DAG模式配置ETL任务 配置流程 配置源库信息 配置转换组件 配置目标库信息 新建连接模板 通过Flink SQL模式配置ETL任务 在DTS 迁移或 同步任务中配置ETL 最佳实践 使用ETL分析实时订单 DTS任务中配置ETL典型应用
流式ETL
说明文档 配置文档 通过DAG模式配置ETL任务 配置流程通过DAG模式配置ETL任务 配置源库信息 配置转换组件 配置目标库信息 新建连接模板 通过Flink SQL模式配置ETL任务 在DTS迁移或同步任务中配置ETL 最佳实践 使用ETL分析实时订单 DTS任务中...
SQL审计
SQL审计功能可以实时记录数据库DML和DDL操作信息，并提供数据库操作信息的检索功能。使用限制 SQL审计日志不记录以下操作：INSERT INTO VALUES REPLACE INTO VALUES UPSERT INTO VALUES 开启/关闭SQL审计 登录 云原生数据仓库AnalyticDB ...
常见问题
本文主要介绍在操作分布式事务过程中的常见问题。SOFAStack 是否可以部署在虚拟机、物理机上？可以，SOFAStack 部署支持物理机、虚机机 VM。SOFAStack 当前是否只支持阿里云飞天 ACK？SOFAStack 部署支持多云异构、目前支持华为云、开源 ...
【通知】SQL洞察和审计中PostgreSQL的审计日志输出...
同时，DAS还在可能的情况下将参数直接嵌入到SQL语句中，以便恢复成完整的SQL，从而提供更全面的信息。说明 尽管DAS的目标是为您呈现完整的SQL语句，但需要注意的是，并非所有原始SQL都能完全按照新格式重构。在某些情况下，当SQL语句的结构...
风险审计报告
说明 该评估项依赖于SQL审核优化建议，具体SQL规范配置信息，请参见 配置SQL审核优化建议。自建MySQL、RDS MySQL、PolarDB MySQL版、AnalyticDB MySQL版、PolarDB分布式版。元数据 评估该实例下所有数据库的表结构存在的风险。例：整型自增...
Streaming SQL作业配置
本文介绍Streaming SQL作业配置的操作步骤。背景信息 Streaming SQL的详细信息请参见 Spark Streaming SQL。在Streaming SQL作业配置过程中，您需要设置依赖库。以下列出了Spark Streaming SQL提供的数据源依赖包的版本信息和使用说明，...
准备工作
在SQL Server网络配置的MSSQLSERVER的协议页签，右键单击TCP/IP，单击启用。以SQL Server 2008 R2为例。重启SQL Server服务器。后续步骤 注册SQL Server（ECS）或 注册SQL Server（本地）相关文档 什么是云备份 数据库备份常见问题 备份SQL...
SQL其他常见问题
本文为您介绍在MaxCompute中执行SQL时，与数据类型、SQL限制等相关的常见问题。问题类别 常见问题 数据类型 MaxCompute的时间类型字段是否可以不带时分秒？在执行MaxCompute SQL过程中，对DOUBLE类型的数据进行等值比较，为什么结果不符合...
Persist plan and Query-Blocker
语法结构 计算SQL参数化后的Pattern和Sign：PARAMETERIZE$sql 针对指定SQL Pattern，添加Hints：/*+hints*/PERSIST_PLAN$sql 针对指定SQL Pattern，删除Hints：DELETE_PLAN$sql 或 DELETE_PLAN_BY_SIGN$Sign 查询指定SQL是否配置过Hints：...
开启ORC查询加速
作业详情请参见 Spark Shell作业配置 或 Spark SQL作业配置。检查开启情况。登录Spark History Server UI页面。在Spark的SQL页面，查看执行任务。当出现JindoDataSourceV2Scan时，表示开启成功。否则，请排查 步骤1 中的操作。提升Presto...
开启ORC查询加速
作业详情请参见 Spark Shell作业配置 或 Spark SQL作业配置。检查开启情况。登录Spark History Server UI页面。在Spark的SQL页面，查看执行任务。当出现JindoDataSourceV2Scan时，表示开启成功。否则，请排查 步骤1 中的操作。提升Presto...
如何扩容RDS实例
通过变更配置扩容RDS实例 RDS MySQL变更配置 RDS PostgreSQL变更配置 RDS SQL Server变更配置 RDS MariaDB变更配置 通过自动扩容功能扩容RDS实例 RDS MySQL 设置性能自动扩容 设置存储空间自动扩容 RDS PostgreSQL 设置存储空间自动扩容
- 产品推荐
- 这些文档可能帮助您