Delta Lake 快速入门
创建表 若要创建一个delta表，可以使用现有的Apache Spark SQL代码，也可以将parquet、csv、json等数据格式转换为delta。对于所有文件类型，您将文件读入DataFrame并将格式转为delta：Python%pyspark events=spark.read.json("/xz/events_...
从Logstore到MetricStore
SQL代码 显示您在步骤 4 中输入的查询和分析语句。此处的预览操作与步骤 4 中的操作一致，用于验证您所使用的查询和分析语句是否正确，执行结果是否有数据。SQL任务运行时，日志服务 将执行该查询和分析语句分析数据。SQL配置 指标列 日志...
从MetricStore到MetricStore
SQL代码 显示您在步骤 4 中输入的查询和分析语句。此处的预览操作与步骤 4 中的操作一致，用于验证您所使用的查询和分析语句是否正确，执行结果是否有数据。SQL任务运行时，日志服务将执行该查询和分析语句分析数据。重要 导入MetricStore...
开发ODPS SQL任务
SQL开发 SQL代码大小不能超过 128KB，SQL命令条数不能超过 200条。查询结果 仅支持select和with起始的SQL语句输出格式化的结果集，且最多能显示 10000行 结果数据。注意事项 DataWorks上不同环境运行 关键字（set、use）相关语句时，执行...
开发ODPS SQL任务
SQL开发 SQL代码大小不能超过 128KB，SQL命令条数不能超过 200条。查询结果 仅支持select和with起始的SQL语句输出格式化的结果集，且最多能显示 10000行 结果数据。注意事项 DataWorks上不同环境运行 关键字（set、use）相关语句时，执行...
连接并使用实例
搜索引擎 通过solr Shell连接搜索引擎 通过Search Shell连接并使用搜索引擎 通过SQL连接搜索引擎 通过SQL连接并使用搜索引擎 文件引擎 通过HDFS Shell连接文件引擎 通过HDFS Shell连接并使用文件引擎 通过开源HDFS客户端连接文件引擎 通过...
查看统计图表
SQL代码 显示您在步骤 4 中输入的查询和分析语句。此处的预览操作与步骤 4 中的操作一致，用于验证您所使用的查询和分析语句是否正确，执行结果是否有数据。SQL任务运行时，日志服务 将执行该查询和分析语句分析数据。源Project/Logstore ...
通过Linked Server访问云下自建SQL Server
具体操作，请参见 连接SQL Server实例。在SQL Server Management Studio（SSMS）中执行如下命令。DECLARE@linked_server_name sysname=N'myTestLinkedServer',@data_source sysname=N'10.10.0.10,1433',-style:10.1.10.1,1433@user_name ...
社区版CDC
说明 在使用社区版CDC连接器或者自定义连接器时，如果已经存在同名 实时计算Flink版内置连接器 或自定义连接器，请更改默认的连接器名字，避免与内置连接器冲突。其中SQL Server CDC和Db2 CDC需要修改社区默认的连接器名字并重新打包，例如...
查看连接地址
不同类型的搜索引擎连接地址如下表：连接地址类型 连接方式 服务类型 网络类型 参考文档 搜索SQL地址 通过SQL连接搜索引擎（连接地址为图示中①）Lindorm 专有网络 公网 通过SQL连接并使用搜索引擎 Solr兼容地址 通过Search Shell连接搜索...
连接数管理
连接和Query管理概述 Hologres兼容PostgreSQL，可以通过 查询pg_stat_activity视图信息 来查看实例连接信息，以达到分析实例连接状态和诊断运行SQL的目的。具体涉及的操作内容如下所示：查询实例的默认最大连接数：不同的实例规格对应不同...
通过SQL连接并使用搜索引擎
连接代码示例 import java.sql.Connection;import java.sql.DriverManager;import java.sql.ResultSet;import java.sql.Statement;import java.util.Properties;public class SearchSqlDemo { public static void main(String[]args){ ...
SQL版本说明
Lindorm SQL的版本是不断升级迭代的，部分SQL语法需要SQL引擎升级到一定版本之后才能支持。因此在引擎中使用Lindorm SQL时，您需要关注引擎的SQL版本是否符合要求。本文介绍Lindorm SQL的版本说明和版本查看方法。通过SQL语句查看SQL版本 ...
Hologres管控台的监控指标
实例连接数 实例连接数包括实例的使用连接数（个）和FE节点连接数最高使用率（%），其中：实例连接数（个）：代表实例中已经使用的总SQL连接数，包括active、idle等各种状态的JDBC/PSQL等连接。FE节点连接数最高使用率（%）：代表使用率...
引用SQL组件
使用SQL代码处理数据表时，通过过滤、连接和聚合数据源表，获取结果表。您可通过创建数据开发（DataStudio）的SQL组件节点使用组件，基于组件快速新建数据处理节点，提高开发效率。本文为您介绍如何引用组件。前提条件 已准备所需使用的...
监控指标常见问题
说明实例连接数已达上限，通过HoloWeb或者SQL的方式查看当前的连接情况，详情请参见 连接数管理。可以使用Superuser账号对不符合预期或者Idle的连接进行 Kill 操作。查询延迟过高时如何解决？常见的延迟过高有以下几种原因，可以先通过慢...
引用SQL组件
使用SQL代码处理数据表时，通过过滤、连接和聚合数据源表，获取结果表。您可通过创建数据开发（DataStudio）的SQL组件节点使用组件，基于组件快速新建数据处理节点，提高开发效率。本文为您介绍如何创建SQL组件节点并使用组件。前提条件 已...
Zeppelin概述
本文介绍阿里云E-MapReduce如何访问Zeppelin。您可以通过访问Zeppelin，进行大...hive 表示执行Hive SQL代码，您无需配置，Zeppelin会自动连接到EMR集群的Hive Thrift Server服务。hive show tables;select*from test_1;返回信息如下所示。
构建模型
您可以选择数据表关联数据表、数据表关联SQL代码创建表、SQL代码创建表关联数据表和SQL代码创建表关联SQL代码创建表。说明 SQL代码的编辑操作请参见 自定义SQL。数据表关联数据表 在数据集编辑页面，按照下图步骤，拖拽数据表至画布中。...
自定义SQL
入口2：数据集 编辑页面，在左侧面板选择数据源，画布中没有任何数据表时，单击画布中的 使用SQL代码创建第一张表 或左侧面板中的 SQL代码创建表。输入SQL代码后，单击 运行。SQL示例如下：SELECT report_date,order_level,shipping_type,...
数据库常见问题
以使用MySQLi函数连接数据库、并从数据库中获取指定字段的值为例，MySQLi示例代码如下所示：$conn=new mysqli('localhost','user','password','data_base');使用new操作符，最后一个参数是直接指定数据库$conn->select_db('data_base')/...
SQL组件概述
组件是一种带有多个输入参数和输出参数的SQL代码过程模板，而SQL代码过程可通过引入一个或多个源数据表，并进行过滤、连接、聚合等操作，加工出业务所需的目标表，因此，您可通过组件快速加工出符合业务需求的目标表。本文为您介绍组件的...
PostgreSQL节点
开发SQL代码：使用调度参数 DataWorks提供的 调度参数 可实现周期调度场景下代码动态入参，您可在节点任务中通过${变量名} 的方式定义代码中的变量，并在节点编辑页面右侧导航栏的 调度配置>调度参数，为该变量赋值。调度参数支持的格式及...
SQL作业开发
Flink全托管为您提供了丰富的SQL代码模板和数据同步模板，每种模板都为您提供了使用场景、代码示例和使用指导。您也可以直接单击对应的模板进行使用，快速实现您的业务逻辑，详情请参见 代码模板 和 数据同步模板。单击 下一步。在 新建...
Oracle节点
开发SQL代码：使用调度参数 DataWorks提供的 调度参数 可实现周期调度场景下代码动态入参，您可在节点任务中通过${变量名} 的方式定义代码中的变量，并在节点编辑页面右侧导航栏的 调度配置>调度参数，为该变量赋值。调度参数支持的格式及...
StarRocks
开发SQL代码：使用调度参数 DataWorks提供的 调度参数 可实现周期调度场景下代码动态入参，您可在节点任务中通过${变量名} 的方式定义代码中的变量，并在节点编辑页面右侧导航栏的 调度配置>调度参数，为该变量赋值。调度参数支持的格式及...
设置SSL加密
是否开启强制加密 否 开启后将强制客户端以加密方式连接SQL Server内网链路，且连接无需上传CA证书，不再支持非加密连接方式。说明 仅实例网络类型为 专有网络（VPC）时，才支持开启强制加密。更多操作，请参见 更改网络类型。外网链路不...
SQL Server节点
开发SQL代码：使用调度参数 DataWorks提供的 调度参数 可实现周期调度场景下代码动态入参，您可在节点任务中通过${变量名} 的方式定义代码中的变量，并在节点编辑页面右侧导航栏的 调度配置>调度参数，为该变量赋值。调度参数支持的格式及...
Cassandra
说明 您也可以通过MySQL客户端或者程序代码等方式连接DLA，然后执行SQL命令创建库。创建数据库。create database cassandra_it_db with dbproperties(catalog='cassandra',location='cds-test-1-core-001.cassandra.rds.aliyuncs.com,cds-...
使用DLA访问
本文介绍通过数据湖分析（DLA）连接 云原生多模数据库 Lindorm 文件引擎的方法，并使用SQL查询文件引擎中的数据。前提条件 云原生多模数据库 Lindorm 实例已开通文件引擎，具体请参见 开通指南。将专有网络的IP添加至Lindorm实例的白名单中...
HDFS
登录到DMS来执行SQL操作，执行以下SQL命令创建库：CREATE DATABASE `my_hdfs_db` WITH DBPROPERTIES(catalog='hive',location='hdfs:/172.168.XX.XX:9000/test/')说明 您也可以通过MySQL客户端或者程序代码等方式连接DLA，然后执行SQL命令...
错误码
导致PXC-4103错误的常见原因如下：应用SQL语句执行比较慢，占用单个连接的时间过长，导致连接数不够；应用端没有关闭数据库连接，导致连接泄露；有很多跨库查询（例如聚合统计类查询，未带分库条件的查询）同时执行，占用大量连接。解决...
配置SQL赋值节点
SQL预览：您可以在编写SQL代码的过程中，随时单击SQL预览，预览SQL代码。有效性检查：编写完SQL代码后，单击有效性检查，检查SQL代码的有效性。保存：编写完SQL代码后，单击保存，保存SQL代码。单击 试运行。如果执行日志的最后一行出现 ...
创建并使用AnalyticDB for PostgreSQL节点
开发SQL代码 在AnalyticDB for PostgreSQL节点的代码编辑区域，根据PostgreSQL支持的语法编写SQL语句。详情请参见 SQL语法。步骤三：配置任务调度 如您需要周期性执行创建的节点任务，可单击节点编辑页面右侧的 调度配置，根据业务需求配置...
步骤四：开发FLINK_SQL实时任务
步骤二：开发与预编译 FLINK_SQL 任务代码 在FLINK_SQL任务代码页面，编写任务的代码。代码如下：INSERT INTO ads_gross SELECT sku_type as prod_code,sum(sku_quantity)as sale_num FROM oms_orders GROUP BY sku_type;单击页面左上方的 ...
步骤四：开发FLINK_SQL实时任务
步骤二：开发与预编译 FLINK_SQL 任务代码 在FLINK_SQL任务代码页面，编写任务的代码。代码如下：INSERT INTO ads_gross SELECT sku_type as prod_code,sum(sku_quantity)as sale_num FROM oms_orders GROUP BY sku_type;单击页面左上方的 ...
Tomcat 连接池连接 OceanBase 数据库示例程序
tomcat 连接池测试0 tomcat 连接池测试1 tomcat 连接池测试2 tomcat 连接池测试3 tomcat 连接池测试4 tomcat 连接池测试5 tomcat 连接池测试6 tomcat 连接池测试7 tomcat 连接池测试8 tomcat 连接池测试9 修改数据后的结果。修改后-POOl ...
使用DMS查询时提示“使用连接执行SQL，锁等待超时30s...
使用连接执行SQL，锁等待超时30s。问题原因 此报错与RDS的锁等待无关。DMS存在限制，即一个SQL窗口为一个连接（保持会话一致和事务）。在DMS中执行一条SQL语句时，表被锁住，超时时间为30秒。如果长时间没有返回结果，部分浏览器会可能会...
SQL任务开发
您也可以在下拉列表中选择 连接SQL compute，直接创建一个新的SQL Compute。Compute更多介绍，请参见 管理Compute。在新建的任务编辑器中输入SQL语句。（可选）在任务开发页面右侧，您可以单击 版本信息 页签，查看版本信息。您可以在此处...
连接RDS SQL Server数据库时出现“Logon failed for ...
问题描述 用户在使用DMS控制台，连接RDS SQL Server数据库时出现 Logon failed for login‘user’due to trigger execution 报错。问题原因 该问题一般发生于RDS SQL Server版数据库，原因可能是连接数已满。解决方案 检查连接数是否已满，...
- 产品推荐
- 这些文档可能帮助您