构建模型
在SQL代码编辑页，输入SQL，单击运行并确认编辑后完成表的创建。在 新增关联关系 面板中，按照下图步骤配置数据关联。说明 关联关系支持配置为左外关联（）、内连接（）、全连接（）。MySQL不支持全连接（）。配置完成后，您可以单击画布中...
数据查询
添加HBase数据 数据添加操作 仅针对HBase表，SQL表不支持通过此操作添加数据。单击添加。在 添加表数据 对话框中，输入以下参数：参数 说明 row key HBase表的RowKey名称。列名称 需要新增的列名称，填写时必须指定列簇。格式为<列簇名:列...
执行SQL基本操作
查看数据库 创建、查看和删除表 增加列、删除列、修改列的数据类型 创建、查看和删除本地索引 增删改查表数据 查看数据库 查看数据库：SHOW DATABASES;创建、查看和删除表 说明 以下示例以DRDS模式数据库为例说明，DRDS模式数据库介绍请...
执行SQL基本操作
查看数据库 创建、查看和删除表 增加列、删除列、修改列的数据类型 创建、查看和删除本地索引 增删改查表数据 查看数据库 查看数据库：SHOW DATABASES;创建、查看和删除表 创建表。创建单表：CREATE TABLE single_tbl(id int,name varchar...
PyMySQL 连接 OceanBase 数据库示例程序
DROP_TABLE_SQL=''' DROP TABLE test_pymysql ''' main.py 代码介绍 本文获取的 main.py 文件中的代码通过调用 pymysql 模块，连接 MySQL 数据库，以及调用 logging 模块，输出日志信息，实现创建表、插入数据、查询数据和删除表的操作。...
Quick BI创建SQL的数据集时使用Excel表？
概述 本文主要讲述用SQL创建数据集时怎么使用到本地上传的Excel表。问题描述 想使用SQL创建数据集时在SQL语句中使用...使用SQL创建数据集，在SQL语句中使用临时表的表名完成数据集的创建。适用于 产品名称：Quick BI 产品模块：SQL创建数据集
Flink_SQL任务开发方式
原生DDL+DML开发方式 原生DDL开发是指在Flink_SQL任务使用Flink SQL语句直接创建和管理数据表的开发方式。如使用 CREATE TABLE/CREATE TEMPORARY TABLE 创建表。这种开发方式通过代码定义表结构并通过SQL语句来创建和管理表。重要 原生DDL+...
Flink_SQL任务开发方式
原生DDL+DML开发方式 原生DDL开发是指在Flink_SQL任务使用Flink SQL语句直接创建和管理数据表的开发方式。如使用 CREATE TABLE/CREATE TEMPORARY TABLE 创建表。这种开发方式通过代码定义表结构并通过SQL语句来创建和管理表。重要 原生DDL+...
数据同步模版
Flink会自动在Hologres上创建表，但如果Hologres已经存在对应的表，Flink会根据您创建计划中选择的目标库和表信息来映射。Hologres不支持更改列的类型。如果当前字段的类型和Hologres下游表中对应的字段类型不同，则会写入失败，您需重修改...
自定义SQL
在数据分析中，一些复杂的逻辑或模型可通过自定义SQL创建数据表。并且自定义SQL支持传参，可满足更复杂多变的分析场景。前提条件 您已获取数据，请参见 连接数据源。使用限制 API数据源不支持自定义SQL。输入SQL代码 您可以通过以下2种方式...
引用SQL组件
使用SQL代码处理数据表时，通过过滤、连接和聚合数据源表，获取结果表。您可通过创建数据开发（DataStudio）的SQL组件节点使用组件，基于组件快速新建数据处理节点，提高开发效率。本文为您介绍如何引用组件。前提条件 已准备所需使用的...
引用SQL组件
使用SQL代码处理数据表时，通过过滤、连接和聚合数据源表，获取结果表。您可通过创建数据开发（DataStudio）的SQL组件节点使用组件，基于组件快速新建数据处理节点，提高开发效率。本文为您介绍如何创建SQL组件节点并使用组件。前提条件 已...
通过Spark SQL读Lindorm数据
本文主要介绍如何通过Spark SQL访问Lindorm中的Hive表和宽表的数据。前提条件 已创建Lindorm单可用区实例。具体操作，请参见 创建实例。重要 Lindorm实例需开通宽表引擎、计算引擎、文件引擎。计算引擎开通方式，请参见 开通与变配。已开通...
代码模式建模
数据表创建完成后，您可以使用脚本模式通过FML语句配置表的字段及分区信息。本文为您介绍如何使用FML语句配置数据表的相关内容。前提条件 DataWorks目前不支持通过FML语言创建数据表，您需要提前使用可视化界面创建好维度表、明细表、汇总...
编辑维表
您无需编写SQL代码，在维表的编辑页面进行可视化编辑，即可修改通过维表创建的MaxCompute表的信息。前提条件 已创建完成一个维表，详情请参见 创建维表。操作步骤 数据分析概述。在数据分析页面的左侧菜单栏，单击 图标进入 维表 页面。在 ...
批量创建质量规则
对象详情配置 字段级详情配置 您可查看所选数据表的字段校验信息，也可以修改规则名称、质量分权重（仅Dataphin数据表和全域数据表支持），同时，您可以单击 操作 列下的 图标编辑该字段的规则配置和校验配置，也可以删除该字段或指标。...
批量创建质量规则
对象详情配置 字段级详情配置 您可查看所选数据表的字段校验信息，也可以修改规则名称、质量分权重（仅Dataphin数据表和全域数据表支持），同时，您可以单击 操作 列下的 图标编辑该字段的规则配置和校验配置，也可以删除该字段或指标。...
代码模板
Flink全托管为您提供了丰富的代码模板，每种代码模板都为您提供了具体的使用场景、代码示例和使用指导。您可以通过代码模板快速地了解Flink产品功能和相关语法，实现自己的业务逻辑。本文为您介绍代码模板的使用场景和操作步骤。使用限制 ...
Spark SQL
当前在Spark中仅支持External类型数据库和表的创建和读写操作。当前Spark连接数据湖元数据服务，只支持 外表（External Table）的读写和创建操作。这意味着在建立数据库时,需要显式指定 LOCATION 信息，类似如下的SQL语句。CREATE DATABASE...
文档更新动态（2023年）
支持为Dataphin表和全域数据表监控对象配置打分权重以及为Dataphin表（自定义配置）和全域数据表的质量规则配置打分权重。更新说明 创建全域数据表规则 创建数据表质量规则 资产安全-敏感数据识别 安全扫描适配分区字段不是ds或者无分区的...
步骤三：设置任务调度策略并发布
操作步骤 在 SQL数据服务工作台 顶部工具栏的右上角，单击 发布执行。在 执行设置 对话框中，设置SQL分析任务的调度策略。项目 说明 结果存储表 将查询结果输出至指定的自定义存储表。自定义存储表的详细信息，请参见 自定义存储表。重要 ...
使用Java SDK创建定时SQL任务
本文介绍通过Java SDK创建定时SQL任务的代码示例。前提条件 已创建RAM用户并完成授权。具体操作，请参见 创建RAM用户并完成授权。已配置环境变量 ALIBABA_CLOUD_ACCESS_KEY_ID 和 ALIBABA_CLOUD_ACCESS_KEY_SECRET。具体操作，请参见 配置...
功能更新动态（2023年）
支持为Dataphin表和全域数据表监控对象配置打分权重以及为Dataphin表（自定义配置）和全域数据表的质量规则配置打分权重。创建全域数据表规则 创建数据表质量规则 数据安全 安全扫描适配分区字段不是ds或者无分区的情况，采用 全表扫描+...
配置AnalyticDB for PostgreSQL输出组件
您可以根据业务情况修改创建目标表的SQL脚本后，单击 新建。目标表新建成功后，Dataphin自动将新建的目标表作为输出数据的目标表。一键生成目标表用于为开发环境、生产环境创建数据同步的目标表。Dataphin默认为您选中 生产环境建表，如果...
文档更新动态（2022年）
更新说明 管理动态脱敏规则、项目安全策略、脱敏算法、密钥管理 2022年10月25日 数据表质量规则和质量规则模块升级 支持多种数据源表的质量监控，支持数据源连通性及表结构异动性监控。内置丰富的质量规则模板。资产报告升级，可从资源粒度...
数据表管理
本文介绍了在 PolarDB-X 1.0 控制台上对数据表进行调整拆分键、关闭全表扫描和查看表结构的方法。前提条件 您需要先 连接到数据库 并 使用SQL语句创建表 后，才能在控制台上管理数据表。功能介绍 调整拆分键 拆分键即分库或分表的数据表字...
读写RDS MySQL数据
在DMS的 SQL information_schema 页签中，创建RDS MySQL Schema和数据表。创建RDS MySQL Schema： CREATE SCHEMA hello_mysql_vpc_rds WITH DBPROPERTIES(CATALOG='mysql',LOCATION='jdbc:mysql:/rm-*fofake.mysql.rds.aliyuncs....
配置Oracle输出组件
您可以根据业务情况完成创建目标表的SQL脚本修改，并单击 新建。目标表新建成功后，Dataphin自动将新建的目标表作为输出数据的目标表。注意：如果您对CREATE TABLE之后的表名不做更改，系统默认生成大写表名。如果您对CREATE TABLE之后的表...
配置Oracle输出组件
您可以根据业务情况完成创建目标表的SQL脚本修改，并单击 新建。目标表新建成功后，Dataphin自动将新建的目标表作为输出数据的目标表。注意：如果您对CREATE TABLE之后的表名不做更改，系统默认生成大写表名。如果您对CREATE TABLE之后的表...
时序引擎应用开发简介
2.数据建模 针对业务场景进行数据建模，需要确定创建数据库和时序数据表，确定时序数据表的标签、时间戳和量测值，并根据数据特征确定PRIMARY KEY用于数据分片。关于数据模型，请参见 数据模型。时序引擎提供了三种Schema约束策略，分别为...
Cassandra
在左侧导航栏的 Serverless Presto>SQL执行，单击 登录DMS执行SQL，执行以下SQL命令创建数据库和创建表。说明 您也可以通过MySQL客户端或者程序代码等方式连接DLA，然后执行SQL命令创建库。创建数据库。create database cassandra_it_db ...
创建并管理数据集
Quick BI中数据集是可视化分析的基础，您可以将需要分析的数据表创建为数据集，Quick BI支持可视化配置或自定义SQL方式创建数据集。前提条件 您已获取数据，请参见 连接数据源。功能入口 在Quick BI产品首页，通过以下入口，进入创建数据集...
配置AnalyticDB for PostgreSQL输出组件
您可以根据业务情况修改创建目标表的SQL脚本后，单击 新建。目标表新建成功后，Dataphin自动将新建的目标表作为输出数据的目标表。一键生成目标表用于为开发环境、生产环境创建数据同步的目标表。Dataphin默认为您选中 生产环境建表，如果...
配置MySQL输出组件
如下图所示：您可以根据业务情况修改创建目标表的SQL脚本后，单击 新建。目标表新建成功后，Dataphin自动将新建的目标表作为输出数据的目标表。一键生成目标表用于为开发环境、生产环境创建数据同步的目标表。Dataphin默认为您选中生产环境...
SQL查询
功能概览 功能 说明 添加目录 支持您将系统推荐目录及已授权的数据源下的数据表添加至目录，添加为目录后您可快速查看相应目录下的SQl文件或者数据表，对于数据表支持您快速查看表结构并快速生成查询SQL。创建SQL查询 您可新建SQL查询文件...
SpringJDBC 连接 OceanBase 数据库
执行创建表的 SQL 语句，jdbcTemplate 对象通过调用 execute 方法，执行了上述定义的创建表的 SQL 语句。在控制台输出一条成功创建表的消息。代码如下：String createTableSql="CREATE TABLE test_springjdbc(id INT,name VARCHAR(20));...
功能更新动态（2024年）
新建普通维度逻辑表 新建层级维度逻辑表 创建原子指标 创建业务限定 添加派生指标和衍生指标 实时研发 实时任务支持引用全局变量以解决DDL语句中明文密码的问题。实时任务研发优化：Flink计算源支持配置多级资源队列。实时任务详情与版本...
物化视图和字段资产详情
创建时间：为您展示该数据表的创建的时间，格式为：yyyy-mm-dd hh:mm:ss。创建人：为您展示创建该数据表的用户。产出任务：您可查看该数据表产出任务，包含该对象的数据写入任务、血缘解析或配置以当前表为输出表的任务，以及节点输出名称=...
配置MySQL输出组件
如下图所示：您可以根据业务情况修改创建目标表的SQL脚本后，单击 新建。目标表新建成功后，Dataphin自动将新建的目标表作为输出数据的目标表。一键生成目标表用于为开发环境、生产环境创建数据同步的目标表。Dataphin默认为您选中生产环境...
mysqlclient 连接 OceanBase 数据库
本文将介绍如何使用 mysqlclient 和 OceanBase 数据库构建一个应用程序，实现创建表、插入数据和查询数据等基本操作。点击下载 python-mysqlclient 示例工程 前提条件 您已安装 Python 3.x 和 pip。您已安装 OceanBase 数据库并且创建了 ...
- 产品推荐
- 这些文档可能帮助您