Sentieon
本文介绍了阿里云基因分析平台集成的第三方软件（Sentieon）的使用方法。关于Sentioen Sentieon® 成立于2014年，拥有算法、软件和系统调优的专业团队，开发了众多高度优化生物信息分析应用，获得precisionFDA组织的挑战赛的冠军，并在...
NESTED TABLE
本文介绍NESTED TABLE的使用方法和使用场景。背景介绍 Oracle nested table详细功能请参见 http://www.orafaq.com/wiki/NESTED_TABLE。NESTED TABLE是一种Oracle数据类型，用于支持包含多值属性的列，在本例中，列可以容纳整个子表。创建...
分区和列操作
具备修改表权限（Alter）的用户 本文中的命令您可以在如下工具平台执行：MaxCompute客户端 使用SQL分析连接 使用云命令行（odpscmd）连接 使用DataWorks连接 MaxCompute Studio 删除分区 为已存在的分区表删除分区。修改分区的更新时间 ...
Raw
本文为您介绍Raw格式的使用方法、配置选项和类型映射。背景信息 Raw格式允许读写基于字节的原始值作为单个列。Raw格式连接器是内置的。支持Raw格式的连接器包括 消息队列Kafka、Upsert Kafka 和 对象存储OSS。使用方法 例如，在Kafka中具有...
秒级加字段（Instant Add Column）
使用方法 当 ALTER TABLE 语句为下列情况时，该语句使用了秒级加字段功能：未指定算法，示例如下：ALTER TABLE test ADD COLUMN col2 int;将算法指定为 DEFAULT，示例如下：ALTER TABLE test ADD COLUMN col3 int,ALGORITHM=DEFAULT;将算法...
Python SDK示例：Table
from odps import options options.sql.use_odps2_extension=True table=o.create_table('my_new_table','cat smallint,content struct(100),body:string>')删除表 使用 delete_table()方法删除已经存在的表。o.delete_table('my_table_...
工作空间
本文介绍基因分析平台中工作空间的使用方法。基因分析平台中的所有操作，都必须在工作空间内进行。用户可以通过工作空间进行基因数据、分析应用和运行任务的管理，满足数据隔离、权限控制、费用统计等业务需求。创建工作空间 在工作空间...
在线修改列类型
name]|DROP[COLUMN]col_name|MODIFY[COLUMN]col_name column_definition[FIRST|AFTER col_name]} 使用方法 当 ALTER TABLE 语句中未指定ALGORITHM算法或指定为其它算法，例如INPLACE或COPY时，默认使用普通的方式执行，会阻塞DML的执行。...
在本地环境上使用PyODPS
PyODPS是阿里云开发的Python SDK，用于在本地环境上使用MaxCompute服务。本文将介绍如何在本地环境上使用PyODPS进行表操作、数据加载和运行SQL查询。前提条件 本地已安装python环境，且已安装PyODPS包，参考：安装PyODPS。准备数据集 ...
流引擎使用CEP处理复杂事件
如果使用关系型数据库分析这类数据，需要先将所有数据导入到数据库中，再使用统计分析工具进行分析，虽然可以得到部分有用的数据，但是无法保证实时性。为了满足上述需求，出现了复杂事件处理（CEP）的概念，CEP认为任何事情的发生可以当做...
消息队列Kafka
本文为您介绍如何使用消息队列Kafka连接器。背景信息 Apache Kafka是一款开源的分布式消息队列系统，广泛用于高性能数据处理、流式分析、数据集成等大数据领域。Kafka连接器基于开源Apache Kafka客户端，为阿里云实时计算Flink提供高性能的...
Hudi
本文为您介绍如何使用Hudi连接器。背景信息 Apache Hudi是一种开源的数据湖表格式框架。Hudi基于对象存储或者HDFS组织文件布局，保证ACID，支持行级别的高效更新和删除，从而降低数据ETL开发门槛。同时该框架还支持自动管理及合并小文件，...
OSS Foreign Table功能概览
OSS Foreign Table（简称OSS FDW）是基于PostgreSQL ...支持 不支持 相关文档 使用OSS Foreign Table进行数据湖分析 使用OSS Foreign Table导出数据 使用OSS Foreign Table分区表 OSS Foreign Table使用技巧 OSS Foreign Table数据类型对照表
LIST DEFAULT HASH
修改LIST DEFAULT HASH分区表 LIST DEFAULT HASH分区支持 ALTER TABLE ADD PARTITION、ALTER TABLE DROP PARTITION、ALTER TABLE REORGANIZE PARTITION、ALTER TABLE TRUNCATE PARTITION、ALTER TABLE EXCHANGE PARTITION、ALTER TABLE ...
ALTER TABLE
使用示例-创建一个分区表 create table if not exists sale_detail(shop_name STRING,customer_id STRING,total_price DOUBLE)partitioned by(sale_date STRING,region STRING);修改表格的cluster属性 alter table sale_detail clustered ...
分区和列操作
分区和列操作为您提供了变更MaxCompute中表的分区或列的操作方法，您可以根据实际业务场景执行相应操作。本文为您介绍如何添加或删除分区、添加或修改列及注释常用操作。分区和列操作详情请参见 分区和列操作。分区和列操作常用命令如下。...
OSS Foreign Table使用技巧
本文介绍OSS Foreign Table相关的使用技巧，例如查看执行计划、收集统计信息、切分大文件以及...相关文档 使用OSS Foreign Table进行数据湖分析 使用OSS Foreign Table分区表 使用OSS Foreign Table导出数据 OSS Foreign Table数据类型对照表
DBMS_AQADM
ALTER_QUEUE_TABLE 使用 ALTER_QUEUE_TABLE 存储过程修改现有队列表。语法如下：ALTER_QUEUE_TABLE(queue_table IN VARCHAR2,comment IN VARCHAR2 DEFAULT NULL,primary_instance IN BINARY_INTEGER DEFAULT 0,secondary_instance IN ...
数据输入输出
df=md.read_odps_table("parted_odps_table",partitions=["pt1=20240119,pt2=10"],index_col=["idx_col"])如果需要将预处理的中间数据存储到MaxCompute表中，可以使用 to_odps_table 方法。df.to_odps_table("output_table_name").execute...
入门概述
本文介绍开始使用基因分析平台前的准备工作，产品基本功能和使用流程，帮助您快速上手。...开通成功后访问“管理控制台”。开通存在短暂延迟，如无法访问，可以稍等后刷新重试。完成平台依赖的对象存储OSS...更多平台使用方法，请查看 用户指南。
表
[,type bigint>,,type double>,,type string>]创建表 您可以使用 o.create_table()方法创建表，使用方式有两种：使用表Schema方式、使用字段名和字段类型方式。同时创建表时表字段的数据类型有一定的限制条件，详情如下。使用表Schema创建...
分析视图
在分析时，目前暂不支持「session分析」外，其他功能的使用和应用分析功能一致，可直接进行分析使用。在分析时，可点击左上角的切换小站视图。2.多应用视图操作说明 1）创建多应用视图 进入「行为分析」-「分析首页」-「分析视图」点击分析...
2023年
EXTRACT JSON_ARRAY JSON_OBJECT JSON_EXISTS 2023-06-29 新增MaxCompute JSON类型使用指南（试用Beta版本）新说明 MaxCompute当前支持了JSON数据类型，提高了表中带有JSON类型数据的计算和分析的性能，本文为您介绍JSON类型的使用方法。...
图运维
注意：此时先不要单击“导出”按钮 若是一天内需要导出多次，新分区版本需要选择"yyyyMMddHH"拿到建表sql后，在max compute里执行创建table 创建table成功后，使用grant方法赋予graph compute账户对该table的操作权限 max compute里的table...
TABLE()
使用TABLE()函数可将数组的成员转换为一组行。特征如下：TABLE(collection_value)collection_value是一个表达式，其求值结果为集合类型的值。TABLE()函数将集合的嵌套内容扩展为表格式。可在使用表正则表达式的任意位置中使用TABLE()函数。...
GraphCompute数据导出MaxCompute表
1、创建table成功后，使用alter方法添加对应分区：alter table 输入MaxComputeProjec名字.table名字 add partition(ds='2023032302')如果该分区已存在历史数据，导出的数据会直接追加入表，不做历史数据的清理；2、进行导出相关检查，如...
Cache Table
使用方法 创建Cache表 只支持使用CTAS语句来创建Cache表并写入数据，语句中必须指定 ENGINE='CACHE'，否则会创建为普通的表而不是Cache表。将 adb_demo.customer 表数据按 age 字段排序并写入到 c1 缓存表中，示例如下：可选：创建名为...
Python SDK常见问题
因此，建议在使用 write_table()方法时，一次性写入多组数据或者传入一个Generator对象。使用 write_table()方法示例请参见 写入表数据。open_writer()默认写入到Block中。为什么DataWorks PyODPS节点上查出的数据量要少于本地运行的结果？...
PyODPS常见问题
本文为您介绍使用PyODPS时的常见问题。问题类别 常见问题 安装PyODPS 安装PyODPS时，提示Warning:XXX not installed，如何解决？安装PyODPS时，提示Project Not Found，如何解决？安装PyODPS时，报错Syntax Error，如何解决？在Mac上安装...
函数计算FC环境自动安装探针
可以在函数代码页面使用WebIDE创建文件 bootstrap，并设置文件权限为可执行权限（终端窗口执行命令 chmod+x bootstrap）。示例代码如下所示。bin/bash set-eo pipefail#1.设置ARMS应用名称 appName="FC:Custom_Java_Arms_Demo"if[-n"${FC_...
查询SQL Server数据库（tds_fdw）
您可以通过多种方式创建外部表：使用table_name定义创建外部表，示例如下：CREATE FOREIGN TABLE mssql_table(id integer,data varchar)SERVER mssql_svr OPTIONS(table_name 'dbo.mytable',row_estimate_method 'showplan_all');使用...
SOFAArk 配置说明
Profile 机制 SOFAArk 容器默认使用 bootstrap.properties 配置，实际开发中，可能根据运行环境加载不同的配置。SOFAArk 提供了 profile 机制，当您指定 profile 值时，SOFAArk 容器会加载 bootstrap-${profile}.properties 配置文件。指定...
使用OSS Foreign Table进行数据湖分析
本文介绍如何使用OSS Foreign Table（OSS外表，简称OSS FDW）导入OSS中的数据并进行数据分析。功能介绍 OSS FDW基于PG FDW（PostgreSQL Foreign Data Wrapper）框架进行开发，通过OSS FDW，您可以进行如下操作：将OSS数据导入本地表（行存...
表实用程序命令
日志文件的默认保留期为30天，可通过使用ALTER TABLE SET TBLPROPERTIES SQL方法设置的delta.logRetentionPeriod属性进行配置。请参阅表属性。运行vacuum后，无法再按时间顺序查看在保留期之前创建的版本。SQL%sql VACUUM eventsTable-...
OSS表属性
本文主要介绍了OSS表属性的定义方法。auto.create.location 在DLA上自动创建OSS上对应的目录，并创建表。示例如下：CREATE EXTERNAL TABLE person(`id` int,`name` string,`age` int)STORED AS TEXTFILE LOCATION 'oss:/bucket001/dir001...
Table2KV
本文为您介绍如何使用Table2KV转化普通表为KV（Key:Value）格式的表。使用限制 转换后的结果表不会显示原表中的空值。您可以在结果表中指定需要保留的列，并且输出的列与原表的列一致。如果存在输入Key_map表，则转化的列为Key_map表与KV表...
扫描全部/部分分库分表
REAL_TABLE=("table_name_list")#物理表名，对所有物理库使用相同的物理表名[,NODE="node_list"])#过滤通过CONDITION计算出的结果，仅保留指定物理库#物理/逻辑表名列表 table_name_list:table_name[,table_name].#物理库列表，支持GROUP_...
使用ODPS Foreign Table访问MaxCompute数据
开始使用ODPS Foreign Table 使用ODPS外表需要以下三要素，缺一不可，包括：ODPS Server：定义MaxCompute的访问端点。ODPS User Mapping：定义MaxCompute的访问账户。ODPS Foreign Table：定义MaxCompute的访问对象。1.创建ODPS Server 1.1...
管理MySQL Catalog
CREATE TABLE IF NOT EXISTS `${target_table_name}` WITH(.)AS TABLE `${mysql_catalog}`.`${db_name}`.`${table_name}`/*+OPTIONS('server-id'='6000-6018')*/;整库同步，实时同步整库级别的表结构变更和数据变更。CREATE DATABASE `${...
CREATE TABLE
CREATE TABLE 用于在当前数据库中创建一个新的、初始为空的表。简介 CREATE TABLE 将在当前数据库中创建一个新的、初始为空的表。该表将由发出该命令的用户所拥有。如果给定了一个模式名（例如 CREATE TABLE myschema.mytable.），那么该表...
- 产品推荐
- 这些文档可能帮助您