使用NAS动态存储卷
当您的Kubernetes应用需要动态创建和删除NAS文件系统和挂载点时，您可以使用filesystem方式进行挂载。通过控制台使用subpath类型的NAS动态存储卷 步骤一：创建文件系统和挂载点 NAS动态存储卷的挂载方式为subpath类型时，您需要手动创建NAS...
使用NAS动态存储卷
当您的Kubernetes应用需要动态创建和删除NAS文件系统和挂载点时，您可以使用filesystem方式进行挂载。通过控制台使用subpath类型的NAS动态存储卷 步骤一：创建文件系统和挂载点 NAS动态存储卷的挂载方式为subpath类型时，您需要手动创建NAS...
数据治理
监控逻辑 实例（ds_mbr_use_info）产出一张表（ods_mbr_use_info），写入完成后触发两个数据质量强规则 表行数>0 和 业务主键唯一 校验，执行规则表行数采样值为0，不符合 表行数>0，触发强规则红色报警且将实例（ods_mbr_use_info）置为...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表的同时支持创建一个或者多个索引表。说明 创建数据表后需要几秒钟进行加载，在此期间对该数据...
创建数据表
} 创建表时开启局部事务 以下示例用于创建数据表时开启局部事务功能。该表的主键为pk1（String类型）和pk2（Integer类型），属性列值只保留最新版本数据以及数据永不过期。private static void createTable(SyncClient client){/设置数据表...
配置规则：按表（单表）
校验类型 支持 数值型、波动率型 和 动态阈值型。开启动态阈值后，无需手动配置波动阈值或期望值，系统会根据智能算法，自动判断合理阈值，若发现数据异常，会立即触发报警或阻塞。说明 您需购买DataWorks企业版及以上版本，才可以选择 ...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表时支持创建一个或者多个索引表。注意事项 创建数据表后需要几秒钟进行加载，在此期间对该数据...
动态增加或删除列存索引的DDL语法
本文介绍了如何在建表之后，通过DDL语句动态创建和删除列存索引。前提条件 在添加完只读列存节点，并配置好对应的集群地址后，您可以通过集群地址连接到集群，使用SQL语句创建并管理列存索引。添加只读列存节点。配置集群地址。为了实现行...
分区
对于部分操作MaxCompute的命令，处理分区表和非分区表时语法有差别，详情请参见 表操作 和 INSERT操作。使用限制 单表分区层级最多为6级。单表分区数最大值为60000个。单次查询允许查询最多的分区个数为10000个。STRING分区类型的分区值不...
通过PrestoDB使用Tablestore
您可以在使用PrestoDB访问Tablestore时动态创建Schema和创建表来定义Tablestore资源相关信息。其中创建Schema时需要配置账号和实例信息，创建表时需要配置映射表的信息。运行PrestoDB前，配置Schema模式为 meta-table 并配置用户存储Schema...
表操作
Timestream提供了元数据表和数据表的创建和删除功能。元数据表 创建元数据表时可以预定义需要建索引的Attributes以及对应的索引属性和类型。索引类型支持LONG、DOUBLE、BOOLEAN、KEYWORD、GEO_POINT等类型，属性包含Index、Store和Array，...
自增序列Serial（Beta）
public class HoloSerial {/创建表，包含id和f1两个字段。private static void Init(Connection conn)throws Exception { try(Statement stmt=conn.createStatement()){ stmt.execute("drop table if exists test_tb;stmt.execute(...
Flink_SQL任务开发方式
说明 使用原生DDL+DML开发语句创建表，您需关闭Dataphin 编码规范 中的 禁止使用Flink原生DDL语句 设置。具体操作，请参见 编码规范。create temporary table t1(id bigint,name varchar)with('connector'='datagen','rows-per-second'='1'...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表的同时支持创建一个或者多个索引表。说明 创建数据表后需要几秒钟进行加载，在此期间对该数据...
Flink_SQL任务开发方式
说明 使用原生DDL+DML开发语句创建表，您需关闭Dataphin 编码规范 中的 禁止使用Flink原生DDL语句 设置。具体操作，请参见 编码规范。create temporary table t1(id bigint,name varchar)with('connector'='datagen','rows-per-second'='1'...
CREATE STATISTICS
创建表 t2 与两个完全相关的列（包含相同的数据），并且在这些列上创建一个 MCV 列表：CREATE TABLE t2(a int,b int);INSERT INTO t2 SELECT mod(i,100),mod(i,100)FROM generate_series(1,1000000)s(i);CREATE STATISTICS s2(mcv)ON a,b ...
管理MaxCompute Catalog
通过Flink SQL DDL，在MaxCompute Catalog中创建表时，会自动在对应的MaxCompute项目中创建对应的物理表，并自动将Flink中的类型转换为MaxCompute中的类型，支持创建非分区表和分区表。创建非分区表示例：CREATE TABLE `<catalogName>`.`...
配置数据质量监控
ads_user_info_1d 对每日用户数据进行表行数波动监测（弱规则）及业务主键唯一性校验（强规则），以此观察每日UV的波动，以便及时了解应用动态。进入规则配置页面 进入数据质量页面。登录 DataWorks控制台，单击左侧导航栏的 数据建模与...
配置数据质量监控
ads_user_info_1d 对每日用户数据进行表行数波动监测，以此观察每日UV的波动，以便及时了解应用动态。进入规则配置页面 进入数据质量页面。登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据质量，在下拉框中选择对应工作空间后...
Hive元数据基本操作
本文为您介绍Hive元数据的基本操作，包括新建库、删除库、新建表和删除表。前提条件 已创建集群，详情请参见 创建集群。新建库 进入元数据管理页面。登录 阿里云E-MapReduce控制台。在顶部菜单栏处，根据实际情况选择地域 和资源组。单击...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表的同时支持创建一个或者多个索引表。说明 创建数据表后需要几秒钟进行加载，在此期间对该数据...
继承
如果希望移除一个表和它的所有后代，一种简单的方法是使用 CASCADE 选项删除父表。ALTER TABLE将会把列的数据定义或检查约束上的任何变化沿着继承层次向下传播。同样，删除被其他表依赖的列只能使用 CASCADE 选项。ALTER TABLE 对于重名列...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表的同时支持创建一个或者多个索引表。说明 创建数据表后需要几秒钟进行加载，在此期间对该数据...
对接DataV
前提条件 首次使用表格存储时，请开通表格存储服务以及创建实例和数据表等。具体操作，请参见 通过控制台使用 或者 通过命令行工具使用。首次使用DataV时，请开通DataV服务。具体操作，请参见 开通DataV服务。已获取AccessKey（包括...
方案实现
步骤一：创建数据表 通过以下两种方式创建一张店铺信息表：通过控制台创建和管理数据表。具体操作，请参见 创建数据表。通过SDK直接创建和管理数据表。步骤二：创建数据表索引 Tablestore会自动进行全量、增量的索引数据同步。您可以通过...
二级索引
Mutability属性需要在创建表或修改表时通过Table_Options参数进行设置，具体操作，请参见 CREATE TABLE语法介绍。Mutability分类 约束 操作成本 操作说明 无索引 无。1 没有索引的情况下，直接写主表，为1次操作。IMMUTABLE 整行写入，不可...
DDL 语法
创建数据表 当需要创建的表数量较少时，您可以在控制台页面中填写表名、分表数量、选择分库分表拆分键和规则，再输入建表语句完成逻辑表和物理表的创建。当需要创建的表数量较多时，您可以通过下面的 SQL 语句完成逻辑表和物理表的创建，...
数据开发：开发者
您也可以在创建表后，使用直接上传方式，将本地数据上传至DataWorks的源表，再通过计算节点进行清洗加工，将加工后的数据存储至结果表。本文使用直接上传本地数据，并通过计算类型节点清洗该表数据为例进行说明。进入数据开发 登录 ...
多元索引路由字段的使用
private static void testRoute(SyncClient client)throws InterruptedException {/创建表。TableMeta meta=new TableMeta("order");meta.addPrimaryKeyColumn("order_id",PrimaryKeyType.STRING);meta.addPrimaryKeyColumn("user_id",...
Hologres外部表
Hologres的分区表和MaxCompute的分区表没有对应关系。Hologres外部表不支持分区。当您需要向Hologres外部表写入大量数据时，采用并行多进程写入方式，会小概率出现某个写入进程数据重写情况，导致数据重复。MaxCompute里建的Hologres外部表...
概览
实时数仓Hologres连接器 实时计算Flink版实时消费Hologres 1.17 8.0.3 2.0.x 2.1.x 通用：无论Hologres实例版本，维表和结果表都已不再支持RPC模式。若选择RPC模式，将自动切换为jdbc_fixed模式，如果实例版本较低，建议升级版本。实时数仓...
元数据管理
您可以使用该功能管理元数据库和元数据表。创建元数据库 登录 数据湖管理控制台，选择 元数据 目录下的 元数据管理。单击 新建数据库。配置元数据库参数。选择所属数据目录。输入元数据库名称。（选填）输入元数据库描述。输入元数据库的...
文档更新动态（2023年）
更新说明 新建普通维度逻辑表 创建业务限定 离线物理表和编辑器优化 离线物理表字段配置优化，可设置资产治理相关属性，如可为字段匹配词根、标准和字段的安全分类。编辑器升级优化：支持select字段列表中或where条件中使用@批量选择表字段...
通过创建外部表加速查询MaxCompute数据
也支持使用 CREATE FOREIGN TABLE 方式灵活创建MaxCompute外部表（可自定义表名称、自由选择列、自定义comments信息等），此处以 CREATE FOREIGN TABLE 方式为例为您介绍通过Hologres查询MaxCompute非分区表和分区表数据的操作步骤。...
功能更新动态（2023年）
数据探查全局配置 新建及管理专题分组 MaxCompute物理表和字段详情 查看及管理资产专题 数据探查 新增数据探查功能（需开通质量模块才可使用该功能），支持针对物理表、物理视图、逻辑表配置自动探查和手动探查任务。支持配置探查数据范围...
DML语句
前提条件 已创建Hadoop集群，详情请参见 创建集群。使用限制 EMR-3.36.0及后续版本和EMR-5.2.0及后续版本，支持Spark SQL对Hudi进行读写操作。进入spark-sql命令行 使用SSH方式登录到集群，详情信息请参见 登录集群。执行以下命令，进入 ...
文档更新动态（2022年）
更新说明 配置网络、数据服务概述 2022年10月25日 逻辑表功能优化及SQL任务升级 逻辑表DML支持部分字段insert和动态分区。更新说明 创建并配置普通维度逻辑表、创建并配置层级维度逻辑表、创建虚拟维度逻辑表、创建枚举维度逻辑表 2022年10...
自定义RDBMS数据库及同步数据
使用命令行方式连接MySQL实例，连接后创建同步数据的源数据表和目标数据表。如何连接MySQL实例，请参见 通过客户端、命令行连接RDS。创建源数据表的代码示例如下。create table xin_test_scr2(id string,name string);insert into xin_test...
自定义RDBMS数据库及同步数据
使用命令行方式连接MySQL实例，连接后创建同步数据的源数据表和目标数据表。如何连接MySQL实例，请参见 通过客户端、命令行连接RDS。创建源数据表的代码示例如下。create table xin_test_scr2(id string,name string);insert into xin_test...
配置示例：MaxCompute
快捷规则 选择表级规则，快捷规则支持 表行数大于0 和 表行数动态阈值。重要 您需要购买DataWorks企业版及以上版本，才可以使用动态阈值功能。选择字段级规则，快捷规则可以选择 字段重复值、字段空值 和 唯一值动态阈值。重要 您需要购买...
- 产品推荐
- 这些文档可能帮助您