批量上传质量规则
批量配置调度时，非分区表不会保存分区表达式，只会保存调度配置。试跑：试跑后，可单击 图标 查看试跑日志。说明 批量运行时，建议选择相同分区的表。分区信息会直接下放执行，如果分区不一致可能会报错；同时非分区表不会接受参数，将...
批量上传质量规则
批量配置调度时，非分区表不会保存分区表达式，只会保存调度配置。试跑：试跑后，可单击 图标 查看试跑日志。说明 批量运行时，建议选择相同分区的表。分区信息会直接下放执行，如果分区不一致可能会报错；同时非分区表不会接受参数，将...
DML操作常见问题
如果表数据量较大，如何删除非分区表中的重复数据？执行INSERT操作过程中出现错误，会损坏原有数据吗？不会损坏原有数据。MaxCompute满足原子性，INSERT操作执行成功则更新数据，INSERT操作执行失败则回滚数据。执行INSERT INTO或INSERT ...
Python访问（2.0版）
import MySQLdb#打开数据库连接#host为分析型数据库MySQL版实例的访问URL的域名或IP#port为分析型数据库MySQL版实例的访问URL的端口#user为分析型数据库...密码（通常为阿里云AK的access key）#db为分析型数据库MySQL版实例的database名称...
使用JindoTable实现对OSS上表或分区的归档和解冻
表可以是分区表或非分区表。是-i/-a/-ca 目标存储方式。支持如下方式：a：归档（Archive）存储。i：低频（Infrequent Access，IA）存储。说明 如果使用-i，即表示低频存储，会跳过已经处于归档存储的文件。ca：冷归档（Code Archive）存储...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables 列出...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables 列出...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables 列出...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables 列出...
数据分层存储
会返回多行，每行代表一张分区子表 分区子表：分区子表名 hot_size 热存储的大小，单位Byte cold_size 冷存储的大小，单位Byte status 状态：hot：数据在热存中 cold：数据在冷存中 transferring：数据正在搬迁 示例如下：非分区父表 ...
MaxCompute表的高级功能
MaxCompute会根据每张非分区表或者分区表中分区的LastModifiedTime和Lifecycle的设置，判断是否要进行回收操作。MaxCompute SQL提供TOUCH操作，将表或分区的LastModifiedTime值修改为当前时间。如果您使用TOUCH操作，MaxCompute会认为表或...
添加及管理监控对象
批量操作项 运行 可根据配置的调度或自定义分区来批量运行数据表，非分区表可选择校验全表。说明 校验范围默认对分区表和非分区表生效；批量运行时，可以选择非分区表按照全表校验，分区表仍按照配置的校验范围生效。批量运行时，建议选择...
添加及管理监控对象
批量操作项 运行 可根据配置的调度或自定义分区来批量运行数据表，非分区表可选择校验全表。说明 校验范围默认对分区表和非分区表生效；批量运行时，可以选择非分区表按照全表校验，分区表仍按照配置的校验范围生效。批量运行时，建议选择...
功能特性
功能集 功能 功能描述 参考文档 内部表 非分区 在采集通道数据量较小的情况下，适合采取非分区表设计，将终端类型和采集时间设计成标准列字段。非分区表 分区 分区表是指拥有分区空间的表，即在创建表时指定表内的一个或者某几个字段作为...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db][dbName]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db][dbName]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db][dbName]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db][dbName]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables...
ALTER TABLE
说明 通过 alter table 改变聚簇属性，只对分区表有效，非分区表一旦建立聚簇属性就无法改变。alter table 语句适用于存量表，在增加了新的聚簇属性后，新的分区将按设置的聚簇属性存储。alter table 只会影响分区表的新建分区（包括 ...
MaxCompute数据源
离线读 MaxCompute Reader支持读取分区表、非分区表，不支持读取虚拟视图、不支持同步外部表。离线读MaxCompute分区表时，不支持直接对分区字段进行字段映射配置，需要在配置数据来源时指定待同步数据的分区信息。例如，分区表t0其字段包含...
一键实时同步至MaxCompute
数据集成附加字段支持的变量字段如下：EXECUTE_TIME：执行时间 UPDATE_TIME：更新时间 DB_NAME_SRC：原始数据库名称 DB_NAME_SRC_TRANSED：转换后数据库名称 DATASOURCE_NAME_SRC：源端数据源名称 DATASOURCE_NAME_DEST：目的端数据源名称 ...
一键实时同步至MaxCompute
数据集成附加字段支持的变量字段如下：EXECUTE_TIME：执行时间 UPDATE_TIME：更新时间 DB_NAME_SRC：原始数据库名称 DB_NAME_SRC_TRANSED：转换后数据库名称 DATASOURCE_NAME_SRC：源端数据源名称 DATASOURCE_NAME_DEST：目的端数据源名称 ...
读写MaxCompute数据
同步单表信息（非分区表）例如MaxCompute中有以下分区表：CREATE TABLE IF NOT EXISTS part_datatype_test_complex(int_test int,bigint_test bigint,double_test double,string_test string,datetime_test datetime,boolean_test boolean,...
通过元数据发现导入至湖仓版
oss:/adb/Table2/year/month/映射到 AnalyticDB MySQL 的表为非分区表，表名为 day。oss:/adb/Table2/year/month/day/不能映射表。原因：选择的 OSS目录位置 后无其他层目录。oss:/adb/Table3/year=2022/month=03/day=01/file5.csv oss:/...
JindoTable SDK模式归档和解冻命令介绍
待归档的数据必须是表数据（可以是分区表或非分区表），且已经位于阿里云对象存储OSS。背景信息 JindoTable原有archive和unarchive命令可以对OSS上的表或分区进行归档或解冻等操作，但archive和unarchive命令依赖SmartData组件Jindo ...
JindoTable SDK模式归档和解冻命令介绍
待归档的数据必须是表数据（可以是分区表或非分区表），且已经位于阿里云对象存储OSS。背景信息 JindoTable原有archive和unarchive命令可以对OSS上的表或分区进行归档或解冻等操作，但archive和unarchive命令依赖SmartData组件Jindo ...
生命周期操作
对于非分区表，当 LastModifiedTime 超过设定的生命周期时长时，MaxCompute会回收这些数据并删除对应的表。对于分区表，则根据各分区的 LastModifiedTime 判断该分区数据是否该被回收，当最后一个分区被回收后，该表不会被删除。如果您需要...
JindoTable MoveTo命令介绍
表可以是分区表或非分区表。是-d待移动的目标位置。无论是移动分区还是移动非分区表的整表，该位置都对应"表"一级的位置。如果移动的是分区，则分区的完整路径是该路径+分区名。例如<destination path>/p1=v1/p2=v2/。是-c"<condition>"|-...
批量创建质量规则
批量配置调度时，非分区表不会保存校验范围表达式，只会保存调度配置。试跑：支持选择 已有调度 或 自定义校验范围 试跑规则，试跑后，可单击 图标 查看试跑日志。说明 批量试跑时，建议选择相同分区的表。分区信息会直接下放执行，如果...
JindoTable MoveTo命令介绍
表可以是分区表或非分区表。是-d待移动的目标位置。无论是移动分区还是移动非分区表的整表，该位置都对应"表"一级的位置。如果移动的是分区，则分区的完整路径是该路径+分区名。例如<destination path>/p1=v1/p2=v2/。是-c"<condition>"|-...
JindoTable MoveTo命令介绍
表可以是分区表或非分区表。是-d待移动的目标位置。无论是移动分区还是移动非分区表的整表，该位置都对应"表"一级的位置。如果移动的是分区，则分区的完整路径是该路径+分区名。例如<destination path>/p1=v1/p2=v2/。是-c"<condition>"|-...
批量创建质量规则
批量配置调度时，非分区表不会保存校验范围表达式，只会保存调度配置。试跑：支持选择 已有调度 或 自定义校验范围 试跑规则，试跑后，可单击 图标 查看试跑日志。说明 批量试跑时，建议选择相同分区的表。分区信息会直接下放执行，如果...
Spark访问湖仓一体外部数据源
访问基于Hadoop外部数据源的外部项目 MaxCompute SQL访问外部项目表-hadoop_external_project 为外部项目，映射的是EMR的Hive数据库-访问非分区表 SELECT*from hadoop_external_project.testtbl;访问分区表 SELECT*from hadoop_external_...
分区表自动冷存
postgres 数据库中执行以下 SQL，为 db01 数据库创建一个名为 task1 的任务，该任务为每分钟检查子分区表数据，并自动将超过3个子分区的历史子分区转为冷存，并返回任务 ID：每分钟执行 postgres=>SELECT cron.schedule_in_database('task1...
分区表自动冷存
postgres 数据库中执行以下 SQL，为 db01 数据库创建一个名为 task1 的任务，该任务为每分钟检查子分区表数据，并自动将超过3个子分区的历史子分区转为冷存，并返回任务 ID：每分钟执行 postgres=>SELECT cron.schedule_in_database('task1...
多路输出（MULTI INSERT）
单条 multi insert 语句中，对于非分区表，该表不能出现多次。命令格式 from<from_statement>insert overwrite|into table[partition()]<select_statement1>insert overwrite|into table[partition()]<select_statement2>.;from_statement...
JindoTable表或分区访问冷度收集
第二列为分区名字，格式：第一分区列=列值/第二分区列=列值/.，如果表为非分区表则为空。第三列为最近一次访问的时间，格式：yyyy-MM-dd HH:mm:ss。说明 如果为分区表，则只显示到分区级别，表本身不会单独显示。JindoTable使用详情，请...
JindoTable表或分区访问冷度收集
第二列为分区名字，格式：第一分区列=列值/第二分区列=列值/.，如果表为非分区表则为空。第三列为最近一次访问的时间，格式：yyyy-MM-dd HH:mm:ss。说明 如果为分区表，则只显示到分区级别，表本身不会单独显示。JindoTable使用详情，请...
JindoTable表或分区访问冷度收集
第二列为分区名字，格式：第一分区列=列值/第二分区列=列值/.，如果表为非分区表则为空。第三列为最近一次访问的时间，格式：yyyy-MM-dd HH:mm:ss。说明 如果为分区表，则只显示到分区级别，表本身不会单独显示。JindoTable使用详情，请...
JindoTable表或分区访问冷度收集
第二列为分区名字，格式：第一分区列=列值/第二分区列=列值/.，如果表为非分区表则为空。第三列为最近一次访问的时间，格式：yyyy-MM-dd HH:mm:ss。说明 如果为分区表，则只显示到分区级别，表本身不会单独显示。JindoTable使用详情，请...
- 产品推荐
- 这些文档可能帮助您