CREATE FOREIGN TABLE
被标记为NO INHERIT的约束将不会传播到子表上。说明 该子句只是为了兼容非标准的SQL数据库，不建议使用。DEFAULT default_expr DEFAULT子句为包含它的列定义赋予一个默认数据值。该值是任意不包含变量的表达式（不允许子查询和对当前表中...
配置并管理实时同步任务
功能 描述 为非主键表选择主键 由于当前方案不支持无主键表同步，所以您需要单击 同步主键 列的 按钮，为无主键表设置 自选主键，即选择表中一个或部分字段作为主键。选择表建立方式 支持 自动建表 和 使用已有表。当 表建立方式 选择 使用...
边界生成器功能介绍
删除列字段 单击属性表面板右上角的 删除列 按键，在弹窗出来的 删除列字段 对话框中，输入属性列表中已有的某个字段名称，再单击对话框右下角的 确定 即可删除该字段列内容。升降序属性表内容 单击属性表中的 gid 列标题处，单击即可选择...
边界生成器功能介绍
删除列字段 单击属性表面板右上角的 删除列 按键，在弹窗出来的 删除列字段 对话框中，输入属性列表中已有的某个字段名称，再单击对话框右下角的 确定 即可删除该字段列内容。升降序属性表内容 单击属性表中的 gid 列标题处，单击即可选择...
二级索引
create_index-t mytable-n index2-i local-k uid,name-a col0,col1 使用表 选择需要进行操作的表，用于后续表操作或者数据操作。命令格式 use-wc-t配置项说明请参见下表，配置项 是否必填 示例值 说明-wc 否 不涉及 表示操作的表为数据表...
数据脱敏
脚本：以敏感列所属的库名、表名、列名、列备注和数据类型作为识别对象，填写 Groovy 脚本作为识别规则。重要 脚本的输出必须为布尔值，即 True 或者 False。配置项 是否必填 说明 规则名称 是 识别规则的名称（长度不能超过 64 个字符）。...
一键实时同步至Hologres
功能 描述 为非主键表选择主键 由于当前方案不支持无主键表同步，所以您需要单击 同步主键 列的 按钮，为无主键表设置 自选主键，即选择表中一个或部分字段作为主键。选择表建立方式 支持 自动建表 和 使用已有表。当 表建立方式 选择 使用...
通过Lindorm Shell访问宽表引擎
put '表名','Rowkey','列族名:列名','数值' 示例如下：put 'test','row1','cf:a','value1' put 'test','row2','cf:b','value2' put 'test','row3','cf:c','value3' 说明 row1 为表 test 的Rowkey，cf:a 表示自定义列的列族名和列名，value1...
构建全量数据索引
宽表和索引表的列映射关系配置完成后，实时写入宽表中的数据将自动同步到索引表中。对于宽表中的全量数据，需要手动执行全量构建索引才可以完成数据同步。本文介绍通过构建索引完成全量数据同步。前提条件 已安装Java环境，要求安装JDK 1.8...
列存在性查询
已在数据表上创建多元索引。具体操作，请参见 创建多元索引。参数 参数 说明 field_name 列名。query 设置查询类型为ExistsQuery。get_total_count 是否返回匹配的总行数，默认为False，表示不返回。返回匹配的总行数会影响查询性能。table...
Kafka单表实时入湖OSS（HUDI）
保存 建表结构 或者选择 使用已有表 时，系统会自动按照 同名映射 原则生成上游列与OSS表列之间的映射，您可根据需要进行调整，支持一个上游列映射到多个OSS表列，不允许多个上游列映射到一个OSS表列，当上游列未配置到OSS表列的映射时，...
CREATE TABLE AS
该表的列具有和 SELECT 的输出列相关的名称和数据类型（不过可以通过给出一个显式的新列名列表来覆盖这些列名）。CREATE TABLE AS 和创建一个视图有些相似，但是实际上非常不同：它会创建一个新表并且只计算该查询一次用来初始填充新表。这...
朴素贝叶斯
在画布中单击 读数据表-1 组件，在右侧 表选择 页签，配置 表名 为train_data。在画布中单击 读数据表-2 组件，在右侧 表选择 页签，配置 表名 为test_data。在画布中单击 朴素贝叶斯-1 组件，在右侧配置如下表中的参数，其余参数使用默认...
数据存储量如何计量
开启多版本或设置数据表生命周期后，每一个版本的数据需要包括版本号（占用8字节）、列名和数据值。存储空间的计算公式：单行数据量=主键列的数据量+所有属性列的数据量 其中：主键列的数据量=主键列的名字长度之和+主键列的值的数据量之和...
列存在性查询
已在数据表上创建多元索引。具体操作，请参见 创建多元索引。参数 参数 说明 fieldName 列名。query 设置查询类型为TableStore.QueryType.EXISTS_QUERY。getTotalCount 是否返回匹配的总行数，默认为false，表示不返回。返回匹配的总行数会...
通过开源客户端访问并使用搜索索引
例如将表 testTable 中的 f:name（列族为f，列名为name）这一列映射到索引表 democollection 的 name_s 这一列。在HBase Shell解压文件的 bin 目录中创建JSON文件（文件名为 schema），将以下代码复制至JSON文件中。{"sourceNamespace":...
通过元数据发现导入至湖仓版
系统会根据您选择的 OSS目录位置 自动将 OSS目录位置 后的第一层目录名映射为表名，OSS目录位置 后的第二层至最后一层目录名映射为分区，示例如下。OSS路径 OSS目录位置 映射到AnalyticDB MySQL的表 oss:/adb/Table1/file1.csv oss:/adb/...
CREATE TABLE
更多修改非空属性信息，请参见 修改表的列非空属性。default_value 可选。指定列的默认值，当 insert 操作不指定该列时，该列写入默认值。table_comment 可选。表注释内容。注释内容为长度不超过1024字节的有效字符串，否则报错。...
组合类型
普通的限定列名语法 table_name``.``column_name 可以理解为把字段选择应用在该表的当前行的组合值上（由于效率的原因，实际上不是以这种方式实现）。当我们写 SELECT c.*FROM inventory_item c;时，根据 SQL 标准，我们应该得到该表展开成...
表格存储建表注意事项
在应用程序写入数据时，表格存储需要应用程序指定数据所有列（主键列及属性列）的列名和列值。如何理解建表时主键（Primary Key）的第一列为分区键（Partition Key）？主键的第一列为分区键，可以理解为当表的数据量达到一个设定值时，表格...
表操作篇
其次，表中存在大量冷数据会导致数据访问压力不均匀，从而导致表上配置的预留读/写吞吐量无法被充分利用。例如，已经毕业的学生的卡片，不会再产生消费记录。假如 CardID 是随着卡片申请时间递增的，以 CardID 作为分区键，会导致已经毕业...
使用DTS同步RDS MySQL数据到AnalyticDB MySQL 2.0
数据同步支持库、表、列名映射，您可以进行不同库名之间的数据或两个不同表名之间的数据同步。注意事项 配置同步链路 过程中，如果目标表中列信息与源表不同，DTS支持字段映射功能。详细步骤，请参见 库表列映射。如果需要同步的表数量较少...
ALTER TABLE
name|ALL|USER]OWNER TO { new_owner|CURRENT_USER|SESSION_USER } REPLICA IDENTITY { DEFAULT|USING INDEX index_name|FULL|NOTHING } 说明 当基础表上建有简单视图，支持直接修改基础表列的数据类型（alter table alter column），无需...
治理分析
参数 描述 治理项名称 存储的治理项包括 生命周期过长、未管理表、废弃表、空表、逻辑未管理表、逻辑废弃表、逻辑空表 和 黑盒物化空表。健康分扣分 系统中治理项的扣分。待治理存储量 需治理但还未治理的存储量。待处理表数 需治理但还未...
治理分析
参数 描述 治理项名称 存储的治理项包括 生命周期过长、未管理表、废弃表、空表、逻辑未管理表、逻辑废弃表、逻辑空表 和 黑盒物化空表。健康分扣分 系统中治理项的扣分。待治理存储量 需治理但还未治理的存储量。待处理表数 需治理但还未...
多元索引嵌套类型
当查询条件中使用嵌套类型的列时，嵌套类型列下的子列列名格式为 `嵌套列名.子列名`。如果嵌套类型为多层嵌套，则继续向后添加子列名即可，使用半角句号（.）进行连接。例如嵌套类型列名为 col_nested，子列名为 col_long，则该子列作为...
配置SQL赋值节点
变量在任务节点中的应用如下：在单实例SQL节点中，变量可以作为表名，或用在筛选条件中。在脚本代码节点中，变量可以作为脚本的参数。在Lindorm文件检查节点中，变量可以作为文件名。操作步骤 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 ...
通过日志服务迁移日志数据至MaxCompute
说明 日志服务数据的一个字段最多允许映射到一个MaxCompute表的列（数据列或分区列），不支持字段冗余，同一个字段名第二次使用时其投递的值为null，如果null出现在分区列会导致数据无法被投递。MaxCompute分区列 按顺序左边填写与...
MySQL一键实时同步至MaxCompute
功能 描述 为非主键表选择主键 由于当前方案不支持无主键表同步，所以您需要单击 同步主键 列的 按钮，为无主键表设置 自选主键，即选择表中一个或部分字段作为主键，写入目标端时将会使用该主键进行去重。本案例为无主键表 doc_tb2_nopk ...
MySQL一键实时同步至MaxCompute
功能 描述 为非主键表选择主键 由于当前方案不支持无主键表同步，所以您需要单击 同步主键 列的 按钮，为无主键表设置 自选主键，即选择表中一个或部分字段作为主键，写入目标端时将会使用该主键进行去重。本案例为无主键表 doc_tb2_nopk ...
基础概念
分片规格 即计算资源的规格 分片 即分列，列是partition的意思，如果索引量太大，单机无法放下，可以按某一列（比如item_id）做hash分成多列，列与列之间数据不一样，但是配置是一样的。每个请求过来BE会请求多列，将所有列结果合并后才能...
创建数据表
使用CreateTable接口创建数据表时，需要指定数据表的结构信息和配置信息，高性能实例中的数据表还可以根据需要设置预留读/写吞吐量。创建数据表的同时支持创建一个或者多个索引表。说明 创建数据表后需要几秒钟进行加载，在此期间对该数据...
继承
父表上的所有检查约束和非空约束都将自动被它的后代所继承，除非显式地指定了 NO INHERIT 子句。其他类型的约束（唯一、主键和外键约束）则不会被继承。一个表可以从超过一个的父表继承，在这种情况下它拥有父表们所定义的列的并集。任何...
使用MaxCompute控制台（离线）
说明 例如：待上传的数据中，某列值为含字母的字符串类型，但对应目标表的列是BIGINT类型，那么该数据将被视为脏数据。若选择了剔除脏数据，则该条数据不会被上传。是：剔除待上传文件中与目标表中的列类型不统一的数据。否：数据全量上传...
数据表管理
表约束的定义 您可以在列和表上定义约束来限制表中的数据，但是有以下一些限制：CHECK约束引用的列只能在其所在的表中。UNIQUE和PRIMARY KEY约束必须包含分布键列，UNIQUE和PRIMARY KEY约束不支持追加优化表和列存表。允许FOREIGN KEY 约束...
创建同步ElasticSearch
对于ES6，DataHub同步数据时，将会以用户选择的列的列名作为一条数据的type，如果选择多列，则多列的列名会以“|”分割作为一条数据的type，并且ES6支持以任意名称作为type。例如：DataHub Schema:f1 string,f2 string,f3 string,f4 string...
K均值聚类
K均值聚类首先随机选择K个对象作为每个簇的初始聚类中心，然后计算剩余对象与各簇中心的距离，将其分配至距离最近的簇，再重新计算每个簇的聚类中心。该算法假设聚类对象为空间向量，且以各聚类内部的均方误差和最小为目标，不断地进行计算...
列存索引（IMCI）发布说明
PolarDB MySQL版 重磅推出了列存索引（IMCI）特性。简介 当前主要面向OLTP场景，广泛应用于在线业务，日常产生大量的数据。但是，基于行存的查询性能并不能满足所有应用场景的需求。通常情况下，为了实现复杂分析型查询，需要将数据从 ...
动态增加或删除列存索引的DDL语法
如果表上或列上已存在注释内容，您可以在现有注释内容中添加 COLUMNAR=1，为了直观性，建议将 COLUMNAR=1 添加到注释的前方。如：原有注释内容为 COMMENT 'abc'，添加 COLUMNAR=1 后的内容为 COMMENT 'COLUMNAR=1abc'。示例：CREATE TABLE ...
数据上传
目标表（上传数据至已有表）选择目标表：存放待上传数据的表。支持通过关键字匹配搜索。说明 若上传数据至MaxCompute生产表，则当前登录账号需要为该表的Owner。上传方式：选择以哪种方式将待上传数据添加至目标表中。该参数需要与步骤3...
- 产品推荐
- 这些文档可能帮助您