Sqoop概述
Sqoop是一款Apache社区的开源软件，支持在Hadoop生态软件和结构化数据集（例如数据库）之间进行高效的批量数据传输。背景信息 常见数据传输场景如下：将MySQL数据导入HDFS 将HDFS数据导入MySQL 将Hive数据导入MySQL 将MySQL数据导入Hive 将...
主键列自增
设置非分区键的主键列为自增列后，在写入数据时，无需为自增列设置具体值，表格存储会自动生成自增列的值。该值在分区键级别唯一且严格递增。前提条件 已初始化Client。具体操作，请参见 初始化。使用方法 创建表时，将非分区键的主键列...
DB管理
本文为您介绍在交互式分析Hologres管理控制台的Database管理页面，如何创建并删除数据库，并为数据库选择对应的权限策略。授权数据库 您可以在DB管理页面，使用可视化方式创建数据库。登录 Hologres管理控制台，单击 前往HoloWeb，进入...
写入语法
判断数据冲突与否的依据是主键，不定义主键也可以使用 INSERT INTO。如遇数据重复（主键冲突），默认忽略该行。INSERT INTO 在VALUES中没有指定值的列，系统会自动补默认值（DDL中定义的默认值）。样例：#单条写入，指定列 insert into t(c...
主键列自增
设置非分区键的主键列为自增列后，在写入数据时，无需为自增列设置具体值，表格存储会自动生成自增列的值。该值在分区键级别唯一且严格递增。前提条件 已初始化Client。具体操作，请参见 初始化。使用方法 创建表时，将非分区键的主键列...
DDL差异
MySQL 云原生数据仓库AnalyticDB MySQL 定义 ALTER DATABASE 不支持 修改数据库属性。ALTER EVENT 不支持 修改现有事件的一个或多个特征。ALTER FUNCTION 不支持 修改函数的定义。ALTER LOGFILE GROUP 不支持 修改日志文件组。ALTER ...
OTSReader常见问题
假设Tablestore数据表有两个主键列，以全表同步为例，则OTSReader中应该配置的range范围如下："range":{"begin":[{"type":"INF_MIN"},{"type":"INF_MIN"}],"end":[{"type":"INF_MAX"},{"type":"INF_MAX"}]} OTSReader运行时出现“Input ...
CREATE STREAM
KEY_VALUE：必选项，指定数据流表的主键列。STREAM_TOPIC：必选项，指定数据流表的物理数据存储在流存储的某个Topic上。TIMESTAMP：可选项，指定时间戳列。示例 CREATE STREAM users_original(registertime bigint,gender varchar,regionid...
命名规则和数据类型
通过本文您可以了解 表格存储 的表名和列名的命名规则，以及主键列和属性列支持的数据类型。命名规则 表名和列名必须符合以下规则。规范项 说明 组成 由英文字符（a~z）或（A~Z）、数字（0~9）和下划线（_）组成。首字母 必须为英文字母（a...
列存在性查询
ExistsQuery也叫NULL查询或者空值查询，一般用于判断稀疏数据中某一行的某一列是否存在。例如查询所有数据中address列不为空的行。说明 要对Nested字段进行列存在性查询（ExistsQuery）时，请使用嵌套类型查询（NestedQuery）进行嵌套。...
数据类型
VARBINARY byte[]变长二进制类型，作为主键时只能是最后一列主键。DATE java.sql.Types#DATE 日期时间。重要 该数据类型仅存储日期部分，不包含时间信息。在时区转换过程中，由于时区的影响可能会导致日期的不准确，因此不推荐使用。TIME ...
PlainBuffer
} 举例 假设一行数据有两列主键，4 列数据。其中主键类型为 string 和 integer，3 列数据中分别是 string、integer 和 double，版本分别是 1001、1002 和 1003，还有一列是删除所有版本。主键列：[pk1:string:iampk][pk2:integer:100]属性...
使用二级索引读取数据
使用SDK时出现Validate PK name fail异常 相关文档 当日常业务中有非主键列查询、多列组合查询、模糊查询等多维查询需求以及求最值、统计行数、数据分组等数据分析需求时，您可以将这些属性作为多元索引中的字段并使用多元索引查询与分析...
BLOB数据类型（邀测中）
宽表引擎2.6.4及以上版本，通过 ALTER TABLE ADD COLUMN 添加BLOB列时，系统默认以数据库名和表名来拼接 BLOB_BUCKET_NAME。如果拼接后的 BLOB_BUCKET_NAME 不满足BUCKET命名规则，则该语句将报错。此时您可以显式自定义一个符合命名规则的...
列存在性查询
ExistsQuery也叫NULL查询或者空值查询，一般用于判断稀疏数据中某一行的某一列是否存在。例如查询所有数据中address列不为空的行。说明 要对Nested字段进行列存在性查询（ExistsQuery）时，请使用嵌套类型查询（NestedQuery）进行嵌套。...
列存在性查询
ExistsQuery也叫NULL查询或者空值查询，一般用于判断稀疏数据中某一行的某一列是否存在。例如查询所有数据中address列不为空的行。说明 要对Nested字段进行列存在性查询（ExistsQuery）时，请使用嵌套类型查询（NestedQuery）进行嵌套。...
列存在性查询
ExistsQuery也叫NULL查询或者空值查询，一般用于判断稀疏数据中某一行的某一列是否存在。例如查询所有数据中address列不为空的行。说明 要对Nested字段进行列存在性查询（ExistsQuery）时，请使用嵌套类型查询（NestedQuery）进行嵌套。...
列存在性查询
ExistsQuery也叫NULL查询或者空值查询，一般用于判断稀疏数据中某一行的某一列是否存在。例如查询所有数据中address列不为空的行。说明 如果需要查询某一列为空，则需要和BoolQuery中的must_not_queries结合使用。以下情况会认为某一列不...
修改表 ALTER TABLE 的不兼容点
本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时，MySQL 数据库执行的 ALTER TABLE DDL 支持被数据传输的 DDL 同步组件转换，但 OceanBase 数据库 MySQL 租户不支持执行的场景。行内 CHECK 表达式中引用了其它列 ...
索引优化
AnalyticDB PostgreSQL版 数据库支持B-Tree、Bitmap，BRIN，GiST和GIN索引，不支持Hash索引。每一种索引类型都使用一种不同的算法，它们最适合的查询类型也不同。B-Tree索引适合于最常见的情况并且是默认的索引类型。说明 AnalyticDB ...
一级分区的规划和设计（2.0版）
如何评估表数据是否倾斜 登录 分析型数据库MySQL版控制台，单击 监控信息>DB表概览，查看 表明细 部分，对于存在数据倾斜的表已经标红处理，需要用户及时更换分区列。名字没有标红的表，用户也可以单击表名来查看数据分布。
数据转发到表格存储（Tablestore）
设备元数据（例如设备标签、属性和状态数据）具有高频更新、查询能力要求高等特点，可用于设备管理、设备圈选、设备状态查询，需要支持高并发低延迟的数据更新、多维度检索、地理空间检索以及数据实时计算与分析。表格存储（Tablestore）的...
聚集列（2.0版）
在分析型数据库MySQL版中，数据存储支持按一列或多列进行排序（先按第一列排序，第一列相同情况下使用第二列排序），以保证该列中值相同或相近的数据保存在磁盘同一位置，这样的列我们称之为聚集列。当以聚集列为查询条件时，由于查询结果...
通过Mongo Shell管理数据库账号
roles":[{"role":"readAnyDatabase","db":"admin"}]} 查询目标数据库的所有数据库账号 说明 您可以通过 use database_name 命令切换数据库，其中 database_name 为目标数据库的名称。方式一：在目标数据库执行查询命令。show users 说明 ...
SHOW COLUMNAR INDEX
查询当前数据库上xxx_tb的列存索引信息 SHOW COLUMNAR INDEX FROM xxx_db.xxx_tb;查询xxx_db上xxx_tb的列存索引信息（跨库查询时使用）通过SHOW INDEX也可查看索引信息，详细内容请参见 SHOW INDEX。示例 SHOW COLUMNAR INDEX;SCHEMA|TABLE...
使用二级索引读取数据
使用SDK时出现Validate PK name fail异常 相关文档 当日常业务中有非主键列查询、多列组合查询、模糊查询等多维查询需求以及求最值、统计行数、数据分组等数据分析需求时，您可以将这些属性作为多元索引中的字段并使用多元索引查询与分析...
预定义列操作
definedColumns 为数据表预先定义一些非主键列以及其类型，可以作为索引表的属性列或索引列。包含如下设置：name：预定义列名称。type：预定义列的数据类型。示例 以下示例用于为数据表增加预定义列，预定义列分别为definedColumnName01...
OceanBase 数据库 MySQL 租户的数据至 AnalyticDB ...
本文为您介绍如何同步 OceanBase 数据库 MySQL 租户的数据至云原生数据仓库 AnalyticDB MySQL 版。背景信息 AnalyticDB MySQL 版的基本介绍请参见 基础数据类型。AnalyticDB MySQL 版的建表、分区表和分布表的详情请参见 CREATE TABLE。...
PolarDB-X 2.0迁移至Tablestore
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
MySQL一键实时同步至MaxCompute
功能 描述 为非主键表选择主键 由于当前方案不支持无主键表同步，所以您需要单击 同步主键 列的 按钮，为无主键表设置 自选主键，即选择表中一个或部分字段作为主键，写入目标端时将会使用该主键进行去重。本案例为无主键表 doc_tb2_nopk ...
MySQL一键实时同步至MaxCompute
功能 描述 为非主键表选择主键 由于当前方案不支持无主键表同步，所以您需要单击 同步主键 列的 按钮，为无主键表设置 自选主键，即选择表中一个或部分字段作为主键，写入目标端时将会使用该主键进行去重。本案例为无主键表 doc_tb2_nopk ...
预定义列操作
DefinedColumns 为数据表预先定义一些非主键列以及其类型，可以作为索引表的属性列或索引列。包含如下设置：Name：预定义列名称。ColumnType：预定义列的数据类型。示例 为sampleTable数据表增加预定义列，预定义列分别为definedColumnName...
PolarDB-X 2.0同步至Tablestore
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
CREATE TABLE
PRIMARY KEY-列约束 PRIMARY KEY(column_name[,.])-表约束 主键约束指定表的一列或多列只能包含唯一（非重复）的非 Null 值。从技术方面而言，PRIMARY KEY 只是 UNIQUE 和 NOT NULL 的组合，不过将一组列标识为主键时还会提供有关 schema ...
多元索引介绍
当日常业务中有非主键列查询、多列组合查询、模糊查询等多维查询需求以及求最值、统计行数、数据分组等数据分析需求时，您可以将这些属性作为多元索引中的字段并使用多元索引查询与分析数据。背景信息 多元索引可以解决大数据中复杂的查询...
地理位置查询
通过设置columnsToGet参数可以指定返回的列或返回所有列，如果不设置此参数，则默认只返回主键列。SearchRequest.ColumnsToGet columnsToGet=new SearchRequest.ColumnsToGet();columnsToGet.setReturnAll(true);设置为返回所有列。...
多元索引功能
多元索引的核心功能包括任意列的查询（包括主键列和非主键列）、多字段自由组合查询、地理位置查询、全文检索、模糊查询、前缀查询、嵌套查询、去重、排序、查询数据总行数和统计聚合，请根据实际场景需要使用。多元索引部分功能可以实现与...
性能调优
RowUpdateChange 根据主键更新部分非主键列，主键值不变。由于DLA目前不支持UPDATE语句，只能通过INSERT+Hint的方式更新Tablestore数据。是否允许使用宽松的CAST 通过 ots-loose-cast=true/false 设置SQL中是否允许使用宽松的CAST，例如...
UPDATE
dblink 用于标识远程数据库的 database link 名称。有关 database link 的信息，请参见 CREATE DATABASE LINK 命令。column 表中的列名。expression 要分配给列的表达式。表达式可以使用表中此列和其他列的旧值。DEFAULT 将列设置为其默认...
前缀查询
PrefixQuery根据前缀条件查询表中的数据。对于Text类型字段，只要分词后的词条中有词条满足前缀条件即可。前提条件 已初始化OTSClient。具体操作，请参见 初始化。已创建数据表并写入数据。已在数据表上创建多元索引。具体操作，请参见 ...
- 产品推荐
- 这些文档可能帮助您