添加数据集
DataV数据集支持多种数据源的接入，如数据库、excel表格文件等，通过对数据的结构化存储和元数据的汇集整理，提供高效实用的数据建模能力，可用的算子包括常见的数据聚合函数、按不同时间粒度划分、地理信息处理等。本文为您介绍如何在...
通用限制
读请求中columns_to_get参数的列的个数 0~128个 读请求一行数据中获取的列的最大个数。表元数据操作QPS 10次/秒 一个实例的表元数据操作每秒不超过10次，关于表元数据的具体操作，请参见 数据表操作。单表UpdateTable的次数 无限制 需要...
通用属性
本文主要介绍了table_mapping和column_mapping的表属性定义方法。table_mapping 当DLA里面的表名跟底层数据的... 说明 DLA的列名 id 对应底层数据的 identifier,name 对应底层数据的 title，如果DLA中没有指定 age，则对应底层数据的 age。
索引管理
表数据量大，数据物理分布有一定有序性，查询条件为<、、=、>=或>，过滤效果较好的情况下，使用BRIN索引 在大数据集的情况下，BRIN索引与B-Tree索引相比，占用的空间极小，性能相同。如何选择合适的列创建索引：索引在连接中用到的列 频繁...
图层配置项说明
当在可视化应用中需要对三维城市项目图层做出更多类型数据源或者数据交互需求时，则建议您将后续需要修改数据的图层一键生成区块接口，再在可视化应用中配置数据。单击场景编辑器页面右上角的 图标，在预览页面中，您可以单击左侧的 测试...
图层配置项说明
当在可视化应用中需要对三维城市项目图层做出更多类型数据源或者数据交互需求时，则建议您将后续需要修改数据的图层一键生成区块接口，再在可视化应用中配置数据。单击场景编辑器页面右上角的 图标，在预览页面中，您可以单击左侧的 测试...
图层配置项说明
当在可视化应用中需要对三维城市项目图层做出更多类型数据源或者数据交互需求时，则建议您将后续需要修改数据的图层一键生成区块接口，再在可视化应用中配置数据。单击场景编辑器页面右上角的 图标，在预览页面中，您可以单击左侧的 测试...
REPLACE SELECT FROM
column_name：列名，如果需要将源表中的部分列数据插入到目标表中，SELECT 子句中的列必须与 REPLACE 子句中列的顺序、数据类型一致。注意事项 执行 REPLACE SELECT FROM 命令时，需先创建待写入数据的目标表。示例 以指定列名的方式，从...
创建及管理内部表
字段名 表中每一列的标识。数据类型 字段的属性。主键 确定列的唯一标识。可空 字段可以为空值。数组 有序的元素序列。描述 字段的相关描述。操作 包括 删除、上移 和 下移。属性 存储模式 包括 列存 和 行存 两种存储模式。默认为 列存。...
表基础
例如，一个被声明为数字类型的列将不会接受任何文本串，而存储在这样一列中的数据可以用来进行数学计算。反过来，一个被声明为字符串类型的列将接受几乎任何一种的数据，它可以进行如字符串连接的操作但不允许进行数学计算。本数据库包括了...
同步数据
本文介绍了多种同步数据的方式。分析型数据库MySQL版支持多种数据加载方式，包括但不限于：通过阿里云数据传输服务DTS将MySQL/DRDS中的数据导入分析型数据库MySQL版，其中MySQL可为RDS for MySQL、其他云厂商或线上IDC的自建MySQL以及ECS自...
插入数据
注意：必须使用单引号将数据引用起来，数据的维数与 定义向量列 时指定的维度相同。明文：'[1,2,3,4]' 或者 '{1.0,2.0,3.0,4.0}' Base64编码：'MTIzNA=' 以下使用Base64解码完成byte[]数据类型和float[]数据类型的解码。public static ...
表
对于内部表，所有的数据都被存储在MaxCompute中，表中列的数据类型可以是MaxCompute支持的任意一种 数据类型版本说明。对于外部表，MaxCompute并不真正持有数据，表格的数据可以存放在 OSS 或 OTS 中。MaxCompute仅会记录表格的Meta信息，...
数据库恢复
通过MyBase MySQL数据库恢复功能，可以将已备份的数据恢复到另一个新实例上。本文介绍如何进行数据恢复。前提条件 原实例需要满足如下条件：运行中且没有被锁定。当前没有迁移任务。如果要按时间点进行恢复，需要确保日志备份已开启。操作...
创建OSS数据源
通过创建OSS数据源能够实现Dataphin读取OSS的业务数据或向OSS写入数据。本文为您介绍如何创建OSS数据源。背景信息 OSS即阿里云对象存储OSS。如果您使用的是阿里云对象存储OSS，在对接Dataphin进行数据开发或将Dataphin的数据写入至OSS时，...
使用INSERT ON CONFLICT覆盖写入数据
本文介绍在AnalyticDB PostgreSQL版数据库中，如何使用INSERT ON CONFLICT语法覆盖写入数据。针对数据写入时有主键冲突的情况，INSERT ON CONFLICT语法可以将冲突主键的INSERT行为转换为UPDATE行为，从而实现冲突主键的覆盖写入。该特性又...
创建OSS数据源
通过创建OSS数据源能够实现Dataphin读取OSS的业务数据或向OSS写入数据。本文为您介绍如何创建OSS数据源。背景信息 OSS即阿里云对象存储OSS。如果您使用的是阿里云对象存储OSS，在对接Dataphin进行数据开发或将Dataphin的数据写入至OSS时，...
最佳实践
提供数据位置提示 如果您通常希望在查询谓词中使用一个列，并且该列具有较高的基数（即，大量不同的值），则使用Z-ORDER-BY。Delta-Lake根据列值自动布局文件中的数据，并在查询时使用布局信息跳过不相关的数据。有关详细信息，请参见 Z-...
HBase Shell使用介绍
查询指定表的数据 scan 是一种访问HBase数据的方式，它非常的灵活，scan 操作可以用它来扫描全表，也可以用它查询固定范围。查询速度会比查询单条（使用 get）数据略慢一些，这里因为我们的demo数据库数据并不多，所以我们全部取出来。执行...
BLOB数据类型（邀测中）
BLOB（Binary Large Object）即二进制大对象，通常用于存储较大的二进制文件，例如音频、视频、图像等文件。Lindorm宽表SQL支持BLOB数据类型，使用时可以直接将Lindorm宽表中的一个非主键列的数据类型定义为BLOB类型。本文介绍如何使用...
监测数据质量
列中唯一值的个数（固定值）：检验某列中唯一值的个数是否满足预期，例如配置某列中唯一值的个数大于等于100，以保障所有数据中一定会出现100个不同的值。列中重复值的个数（固定值）：检验某列中重复的个数是否满足预期，例如配置某列中...
使用限制
数据库对象 说明 database名称 由大写字母、小写字母、数字、下划线其中的一种或多种组成，长度为2~64个字符。database数量 一个实例最多创建16个数据库（包含default数据库）。table名称 由大写字母、小写字母、数字、下划线其中的一种或...
宽表模型介绍
宽表（WideColumn）模型是类Bigtable/HBase模型，可应用于元数据、大数据等多种场景，支持数据版本、生命周期、主键列自增、条件更新、过滤器等功能。宽表模型在车联网场景中主要用于车辆元数据的存储与分析。说明 关于宽表模型的更多信息...
查看同步任务
DataHub DataConnector是把DataHub服务中的流式数据同步到其他云产品中的功能，目前支持将Topic中的数据实时/准实时同步到MaxCompute(ODPS)、OSS、ElasticSearch、RDS Mysql、ADS、TableStore中。用户只需要向DataHub中写入一次数据，并在...
备份大小
选择 备份设置 页签，单击 备份设置 后的 编辑，然后减少数据的 备份周期。减少日志备份大小 登录 云数据库专属集群控制台。在页面左上角，选择目标地域。在左侧导航栏中，选择 实例列表>MySQL。找到目标实例，单击 操作 列的 详情。在左侧...
添加实时数仓Hologres数据源
本文档介绍如何在DataV中添加并使用实时数仓Hologres数据源。前提条件 已准备好待添加的实时数仓Hologres数据源。通过内网添加数据源操作步骤 登录 DataV控制台。在 我的数据 页签中选择 数据源管理，单击 添加数据。从 类型 列表中，选择 ...
添加实时数仓Hologres数据源
本文档介绍如何在DataV中添加并使用实时数仓Hologres数据源。前提条件 已准备好待添加的实时数仓Hologres数据源。添加实时数仓Hologres数据源操作步骤 登录 DataV控制台。在 工作台 页面，单击 数据准备>数据源，进入 数据源 页面，单击 ...
表分布定义
建表语句 CREATE TABLE 支持如下三个分布策略的子句：分布方式 说明 哈希分布 DISTRIBUTED BY(column,[.])数据将根据分布列的哈希值将各个行分布到指定计算节点上，相同的哈希值会始终散列到同一计算节点。为保障数据可以均匀分布在各个...
快速体验
DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力，本文以一个零售电商行业的数仓搭建实验为例，为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现，帮助您深入了解阿里云...
功能特性
数据库割接 周期性任务 定时全量迁移 通过数据集成功能的调度策略配置，定期地将源库中的结构和存量数据迁移至目标库中。配置RDS MySQL间的数据集成任务 账号迁移 全量账号迁移 在配置同步或迁移任务过程中启用账号迁移功能，帮助您方便...
列存索引技术架构介绍
同时，结合 PolarDB 基于共享存储一写多读的架构特征，其包含如下几个关键的技术创新点：存储引擎（InnoDB）支持存储列式索引（Columnar Index），用户可以通过DDL语句为一张表中的全部列或者部分列创建列索引，列索引采用列压缩存储，其...
数据标准
添加数据标准 添加数据标准的方式有两种，第一种是手动在平台中单个添加标准，第二种是通过Excel的形式批量将数据标准维护到平台中去。进入【数据标准】模块，点击‘“创建数据标准”按钮即可进入数据标准添加页面。根据选项填写数据标准的...
添加TableStore数据源
重要 当表中存在多个主键列时，设置的主键列个数与数据类型必须和数据表的主键列个数与数据类型一致。columns 填写需要返回的列名。选择 getRange 操作，可读取指定主键范围内的数据，参数格式如下。{"table_name":"test","direction":...
创建表 CREATE TABLE 的不兼容点
本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时，MySQL 数据库执行的 CREATE TABLE DDL 支持被数据传输的 DDL 同步组件转换，但 OceanBase 数据库 MySQL 租户不支持执行的场景。在生成列的基础上再定义生成列 通过 ...
添加ClickHouse数据源
本文档介绍在DataV中添加ClickHouse数据源的方法，以及相关参数配置说明。前提条件 已准备好待添加的ClickHouse数据源。通过内网添加数据源操作步骤 登录 DataV控制台。在 我的数据 页签中选择 数据源管理，单击 添加数据。从 类型 列表中...
修改表 ALTER TABLE 的不兼容点
本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时，MySQL 数据库执行的 ALTER TABLE DDL 支持被数据传输的 DDL 同步组件转换，但 OceanBase 数据库 MySQL 租户不支持执行的场景。行内 CHECK 表达式中引用了其它列 ...
添加TableStore数据源
注意 当表中存在多个主键列时，设置的主键列个数与数据类型必须和数据表的主键列个数与数据类型一致。columns 填写需要返回的列名。选择 getRange 操作，可读取指定主键范围内的数据，参数格式如下。{"table_name":"test","direction":...
添加AnalyticDB for MySQL数据源
本文为您介绍在DataV中添加AnalyticDB for MySQL数据源的方法。前提条件 已准备好待添加的AnalyticDB for MySQL数据源。通过内网添加数据源操作步骤 登录 DataV控制台。在 我的数据 页签中选择 数据源管理，单击 添加数据。在 类型 列表中...
名词解释
PRIMARY KEY 〇 〇 Primary Key（主键）用于唯一标识表中每个记录的一列或一组列。主键的值在表中是唯一的，且不允许为空。在宽表中，主键可以由一个或多个列组成。在时序表中，主键必须由一个时间戳列和一个或多个标签列组成。重要 在宽表...
设置数据保留策略
InfluxDB的数据保留策略可以定义数据在InfluxDB中保存时间，本文介绍如何设置数据保留策略。前提条件 已创建数据库。具体操作，请参见 创建数据库。数据保留策略介绍 InfluxDB可以通过定义数据保留策略，用来控制存储数据量的方式。新创建...
- 产品推荐
- 这些文档可能帮助您