管理表结构版本
表结构版本介绍 表结构版本基于数据库维度，存储了该库下所有表的结构信息。当该库中的任意表发生结构变更，将触发保存新的表结构版本。当您在DMS中进行以下操作时，会触发保存最新的表结构：在SQL Console中执行修改表结构的SQL。在 普通...
MERGE INTO
当您需要对Transactional表或Transaction Table2.0表执行 insert、update、delete 操作时，可以通过 merge into 功能将这些操作合并为一条SQL语句，根据与源表关联的结果，对目标Transactional表执行插入、更新或删除操作，只需要进行一次...
初始化
TimestreamDBClient是Timestream的客户端，您可以使用TimestreamDBClient进行建表、删表以及读写数据/时间线等操作。上图为TimeStream模型的结构示意图，其中时序数据是存储到数据表中，时间线是存储到元数据表（Meta表）中。数据表可以...
表
说明 DataWorks的数据开发模块可以对MaxCompute表进行新建、收藏、修改数据生命周期管理、修改表结构和数据表/资源/函数权限管理审批等操作。MaxCompute的表格有两种类型：内部表和外部表（MaxCompute 2.0版本开始支持外部表）。对于内部表...
如何实现两表关联查询
表格存储SQL查询中的Join功能可用于实现两表关联查询。具体实现步骤如下：为需要进行关联查询的两个数据表分别创建映射关系。具体操作，请参见 创建表的映射关系。在SELECT语句中使用Join操作进行两表关联查询。具体操作，请参见 查询数据 ...
表详情
表结构对比：将表结构同步至其他表结构或与其他表结构进行对比，更多信息，请参见 结构同步。结构恢复：将表结构同步至空的数据库中，更多信息，请参见 空库初始化。产出信息 当使用任务编排功能对当前表进行加工（数据写入）时，此处会...
管理平台系统表和时序/快照表
设备标签表：存储了已为设备添加的标签信息。设备位置数据表：存储了设备的经纬度和省市信息。时序/快照表 说明 物联网数据服务不区分大小写，如物模型中属性定义Power、power，在数据服务中会被认为是同一个定义，将导致时序表和快照表...
时序分析存储概述
低成本数据存储 冷热数据分层存储，采用不同的存储介质 对于时序的热数据采用 表格存储 行列混合的宽表存储，对于时序全量历史数据采用列存储。高数据压缩率存储 列存储能更好地利用数据重复性，结合RLE、DICTIONARY、DELTA、BIT-PACKING等...
批量或异步插入数据
批量插入数据 默认情况下，每个发送到云数据库ClickHouse的插入操作都会导致云数据库ClickHouse立即在存储中创建一个包含插入的数据以及其他需要存储的元数据信息。因此，相比较发送包含较少数据的大量插入操作，发送包含更多数据的较少...
表结构配置管理
选择工作空间>配置管理>数据接入管理>数据导入>表结构配置，已配置的数据表列表如下图所示。表结构配置列表支持查看、编辑、查看调度任务、移除，但通过API导入的表结构配置（创建者是API同步）不支持编辑、移除。查看表结构配置 单击 查看...
报错：DTS-30019:Can not find column
方法二：重要 双向同步任务、目标表有除DTS以外的数据写入、目标端的表为多对一单向同步架构的目标表（包括一个任务的多张表映射到同一张表和多个任务的表映射到同一张表的场景）时不能使用此方法。将报错的表从同步对象移除，然后启动任务...
表设计最佳实践
本文为您介绍表设计的最佳实践方式，为实际开发提供指导和依据。产生大量小文件的操作 MaxCompute表的小文件会影响存储和计算性能。在进行表设计时，应考虑避开产生大量小文件的操作。会产生大量小文件的操作如下：使用MaxCompute Tunnel ...
常用SQL
CREATE TABLE LIKE MAPPING：自动根据源端的表的结构推断表结构。常见的查询DDL SHOW SCHEMAS：查询用户所有的SCHEMA/DATABASE。SHOW TABLES：查询用户当前SCHEMA下的表。SHOW CREATE TABLE：查看建表语句。SHOW PARTITIONS：列出表的所有...
配置匹配规则
库表重命名<源端库>.<源端表>=<目标端库>.<目标端表>kd_test.person=kd_test_new.person_new 将源端名为 kd_test 的库下名为 person 的表迁移至目标端，并且将库 kd_test 重命名为 kd_test_new，表 person 重命名为 person_new。...
结构迁移操作说明
本文为您介绍数据迁移项目中的结构迁移任务支持的操作。背景信息 结构迁移负责迁移源库中的数据对象定义（表、索引、约束、注释和视图等）至目标库中，会自动过滤临时表。当源端数据库非 OceanBase 数据库时，会依据目标 OceanBase 租户...
表操作
表格存储Java SDK提供了多种表级别的功能。使用表格存储时，您需要创建数据表用于数据存储。一般情况下，创建不带二级索引的数据表即可。您也可以根据实际场景创建所需数据表。如果要使用二级索引加快数据查询效率，请创建带二级索引的数据...
表格存储建表注意事项
表格存储支持半结构化的表，即建表时只需要指定主键列（1至4列），不需要在创建表的时候指定属性列。表格存储表中包含的属性列个数无限制，且每一行数据可以拥有不同数量不同类型的属性列。在应用程序写入数据时，表格存储需要应用程序指定...
pg_repack
PolarDB PostgreSQL版（兼容Oracle）支持通过pg_repack插件对表空间进行重新“包装”，回收碎片空间，有效解决因对全表大量更新等操作引起的表膨胀问题。pg_repack无需获取排它锁，相比CLUSTER或VACUUM FULL更加轻量化。注意事项 pg_repack...
操作汇总
本文介绍 表格存储 的调用说明以及提供的宽表模型和时序模型相关API接口。如需了解 表格存储 各场景的应用案例，请参见 快速玩转Tablestore入门与实战。调用说明 表格存储 API只能通过 表格存储 提供的各语言SDK进行调用，不能直接使用HTTP...
同步节点
当选择星号（*）时，表示数据结构为任意结构，用于对未创建数据模型的表进行操作，此时物理表必须选择已经存在的表。开发数据表 开发环境中源端输入的物理表，在下拉列表中选择。生产数据源 生产环境中使用源端输入的物理表所在资源。生产...
管理离线数据归档
对离线存储中较为久远的数据暂无数据分析需求时，可以通过配置数据归档，来降低数据的存储成本。本文介绍数据归档的使用和计费说明及开启、更改和撤销归档的具体操作。前提条件 已开启产品数据备份。存储数据的归档周期必须小于实例下设备...
同步节点
当选择星号（*）时，表示数据结构为任意结构，用于对未创建数据模型的表进行操作，此时物理表必须选择已经存在的表。开发数据表 开发环境中源端输入的物理表，在下拉列表中选择。生产数据源 生产环境中使用源端输入的物理表所在资源。生产...
电子表格配置操作
您可以在电子表格配置区对电子表格进行一系列的配置操作。前提条件 已登录 Quick BI控制台 并创建电子表格，请参见 创建电子表格。使用限制 仅专业版和高级版单独增购的电子表格支持 多sheet 展示、插入 图表、插入 图片、插入 数据透视表...
原子计数器
将列当成一个原子计数器使用，对该列进行原子计数操作，可用于为某些在线应用提供实时统计功能，例如统计帖子的PV（实时浏览量）等。前提条件 已初始化Client，详情请参见 初始化。已创建数据表并写入数据。限制 只支持对整型列的列值进行...
MERGE INTO
当您需要对Transactional表执行 insert、update、delete 操作时，可以通过 merge into 功能将这些操作合并为一条SQL语句，根据与源表关联的结果，对目标Transactional表执行插入、更新或删除操作，提升执行效率。执行 merge into 操作前...
SQL概述
由于表格存储中原始表的列名大小写敏感，当使用SQL时，原始表的列名会统一转换为小写字母进行匹配，即如果要操作表格存储表中的Aa列，在SQL中使用AA、aa、aA、Aa均可，因此表格存储原始表的列名不能同时为AA、aa、aA和Aa。保留字与关键字 ...
数据集成侧同步任务能力说明
批量修改目标表结构 选中多行记录后，单击 批量修改目标表结构 按钮，可以对选中表进行批量操作。调整完毕后，单击 应用并刷新映射 按钮进行保存。重要 单击 批量修改目标表结构 按钮后，弹窗默认显示选中表字段的交集。在此弹窗中，可以...
库表结构优化
AnalyticDB MySQL版 提供的库表结构优化功能，为用户提供降低集群使用成本，提高集群使用效率的调优建议。本功能持续收集SQL查询的性能指标及其使用到的数据表、索引等信息，并进行算法统计分析，自动给出调优建议，减少用户手动调优的负担...
配置Hologres输出
源端进行 UPDATE 或 DELETE 操作，Hologres会执行相应的 UPDATE 或 DELETE 操作。插入 表示将Hologres作为流存储，通过 INSERT 保存源端同步过来的数据。写入冲突策略 包括 覆盖 和 忽略 两种类型：覆盖：使用源端同步过来的新数据覆盖已有...
原子计数器
将列当成一个原子计数器使用，对该列进行原子计数操作，可用于为某些在线应用提供实时统计功能，例如统计帖子的PV（实时浏览量）等。说明 从Python SDK 5.1.0以上版本开始支持原子计数器功能。前提条件 已初始化Client。具体操作，请参见 ...
新增数据表
当您新建表结构模板后，可基于新建的表结构模板新增数据表。本文介绍通过管理控制台新增数据表的方法。前置准备 在添加数据表前，需确保您已完成以下操作：已安装、部署节点并完成节点间的授权。具体操作，请参见 隐私计算节点。该节点用于...
sample-txc-mt-compensate-simple 样例
该样例工程介绍 TCC 模式下补偿型事务的简单使用方法，即如何通过 GTS 保证下订单、扣库存两个操作事务的一致性。前提条件 在搭建预留型事务样例前，需要先完成以下操作：开通 GTS（创建事务分组）。准备两个 RDS 实例和一个 ECS 实例，...
一键实时同步至MaxCompute
一键实时同步至MaxCompute方案支持全增量一体化同步，先进行全量数据迁移，然后再实时同步增量数据至目标端。本文为您介绍如何创建一键实时同步至MaxCompute任务。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，配置好您...
车辆数据分析和价值挖掘
您可以单击 新建自定义存储表，跳转到 数据服务>数据存储>离线存储>自定义存储表 页面，新建自定义存储表，并按照 交互式分析 时展示的 输出结构 定义表结构。配置 调度策略生效日期、调度周期（小时、天）等。单击 校验设置。在 校验设置 ...
一键实时同步至MaxCompute
一键实时同步至MaxCompute方案支持全增量一体化同步，先进行全量数据迁移，然后再实时同步增量数据至目标端。本文为您介绍如何创建一键实时同步至MaxCompute任务。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，配置好您...
开发后端逻辑流操作代码
自定义后端逻辑流操作基于Java编写，对于熟悉Java的开发者来说，可以运用Java的强大能力来扩展后端逻辑流。前提条件 已安装JDK11+和Maven3.5+。步骤一、下载代码模版 登录 魔笔。在顶部菜单栏选择 应用管理，在左上角搜索框中搜索目标应用...
2022-03-04版本
本文为您介绍2022年3月4日发布的Flink全托管版本的重大功能变更和主要缺陷修复。概述 2022年3月4日正式对外发布VVR 4.0.12版本，该版本是基于Apache Flink 1.13。在本次新版本中，对于常见的Kafka->Flink->Hologres链路，我们支持JSON ...
polar_create_table_with_full_replica_identity
复制标识支持以下几种类型：主键 唯一索引 FULL（整行数据）复制标识默认为主键，如果一个没有主键的表进行逻辑复制，会出现变更操作报错的情况，从而影响业务的正常运行。报错信息如下所示：ERROR:cannot delete from table"polardb_test...
数据归档
背景信息 ODC 支持定时将源数据库中的表数据归档至其它目标数据库中，以解决因线上数据增多影响查询性能与业务运作的问题。本文档旨在介绍如何通过提交数据归档工单实现归档数据。原理介绍 前提条件 归档的表中必须包含主键。注意事项 前置...
概述
使用Spark计算引擎访问...由于col2不是数据表的主键，表格存储会再次进行全表扫描找到col2的值为'a'的两行数据，然后将两次中间结果的数据进行union。此时也可以通过构建一个主键为col1、col2的索引表支持该查询，但此种方式的灵活性较低。
- 产品推荐
- 这些文档可能帮助您