时序模型介绍
表格存储的时序模型是针对时间序列数据的特点进行设计，适用于物联网设备监控、设备采集数据、机器监控数据等场景，支持自动构建时序元数据索引、丰富的时序查询能力等功能。时序模型通过时序表存储时间序列数据，能提供高并发写入和查询...
操作汇总
本文介绍 表格存储 的调用说明以及提供的宽表模型和时序模型相关API接口。如需了解 表格存储 各场景的应用案例，请参见 快速玩转Tablestore入门与实战。调用说明 表格存储 API只能通过 表格存储 提供的各语言SDK进行调用，不能直接使用HTTP...
离线同步常见问题
本文为您介绍离线同步的相关问题。文档概述 问题分类 相关文档 离线同步任务运维常见问题 为什么数据源测试连通性成功，但是离线同步任务执行失败？如何切换数据集成任务执行资源组？脏数据如何排查和定位？如何查看脏数据？如果离线同步...
SQL查询
时序分析存储写入数据存在同步延迟，查询最近数据进行计算时会存在部分数据未同步的情况。语法 SELECT select_expr[,select_expr].[FROM table_references][WHERE where_condition][GROUP BY groupby_condition][ORDER BY order_condition]...
通过DataWorks导入数据
本文介绍如何通过DataWorks的数据集成功能，将数据从其他产品同步至Lindorm时序引擎。前提条件 已获取 Lindorm 时序HTTP地址。如何获取，请参见 查看连接地址。已在DataWorks控制台上创建工作空间。如何创建，请参见 创建工作空间。操作...
使用教程（时序模型）
本文以表格存储Tablestore中的宽表作为上游数据源为例介绍如何使用实时计算Flink写数据到Tablestore的时序表中。背景信息 Tablestore的时序模型是针对时间序列数据的特点进行设计，适用于物联网设备监控、设备采集数据、机器监控数据等场景...
产品架构
时序引擎 LindormTSDB 是面向海量时序数据设计的分布式时序引擎，兼容开源OpenTSDB等标准接口，其基于时序数据特点和查询方式，采用Timerange+hash结合的分区算法，时序专向优化的LSM架构和文件结构，支持海量时序数据的低成本存储、预降...
数据集成服务
数据导入的迁移方案包括同步MySQL数据到表格存储、同步Oracle数据到表格存储、同步Kafka数据到表格存储、同步HBase数据到表格存储、同步MaxCompute数据到表格存储、同步表格存储数据表中数据到另一个数据表和同步表格存储时序表中数据到另...
实现原理
监控的通用逻辑 定义数据源：首先，需要建立元数据基本模型，元数据是监控系统的根基。例如：定义应用、部署实例、机房信息，单元化信息等。在 SOFAStack 场景下，这部分信息需要从 PaaS 侧自动获取。数据采集：通过安装在机器上的 Agent ...
AliES内核增强版功能介绍
详细信息，请参见：7.16、7.10版本：使用aliyun-codec插件 6.7版本：使用索引压缩插件beta版本（codec-compression）√功能优化 Timestream时序插件 支持时序索引创建及增删改查，支持downsample写入查询及PromQL查询，大幅降低时序存储和...
SQL查询介绍
物联网存储IoTstore是表格存储基于物联网场景中多源异构数据存储、高并发吞吐、海量数据高性价比存储、多维度数据处理与分析等需求推出的一站式物联网解决方案，...元数据、消息数据、时序轨迹等海量数据提供存储、查询、检索、分析、同步等能力...
顺序消息
顺序消息只支持可靠同步发送方式，不支持异步发送方式，否则将无法严格保证顺序。顺序消息是否支持集群消费和广播消费？顺序消息暂时仅支持集群消费模式，不支持广播消费模式。TCP SDK示例代码 TCP协议下的示例代码请参见以下文档：Java：...
Tablestore数据源
表格存储Tablestore是构建在阿里云飞天分布式系统之上的NoSQL数据存储服务，Tablestore数据源为您提供读取和写入Tablestore双向通道的功能，本文为您介绍DataWorks的Tablestore数据同步的能力支持情况。使用限制 Tablestore Reader和Writer...
配置说明
同步数据到时序表的配置示例中需要增加时序相关配置项。properties格式配置文件的示例，适用于standalone模式。设置连接器名称。name=tablestore-sink#指定连接器类。connector.class=TableStoreSinkConnector#设置最大任务数。tasks.max=1...
基本概念
时序存储（MetricStore）日志服务提供MetricStore用于存储时序数据，并在时序数据存储的基础上提供查询和分析（SQL92语法、PromQL语法）功能。告警监控任务依赖于查询与分析功能。告警（Alert）独立表达时，代表一个告警事件（Alert event...
设计数据模型
在逻辑表管理页面，同步新建逻辑表的DDL语句。在逻辑表管理页面中，选择已新建的逻辑表“ods_base_yhkh”，单击 详情。在逻辑表详情页面中，单击 DDL设置。在DDL设置区域，选择 MaxCompute，单击 生成DDL，操作完成后，单击 保存DDL。在...
PostgreSQL数据源
PostgreSQL数据源为您提供读取和写入PostgreSQL双向通道的功能，方便您后续可以通过向导模式和脚本模式配置数据同步任务。本文为您介绍DataWorks的PostgreSQL数据同步能力支持情况。支持的版本 目前仅支持配置PostgreSQL数据源为PostgreSQL...
数据同步方案概览
数据同步功能帮助您实现数据源之间的数据实时同步，适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、云BI及实时数据仓库等多种业务场景。本文将介绍数据同步功能支持的数据库、同步类型和同步拓扑。收费策略 DTS数据同步...
逻辑复制槽故障转移（Logical Replication Slot ...
PolarDB PostgreSQL版（兼容Oracle）的逻辑复制槽故障转移（Logical Replication Slot Failover）功能可以将所有的逻辑复制槽从主实例同步到备实例，从而实现逻辑复制槽的故障转移。背景信息 在主实例创建的Replication Slot，不会通过流...
逻辑复制槽故障转移（Logical Replication Slot ...
PolarDB PostgreSQL版（兼容Oracle）的逻辑复制槽故障转移（Logical Replication Slot Failover）功能可以将所有的逻辑复制槽从主实例同步到备实例，从而实现逻辑复制槽的故障转移。背景信息 在主实例创建的Replication Slot，不会通过流...
逻辑复制槽故障转移（Logical Replication Slot ...
PolarDB PostgreSQL版（兼容Oracle）的逻辑复制槽故障转移（Logical Replication Slot Failover）功能可以将所有的逻辑复制槽从主实例同步到备实例，从而实现逻辑复制槽的故障转移。背景信息 在主实例创建的Replication Slot，不会通过流...
逻辑复制槽故障转移（Logical Replication Slot ...
PolarDB PostgreSQL版 的逻辑复制槽故障转移（Logical Replication Slot Failover）功能可以将所有的逻辑复制槽从主实例同步到备实例，从而实现逻辑复制槽的故障转移。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 11...
入仓解决方案
源为自建MongoDB或云数据库MongoDB的同步方案 源为自建Redis或云数据库Tair/Redis的同步方案 源为MariaDB的同步方案 源为Db2 for LUW的同步方案 源为Db2 for i（AS/400）的同步方案 源为数据管理DMS逻辑库的同步方案 新建实时迁移任务 登录...
录入与管理逻辑表
数据同步服务提供了元数据管理的录入逻辑表功能，可以将多张 schema 一致的物理表绑定成一张逻辑表。在新建数据同步任务时，选择此逻辑表为数据源端，即可将多张物理表中的数据同步至目的端。在 元数据管理>逻辑表列表 页面，您可以录入并...
写入时序数据
表格存储 提供了PutTimeseriesData接口用于批量写入时序数据。时序数据由时间线元数据和时序表数据组成。如果未预先新建时间线元数据，当写入时序数据时，系统会自动提取该时间线的元数据信息并自动构建索引。说明 在表格存储的时序模型中...
实例
具体操作，请分别参见 将表格存储数据表中数据同步到另一个数据表 和 将表格存储时序表中数据同步到另一个时序表。不论当前实例规格，使用多元索引时均会产生高性能存储量、预留读吞吐量与按量读吞吐等。更多信息，请参见 多元索引计量计费...
概述
这两层始终保持同步，只要在逻辑层修改数据，视图层就会相应的更新。请看下面这个简单的例子。视图层-><view>Hello {{name}}!button onTap="changeName">Click me!逻辑层 var initialData={ name:'taobao',};注册一个...
迁移工具
将MySQL数据同步迁移到表格存储 将HBase数据同步到表格存储 将MaxCompute数据同步到表格存储 将表格存储数据同步到MaxCompute 将表格存储数据同步迁移到OSS 将表格存储数据表中数据同步到另一个数据表 将表格存储时序表中数据同步到另一个...
小表广播
源数据库：待同步表所在的逻辑数据库。目标数据库：待同步表的目标端数据库。任务状态：广播任务的执行状态，包括 创建中、广播表创建失败、运行中、运行异常 与 已废弃。创建时间：广播任务创建的时间。修改时间：最近一次操作的时间。...
数据写入时序表后是否可以立即查询到？
数据写入时序表后，根据使用的数据查询方式不同，查询延迟有区别...当通过SQL使用时序表的分析存储进行查询时，由于时序表数据自动同步到分析存储中有一定的同步延迟，因此不能立即查询到刚刚写入的数据。更多信息，请参见 时序分析存储概述。
通过DataX导入RDS数据
本文主要介绍如何使用阿里巴巴的开源工具DataX实现从关系型数据库到时序引擎的数据迁移。背景信息 DataX是阿里巴巴集团内被广泛使用的离线数据同步工具，实现包括MySQL、Oracle、SQL Server、PostgreSQL、HDFS、Hive、ADS、HBase、...
升级步骤
前置检查：检查是否已创建PolarDB服务关联角色 在使用逻辑迁移（DTS数据同步）方式进行一键升级前，请先检查是否已创建PolarDB服务关联角色，以及是否已 授予DTS访问云资源的权限。检查是否已创建 PolarDB 服务关联角色的具体步骤如下：...
元数据管理概述
可以通过元数据管理中的 绑定逻辑表 功能，将多张 schema 一致的物理表绑定成一张逻辑表，创建同步任务的时候直接选择这张逻辑表，即可将实际多张物理表中的数据同步至目的端。元数据管理限制 目前元数据管理只支持管理 OceanBase 数据源的...
计费说明-半托管
本文为您介绍Dataphin半托管版实例及增值功能包的定价和计费项折算逻辑，不包含所依赖云资源的计费信息说明。背景信息 为了迎合灵活多变的市场需求并适应时代发展，Dataphin推出半托管模式，支持通过界面一键下单的方式购买Dataphin产品和...
数据集成概述
数据集成是基于Dataphin构建的简单高效的数据同步平台，致力于提供具有强大的数据预处理能力、丰富的异构数据源之间数据高速稳定的同步能力。背景信息 面对各行各业对大数据的应用，数据集成会有很多的诉求，包括能够简单高效的配置大量...
数据集成概述
数据集成是基于Dataphin构建的简单高效的数据同步平台，致力于提供具有强大的数据预处理能力、丰富的异构数据源之间数据高速稳定的同步能力。背景信息 面对各行各业对大数据的应用，数据集成会有很多的诉求，包括能够简单高效的配置大量...
用户一致性验证
在某些业务场景下，业务对同步的数据有很高的安全性要求，需要确保推送的目标用户就是当前登录的用户而没有被伪造。为实现这一目的，数据同步服务提供了用户一致性验证的功能，用户可根据需要开启使用。该功能的基本原理是：客户端在连接到...
教程：通过Druid连接池连接并访问时序引擎
JDBC访问逻辑的基础是需要创建Connection对象，如果每次连接时序引擎都创建一个新的Connection对象，会带来很大的开销。为了降低开销，可以使用连接池来执行连接的创建和管理。前提条件 已安装Java环境，要求安装JDK 1.8及以上版本。已将...
MySQL分库分表同步至MaxCompute
操作流程 步骤一：选择同步方案 步骤二：网络与资源配置 步骤三：分库源表设置 步骤四：设置目标表 步骤五：设置表粒度同步规则 步骤六：DDL消息处理规则 步骤七：设置任务运行资源 步骤八：执行同步任务 步骤一：选择同步方案 创建同步...
MySQL分库分表同步至MaxCompute
操作流程 步骤一：选择同步方案 步骤二：网络与资源配置 步骤三：分库源表设置 步骤四：设置目标表 步骤五：设置表粒度同步规则 步骤六：DDL消息处理规则 步骤七：设置任务运行资源 步骤八：执行同步任务 步骤一：选择同步方案 创建同步...
- 产品推荐
- 这些文档可能帮助您