MaxCompute数据离线同步至ClickHouse
批量数据计入脏数据：如果想要保证任务运行完成并可接受批量数据丢弃，可选择将批量数据计入脏数据，通过脏数据允许条数控制任务是否退出。配置字段映射 选择数据来源和数据去向后，需要指定读取端和写入端列的映射关系。您可以选择同名...
应用场景
该架构具有以下优势：更新路径短，延迟低 业务完成更新数据库后直接返回，不需要关心缓存失效流程，整个更新路径短、延迟低。应用简单可靠 应用无需实现复杂双写逻辑，只需启动异步线程监听增量数据，更新缓存数据即可。应用更新无额外性能...
通过数据订阅实现缓存更新策略
同时，为保证数据的完整性，业务的更新数据持久化存储至RDS MySQL中。此时，业务需要实现缓存更新策略，保证业务数据更新后，缓存中的数据能够被同步更新。操作步骤 本文以IntelliJ IDEA软件为例，介绍如何运行SDK示例代码来消费订阅数据。...
基础饼图
取消选中后则不会自动更新，需要手动刷新页面，或通过蓝图编辑器和回调ID事件来触发请求更新数据。数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 ...
创建物化视图的跨机并行加速和批量写入
对上述两个步骤分别引入了ePQ并行扫描和批量数据写入的优化。当需要扫描或写入的数据量较大时，能够显著提升上述DDL语法的性能，缩短执行时间：ePQ并行扫描：通过ePQ功能，利用多个计算节点的I/O带宽和计算资源并行执行视图定义中的查询，...
基础饼图
取消选中后则不会自动更新，需要手动刷新页面，或通过蓝图编辑器和回调ID事件来触发请求更新数据。数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 ...
后续指引
说明 相关文档 数据迁移 上传下载数据 MaxCompute提供Tunnel批量数据通道、Streaming Tunnel流式数据写入通道和DataHub实时数据通道三种数据上传下载的通道，同时还支持基于DataHub和Tunnel提供的SDK实现上传下载数据，满足多样化场景需求...
弧形柱状图
取消选中后则不会自动更新，需要手动刷新页面，或通过蓝图编辑器和回调ID事件来触发请求更新数据。数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 ...
创建物化视图的跨机并行加速和批量写入
PolarDB PostgreSQL版 对上述两个步骤分别引入了ePQ并行扫描和批量数据写入的优化。当需要扫描或写入的数据量较大时，能够显著提升上述DDL语法的性能，缩短执行时间：ePQ并行扫描：通过ePQ功能，利用多个计算节点的I/O带宽和计算资源并行...
目标占比饼图
清除后则不会自动更新，需要手动刷新页面，或通过蓝图编辑器和全局变量事件来触发请求更新数据。高级面板 此组件没有交互事件。蓝图交互 单击页面左上角的 图标，进入 蓝图 页面。在 图层节点 页签下，添加当前组件至主画布中。查看蓝图...
指标对比饼图
清除后则不会自动更新，需要手动刷新页面，或通过蓝图编辑器和全局变量事件来触发请求更新数据。高级面板 此组件没有交互事件。蓝图交互 单击页面左上角的 图标，进入 蓝图 页面。在 图层节点 页签下，添加当前组件至主画布中。查看蓝图...
标注对比饼图
清除后则不会自动更新，需要手动刷新页面，或通过蓝图编辑器和全局变量事件来触发请求更新数据。高级面板 此组件没有交互事件。蓝图交互 单击页面左上角的 图标，进入 蓝图 页面。在 图层节点 页签下，添加当前组件至主画布中。查看蓝图...
目标占比饼图
取消选中后则不会自动更新，需要手动刷新页面，或通过蓝图编辑器和回调ID事件来触发请求更新数据。数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 ...
在GDB控制台清除实例数据
清除数据大约耗时5s（数据量越多，耗时时间越长），在清除数据过程中建议您不要执行数据更新操作（执行数据更新操作，可能会导致更新的数据被清理）。操作步骤 登录 图数据库控制台。在页面左上角，选择实例所在地域。单击目标实例ID或目标...
指标占比饼图
清除后则不会自动更新，需要手动刷新页面，或通过蓝图编辑器和全局变量事件来触发请求更新数据。高级面板 此组件没有交互事件。蓝图交互 单击页面左上角的 图标，进入 蓝图 页面。在 图层节点 页签下，添加当前组件至主画布中。查看蓝图...
指标对比饼图
取消选中后则不会自动更新，需要手动刷新页面，或通过蓝图编辑器和回调ID事件来触发请求更新数据。数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 ...
使用Tunnel命令或Tunnel SDK
使用Streaming Tunnel SDK上传数据 MaxCompute流式数据通道服务提供了以流式的方式把数据写入MaxCompute的能力，使用与原批量数据通道服务不同的一套全新的API及后端服务。MaxCompute流式数据通道服务应用场景如下。场景 说明 特点 大量...
指标占比饼图
取消选中后则不会自动更新，需要手动刷新页面，或通过蓝图编辑器和回调ID事件来触发请求更新数据。数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 ...
Tunnel SDK常见问题
如何使用TunnelBufferedWriter规避使用Tunnel SDK进行批量数据上传出错的问题？Tunnel SDK Download 使用Tunnel SDK下载数据时，报错You need to specify a partitionspec along with the specified table，如何解决？其他问题 BlockId是否...
多维度饼图
清除后则不会自动更新，需要手动刷新页面，或通过蓝图编辑器和全局变量事件来触发请求更新数据。高级面板 当点击数据项时：打开开关，开启组件交互功能。当单击多维度饼图的扇形时，会触发数据请求，抛出临时变量，动态加载不同扇形的数据...
带图饼图
清除后则不会自动更新，需要手动刷新页面，或通过蓝图编辑器和全局变量事件来触发请求更新数据。高级面板 当点击数据项时：打开开关，开启组件交互功能。当单击带图饼图的扇形时，会触发数据请求，抛出临时变量，动态加载不同扇形的数据。...
同步 OceanBase 数据库的数据至 RocketMQ
本文为您介绍如何使用数据传输同步 OceanBase 数据库的数据至 RocketMQ。背景信息 消息队列 RocketMQ 是阿里云基于 Apache RocketMQ ...相关文档 新建 OceanBase 数据源 新建 RocketMQ 数据源 批量操作数据同步项目 查看数据同步项目的详情
Echarts 桑基图
清除后则不会自动更新，需要手动刷新页面，或通过蓝图编辑器和全局变量事件来触发请求更新数据。高级面板 交互 说明 当点击数据项时 打开开关，开启组件交互功能。当单击选中某个数据项时抛出回调值，默认抛出数据中的 x、y 和 s 字段。...
Salesforce数据源
在开始读取数据之前，Salesforce服务端需要先运行准备批量数据的任务，如果该任务运行时间超过本配置，则视为准备数据超时，任务失败。86400 batchSize 否 单批下载条数。当serviceType配置为bulk2时使用。本配置只需要比Salesforce批量...
数据上云工具
阿里云数加产品 MaxCompute客户端（Tunnel通道系列）客户端基于 批量数据通道 的SDK，实现了内置的Tunnel命令，可对数据进行上传和下载，Tunnel命令的使用请参见 Tunnel命令的基本使用介绍。客户端的安装和基本使用方法请参见 客户端介绍。...
梯形柱状图
清除后则不会自动更新，需要手动刷新页面，或通过蓝图编辑器和全局变量事件来触发请求更新数据。高级面板 当点击数据项时：打开开关，开启组件交互功能。当单击梯形柱状图的柱子时会触发数据请求，抛出变量，动态加载不同柱子的数据。默认...
水平胶囊柱状图
清除后则不会自动更新，需要手动刷新页面，或通过蓝图编辑器和全局变量事件来触发请求更新数据。高级面板 当点击数据项时：打开开关，开启组件交互功能。当单击水平胶囊柱图的柱子时会触发数据请求，抛出临时变量，动态加载不同柱子的数据...
分组柱状图
清除后则不会自动更新，需要手动刷新页面，或通过蓝图编辑器和全局变量事件来触发请求更新数据。高级面板 当点击数据项时：打开开关，开启组件交互功能。当单击分组柱状图的柱子时，会触发数据请求，抛出临时变量，动态加载不同柱子的数据...
INSERT OVERWRITE SELECT
功能原理 INSERT OVERWRITE SELECT 会先清空分区中的旧数据，再将新数据批量写入到分区。如果表是分区表，INSERT OVERWRITE SELECT 只能覆盖数据涉及到的分区，数据未涉及的分区不会被清空并覆盖写入。如果表是非分区表，INSERT OVERWRITE ...
双轴折线图
清除后则不会自动更新，需要手动刷新页面，或通过蓝图编辑器和全局变量事件来触发请求更新数据。高级面板 当点击数据项时：打开开关，开启组件交互功能。当单击双轴折线图的圆点时会触发数据请求，抛出临时变量，动态加载不同圆点的数据。...
斑马柱状图
清除后则不会自动更新，需要手动刷新页面，或通过蓝图编辑器和全局变量事件来触发请求更新数据。高级面板 当点击数据项时：打开开关，开启组件交互功能。当单击斑马柱状图的柱子时，会触发数据请求抛出变量，动态加载不同柱子的数据。默认...
ClickHouse数据源
是 无 fetchSize 该配置项定义了插件和数据库服务器端每次批量数据获取条数，该值决定了数据同步系统和服务器端的网络交互次数，能够提升数据抽取性能。说明 fetchSize值过大会造成数据同步进程OOM，需要根据ClickHouse负载情况递增。否 1,...
数据导入方式介绍
批量可见：数据导入任务完成前数据不可见，任务完成后导入的数据批量可见。分区覆盖：通过外表导入的数据分区会覆盖表中已存在的同一分区。构建索引：通过外表导入会同步构建索引，导入任务完成则生成索引，可提升查询性能。常见使用场景 ...
同步 OceanBase 数据库的数据至 Kafka
背景信息 Kafka 是目前广泛应用的高性能分布式流计算平台，数据传输支持 OceanBase 数据库两种租户与自建 Kafka 数据源之间的数据实时同步，扩展消息处理能力，广泛应用于实时数据仓库搭建、数据查询和报表分流等业务场景。前提条件 数据...
导入数据
如需调整，可以由DBA或管理员在 安全规则>SQL变更>批量数据导入 中修改。CSV格式：文件中的分隔符必须为逗号。Excel格式：Excel文件中可以有表头（属性），也可以直接是数据。目标表 选择导入数据的目标表。数据位置 选择数据的位置：第1...
产品架构
增量数据迁移：当全量数据迁移完成后，DTS会检索本地存储的增量数据，重新格式化，并将数据更新应用到目标数据库中。此过程将持续下去，直到所有正在进行的数据变更都复制到目标数据库，并且源数据库和目标数据库完全同步。数据同步的工作...
实施步骤
根据业务数据更新需求，选择大屏数据 自动更新请求，比如 60秒一次。完成上述参数配置后，单击 刷新数据。步骤六：为大屏中的销售总额组件配置数据 选中 销售总额 组件，在 数据 页面进行参数配置。数据源类型：选择数据库。数据源：选择...
文档更新动态（2023年）
更新说明 创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 创建Kafka数据源 离线集成配置优化 新增Apache Doris数据源的离线集成。...
支持的数据库
数据同步 数据同步功能帮助您实现数据源之间的数据实时同步，适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、查询与报表分流、云BI及实时数据仓库等多种业务场景。同步支持的数据库、版本和同步类型以及配置文档，请参见...
迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库...
如果源库存在级联更新、删除等操作，可能导致源端和目标端的数据不一致。如果您在数据迁移过程中切换 PolarDB-X 2.0 数据库的网络类型，请在切换成功后，调整数据迁移项目的网络连接信息。如果数据迁移项目中仅配置了全量迁移，请勿向源端...
- 产品推荐
- 这些文档可能帮助您