内存型
代理查询缓存 开启代理查询缓存功能（Proxy Query Cache）后，代理节点会缓存热点Key对应的请求和返回信息，当在有效时间内收到同样的请求时直接返回结果至客户端，无需和后端的数据分片交互。全球多活 Tair 全球多活是基于云数据库Redis自...
开发流程
详细操作请参见 开发前端逻辑流操作代码 和 开发后端逻辑流操作代码。步骤三、上传构建产物 返回魔笔IDE的逻辑流编辑界面，在逻辑流物料面板中单击上传构建产物，选择构建产物并上传。详细操作请参见 上传构建产物。开发完成自定义逻辑流...
pg_prepared_statements
对于通过前端/后端协议创建的预备语句，此处是预备语句本身的文本。prepare_time timestamptz 预备语句被创建的时间。parameter_types regtype[]预备语句期望的参数类型，以一个 regtype 数组的形式显示。该数组中一个元素所对应的OID可...
pg_prepared_statements
对于通过前端/后端协议创建的预备语句，这里是预备语句本身的文本。prepare_time timestamptz 预备语句被创建的时间。parameter_types regtype[]预备语句期望的参数类型，以一个 regtype 数组的形式。这个数组中一个元素所对应的OID可通过...
上传构建产物
前提条件 已完成逻辑流执行代码的开发，前、后端逻辑流的详细操作请分别参见 开发前端逻辑流操作代码 和 开发后端逻辑流操作代码。操作步骤 登录 魔笔。在顶部菜单栏选择 应用管理，在左上角搜索框中搜索目标应用。在目标应用的卡片中单击 ...
构建数据仓库
数据开发：基于DataWorks进行数据全链路研发，包括数据集成、数据开发和ETL、转换及计算等开发，以及数据作业的调度、监控、告警等。DataWorks提供数据开发链路的安全管控的能力，以及基于DataWorks数据服务模块提供统一数据服务API能力。...
Oracle数据导入
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
通过DataWorks导入
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。离线同步支持的数据源及其配置详情请参见 支持的数据源与读写插件。说明 数据...
通过DataWorks导入数据
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。离线同步支持的数据源及其配置详情请参见 支持的数据源与读写插件。说明 数据...
通过DataWorks导入
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
通过DataWorks导入数据
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
创建数据库用户
您在使用数据传输的数据迁移和数据同步功能前，请先在源端和目标端数据库中，为数据迁移或同步任务创建专用的数据库用户。创建_oceanbase_inner_drc_user 用户 如果您需要迁移无主键表，执行数据迁移项目前，请根据实际情况，创建用户并...
通过DataWorks导入数据
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
常见问题
数据湖后端存储使用OSS，用户使用数据湖构建面向大数据分析和机器学习场景可以获得集中式权限管理和统一的元数据视图，更容易对接云上大数据和分析产品。什么情况下我需要使用数据湖构建？在云上有数据分析和机器学习需求，希望构建云上的...
产品简介
服务内容 服务大类 服务类型 服务内容 大数据专家咨询服务 大数据技术架构方案咨询 为客户提供构建和优化大数据体系的技术架构方案咨询服务，覆盖离线/实时数仓体系建设管理、数仓建模管理，数据开发管理，数据安全管理、数据质量管理、...
ClickHouse数据源
是 无 fetchSize 该配置项定义了插件和数据库服务器端每次批量数据获取条数，该值决定了数据同步系统和服务器端的网络交互次数，能够提升数据抽取性能。说明 fetchSize值过大会造成数据同步进程OOM，需要根据ClickHouse负载情况递增。否 1,...
OSS数据离线同步至MaxCompute
如果您使用的是标准类型的DataWorks工作空间，会分别显示开发和生产项目的名称。表 选择待同步的MaxCompute表。如果您使用的是标准类型的DataWorks工作空间，请确保在MaxCompute的开发环境和生产环境中存在同名且表结构一致的MaxCompute表...
OSS数据离线同步至MaxCompute
如果您使用的是标准类型的DataWorks工作空间，会分别显示开发和生产项目的名称。表 选择待同步的MaxCompute表。如果您使用的是标准类型的DataWorks工作空间，请确保在MaxCompute的开发环境和生产环境中存在同名且表结构一致的MaxCompute表...
配置数据访问代理连接
重要 虽然前端连接的数量可被认为是无限制的，但从前端连接获取的操作请求是由数据访问代理实例的内部线程通过后端连接实际执行，而内部线程和后端连接的数量有限，因此数据访问代理实例处理请求的整体并发度是有限的。应用与数据访问代理...
设置连接保持
说明 包含主动切换的运维操作：主动主备切换 升级小版本 修改重启类参数（修改参数时需重启实例）变更主实例配置 实现原理 数据库代理连接分为前端连接（代理与客户端的连接）和后端连接（代理与数据库的连接），在执行主动切换操作时，...
设置连接池
工作原理 前端连接与后端连接 在客户端（应用）与数据库建立连接时，以数据库代理为中间节点可将该连接分为前端连接（客户端与数据库代理的连接）和后端连接（数据库代理与数据库的连接）。如下图所示。未开启连接池时的连接建立过程 未...
数据质量：全流程的质量监控
说明 ETL是抽取、转换和加载源端数据至目的端的过程。数据质量以数据集（DataSet）为监控对象，支持监控MaxCompute数据表和DataHub实时数据流。当离线MaxCompute数据发生变化时，数据质量会对数据进行校验，并阻塞生产链路，以避免问题数据...
逻辑流操作
对象操作 操作 逻辑流类型 说明 创建对象 前端逻辑流 后端逻辑流 创建数据对象。详情请参考 创建对象。修改对象 修改数据对象。详情请参考 修改对象。删除对象 删除数据对象。详情请参考 删除对象。提交对象 提交更改后的数据对象详情请...
升级数据库大版本
支持升级的数据库大版本以及如何升级数据库大版本，请参见 支持升级的数据库大版本 和 升级数据库大版本。在新实例上验证变更后的客户端，测试是否存在兼容性问题。如果出现兼容性问题，请根据报错信息再次检查并变更客户端代码，直到没有...
数据传输预检查
启动数据迁移项目时，为确保项目的顺利运行，OceanBase 数据传输功能会自动启动预检查环节，针对源端和目标端的数据库连通性、相关配置的正确性、增量日志参数等问题或设置进行检查。本文为您介绍数据迁移项目预检查环节的常见报错和解决...
Redis Proxy特性说明
在 云数据库 Redis 版 集群架构和读写分离架构中，代理服务器（Proxy）承担着路由转发、负载均衡和故障转移等职责，可以帮助您简化客户端的逻辑，同时支持多数据库（DB）、缓存热点数据等高级功能。通过了解Proxy的路由转发规则和特定命令...
Tair Proxy特性说明
云原生内存数据库Tair 的集群架构和读写分离架构中，代理服务器（Proxy）承担着路由转发、负载均衡与故障转移等职责，可以帮助您简化客户端的逻辑，同时支持多数据库（DB）、缓存热点数据等高级功能。通过了解Proxy的路由转发规则和特定...
使用SDK示例代码消费订阅数据
完成数据订阅通道的配置后，您可以使用DTS提供的SDK示例代码来订阅数据变更信息，本文介绍该示例代码的使用说明。操作步骤 重要 若数据源是PolarDB-X 1.0或DMS LogicDB，消费订阅数据的操作步骤请参见 使用SDK示例代码消费PolarDB-X 1.0...
内置全密态能力
PolarDB PostgreSQL版（兼容Oracle）提供全密态数据库功能，数据在用户侧加密后传入数据库管理系统，数据明文对于数据库服务端不可见，实现了端到端的全程加密的数据强安全性。全密态云数据库是达摩院数据库与存储实验室的自研产品，可以...
XML 类型
在使用文本模式向服务器传递查询以及向客户端传递查询结果（在普通模式）时，PostgreSQL 将所有在客户端和服务器之间传递的字符数据转换为目标端的字符编码。这也包括了表示 XML 值的串，正如上面的例子所述。这也通常意味着由于字符数据会...
迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库...
全量校验 在全量迁移完成、增量数据同步至目标端并与源端基本追平后，数据传输会自动发起一轮针对源端库配置的数据表和目标表的全量数据校验任务。如果您选择了 增量同步，且 同步 DML 选项中未选择所有的 DML，则数据传输不支持本场景下的...
概述
扩展能力 自定义页面组件 如下场景可能需要自定义页面组件：您可以为自己的业务定制开发和维护一组标准的业务组件，以实现业务内的组件复用和组件标准化。通用组件无法满足业务需要时，您可以通过自定义页面组件满足特定的样式规范、交互...
目标数据库连接性检查
如果目标数据库为MySQL，您可以使用MySQL客户端连接目标数据库后执行下述命令进行检查。SELECT HOST FROM mysql.user WHERE user='username',password='password';说明 将 username 和 password 替换为数据迁移任务中填写的数据库账号和...
结束和释放数据迁移项目
结束数据迁移项目 结束数据迁移项目后，数据传输仍保留当前项目的源端、目标端、迁移对象、监控和告警等配置信息。您可以根据业务需求，选择清空项目配置后重新配置或者释放当前项目。重要 数据传输支持结束处于 已暂停、失败 和 已完成 ...
应用场景
前端的监控系统和大数据处理系统会利用 TSDB 的数据查询和计算分析能力进行业务监控和分析结果的实时展现。电力化工及工业制造监控分析 传统电力化工以及工业制造行业需要通过实时的监控系统进行设备状态检测，故障发现以及业务趋势分析。...
编排逻辑流
说明 登录、交易、数据量大等涉及安全敏感信息或影响性能的场景建议使用后端逻辑流进行编排。在页面中，通过数据容器绑定逻辑流，快速搭建逻辑流。添加页面，详细操作请参见 添加页面。拖曳数据容器相关组件至画布中，此处以List为例，在...
使用前后端链路追踪诊断API错误原因
在前端监控中，即便已知API的请求耗时，也无从知晓准确的网络传输性能、后端服务的调用链路及性能，因而无法快速准确地排查应用API问题。前后端链路追踪功能可以解决此类问题，它会将API请求从前端发出到后端调用的链路串联起来，真实还原...
表达式
前端逻辑流 后端逻辑流-and 2=3 and 4=5 逻辑与-or 2=3 or 4=5 逻辑或-not not 2=3 逻辑非-null$variable=null 空 不支持undefined。下标操作符（[]）$列表[1]取列表的第i项（从0开始）。if if(2=3,'a','b')类似三元表达式(a?b:c)，...
简介
逻辑流 逻辑流：逻辑流串联了应用内的页面模型和数据模型，能够实现应用内的逻辑交互。逻辑流包含：触发器：触发逻辑流运行，如单击页面、定时器...说明 登录、交易、数据量大等涉及安全敏感信息或影响性能的场景建议使用后端逻辑流进行编排。
源库连接性检查
在预检查阶段，系统会检查DTS服务器是否能够连通源端数据库。本文将介绍源库连接性检查失败的可能原因及修复方法。当源库连接性预检查失败时，可能是以下几种原因。数据库账号名或密码不正确 报错示例 Access denied for user 'XXX'@'XXX'...
- 产品推荐
- 这些文档可能帮助您