在国际数据库顶级会议2021 ACM SIGMOD上,一篇标题为《PolarDB Serverless:A Cloud Native Database for Disaggregated Data Centers》的论文,介绍了阿里云自研数据库 PolarDB 基于计算存储分离,实现的最新Serverless技术架构研究进展。...
DTS实现数据的跨城实时同步和状态上报。MSHA实现多活流量管控和容灾切换动作。案例效果 联通新客服系统的接入中心、外呼中心、业务支撑等7个业务实现按地域多活分流。实现多次容灾演练,对多个省份进行切流,秒级完成切换,数据0丢失。客户...
支持 支持 全密态 PolarDB MySQL版 提供全密态数据库功能,数据在用户侧加密后传入数据库管理系统,数据明文对于数据库服务端不可见,实现了端到端的全程加密的数据强安全性。支持 支持 连接管理 连接池 PolarDB 支持会话级连接池和事务级...
return true为满足该处理方法的条件,return false为不满足该处理方法的条件,可以添加多个数据过滤器。锚点配置面板 事件/动作参数说明 事件/动作 说明 满足 上游节点输出的结果,满足设定条件。不满足 上游节点输出的结果,不满足设定...
数据源 单击 配置数据源,可在 设置数据源 页面中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。详情请参见 配置组件数据。数据过滤器 单击 添加过滤器,可在 设置数据源 页面中配置数据过滤器,详情请参见 组件...
MaxCompute SQL是MaxCompute中用于数据查询和分析的SQL语言,其语法类似于标准SQL,但在标准语法ANSI SQL92的基础上进行了一些扩展和限制以更好地服务于大规模数据仓库的场景。本文为您介绍MaxCompute SQL使用场景、使用向导及支持的工具...
通过Serverless Devs配置回调 使用Serverless Devs配置PreStop扩展函数时,s.yaml 配置文件示例代码片段如下所示:codeUri:'./code.zip'.instanceLifecycleConfig:preStop:handler:index.PreStop timeout:60 如果您需要关闭某个扩展函数,...
Cache API是一种缓存数据的方法。通过Cache API,您可以在边缘节点上缓存数据,以便在下次请求时快速返回数据。Cache API可以设置缓存时间和缓存大小,以便更好地控制缓存策略。工作原理 通过ER内置的CacheAPI,您可以将ER处理后的结果或从...
为防止站点资源被恶意下载盗用,除了通过配置访问Referer黑名单和白名单来实现对访客身份的识别和过滤,您还可以采用URL鉴权,更安全有效地保护用户源站资源。本文介绍URL鉴权、原理、使用方式和注意事项。使用方法 控制台:URL鉴权支持...
Cache API是一种缓存数据的方法。通过Cache API,您可以在边缘节点上缓存数据,以便在下次请求时快速返回数据。Cache API可以设置缓存时间和缓存大小,以便更好地控制缓存策略。工作原理 通过ER内置的CacheAPI,您可以将ER处理后的结果或从...
尽管本数据库提供对表数据访问的非阻塞读/写,但并非本数据库中实现的每一个索引访问方法当前都能够提供非阻塞读/写访问。B-tree、GiST 和 SP-GiST索引:短期的页面级共享/排他锁被用于读/写访问。每个索引行被取得或被插入后立即释放锁。...
Cache API是一种缓存数据的方法。通过Cache API,您可以在边缘节点上缓存数据,以便在下次请求时快速返回数据。Cache API可以设置缓存时间和缓存大小,以便更好地控制缓存策略。工作原理 通过ER内置的CacheAPI,您可以将ER处理后的结果或从...
支持的字段类型 类型分类 数据集成column配置类型 整数类 LONG,INT 字符串类 STRING 浮点类 DOUBLE,FLOAT 布尔类 BOOLEAN 日期时间类 DATE 数据同步任务开发 数据同步任务的配置入口和通用配置流程指导可参见下文的配置指导,详细的配置...
背景信息 全网舆情分析系统,可以实现百亿条网页数据的存储、实时新增网页的抓取和存储,并能对新增网页做实时的元数据提取。有了提取结果,还需要进行进一步的挖掘分析,这些分析包括但不限于:舆情的影响力诊断:从传播量级和扩散趋势来...
源数据采集客户端太多时,如果源数据通过Tunnel直接进入到一个分区,则每个源数据采集客户端提交一次数据,都会在同一分区下产生一个独立的文件,从而导致大量小文件的出现。当SLS触发FunctionCompute持续高频地向MaxCompute中传入文件时,...
Btree-GIST插件提供了一种使用GIST索引结构来模拟B树(B-tree)索引行为的方法。GIST允许用户为新的数据类型自定义索引策略,常用于处理复杂数据类型(多维数据、地理信息系统数据)的索引需求,并提供高效的搜索性能。功能简介 Btree-GIST...
根据 RFC 7159 中的说明,JSON 数据类型是用来存储 JSON(JavaScript Object Notation)数据的。这种数据也可以被存储为 text,但是 JSON 数据类型的优势在于能强制要求每个被存储的值符合 JSON 规则。也有很多 JSON 相关的函数和操作符...
本文介绍如何使用Percona XtraBackup工具,将RDS MySQL的物理备份文件恢复到自建数据库。背景 RDS MySQL支持将实例备份文件恢复到自建数据库,当前支持物理备份文件恢复、逻辑备份文件恢复等多种方式。如何选择数据恢复方案,请参见 数据...
使用全局二级索引可以实现透明分区表,即您可以像使用单表一样使用分区表,大大减少分区键对分区表的使用限制。不支持 支持 数据压缩/归档/加密 表级压缩 对于指定的表,支持显著优于MySQL官方的压缩能力,通过压缩降低数据的存储成本。...
OceanBase 数据库之间的数据迁移 支持 TiDB 数据库至 OceanBase 数据库 MySQL 租户的结构迁移、全量迁移、增量同步、全量校验和反向增量 迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户 支持 PolarDB-X 1.0 数据库至 OceanBase ...
本文将介绍如何使用 Tomcat 连接池、OceanBase Connector/J 和 OceanBase 数据库构建一个应用程序,实现基本的数据库操作,包括创建表、插入、删除、更新和查询数据等。点击下载 tomcat-mysql-client 示例工程 前提条件 您已安装 OceanBase...
简称DTS)支持关系型数据库(RDBMS)、非关系型数据库(NoSQL)、数据多维分析(OLAP)等数据源间的数据交互,集数据同步、迁移、订阅、集成、加工于一体,帮助您构建安全、可扩展、高可用的数据架构。更多信息,请参见 什么是数据传输服务...
多可用区部署 备份恢复 Lindorm宽表引擎支持数据备份恢复功能,基于数据生态服务中的数据迁移将数据存储至OSS中,定期全量备份数据,实时增量同步数据,来满足对数据备份和数据恢复的需求。备份恢复 产品生态 功能集 功能 功能描述 参考...
本文将介绍如何使用 Proxool 连接池、MySQL Connector/J 和 OceanBase 数据库构建一个应用程序,实现基本的数据库操作,包括创建表、插入、删除、更新和查询数据等。点击下载 proxool-mysql-client 示例工程 前提条件 您已安装 OceanBase ...
支持的数据源 源数据库 目标数据库 ECS上的自建MongoDB数据库 ECS上的自建MongoDB数据库 本地自建的MongoDB数据库 本地自建的MongoDB数据库 阿里云MongoDB实例 阿里云MongoDB实例 第三方云MongoDB数据库 第三方云MongoDB数据库 注意事项 在...
MaxCompute JDBC Driver的日志记录了对JDBC接口调用的详细信息,包括调用的类名、方法名、行数、参数以及返回值等。通过这些信息,用户可以轻松地进行Debug。MaxCompute JDBC Driver的日志默认放在Driver Jar包所在的同级目录,文件名为 ...
选择地图数据集数量 单击地图右下角的数据集下拉列表,为当前地图选择显示一个合适的地图数据集数量值,可选 200条/数据集、400条/数据集600条/数据集、800条/数据集 和 1000条/数据集。重新加载 单击地图右下角的 重新加载,即可重新加载...
Flink可以处理实时数据流,并将处理结果写入Lindorm时序引擎,以实现实时数据监控等场景。本文介绍如何将Flink上实时的数据处理结果写入到时序引擎。前提条件 已开通实时计算Flink版或者已有自建Flink。实时计算Flink版的开通,请参见 开通...
选择地图数据集数量 单击地图右下角的数据集下拉列表,为当前地图选择显示一个合适的地图数据集数量值,可选 200条/数据集、400条/数据集 600条/数据集、800条/数据集 和 1000条/数据集。重新加载 单击地图右下角的 重新加载,即可重新加载...
本文介绍配置任务和任务运行时系统返回的报错信息(如重试信息或错误码)以及解决方法。说明 本文以正则表达式((.*)?的形式表示报错信息中的变量。若报错无法解决,您可以 通过钉钉(钉钉通讯客户端下载地址)进入到DTS客户交流钉钉群...
数据保护伞默认提供了 数据开发/数据地图展示脱敏、数据集成静态脱敏 等多种一级脱敏场景,若该类场景生效的数据范围及用户范围无法满足您更细化的脱敏需求,则也可基于一级场景自定义二级脱敏场景使用。创建数据脱敏场景 2023.11.20 新增...
使用PostgreSQL的libpq或JDBC,您可以通过简单的配置实现自动故障转移(failover)和读写分离。背景信息 从PostgreSQL 10开始,libpq驱动层开始支持简单的故障转移,JDBC驱动层则支持简单的故障转移和负载均衡。libpq是PostgreSQL的C应用...
同时与阿里云合作启动数据中台项目,可以帮助大润发降低TCO的同时,更好的依托云上生态,实现数据资产业务化闭环。客户需求 基于Hadoop开源生态打造,软硬件维护成本高昂,稳定性问题不断,严重影响业务经营分析。线上业务爆发,需求积压...
当客户端应用使用“扩展查询”协议发出一个 FETCH 命令,绑定协议消息会指定使用文本还是二进制格式检索数据。这种选择会覆盖定义游标时指定的方式。因此,在使用扩展查询协议时,这样一个二进制游标的概念实际是被废弃的—任何游标都可以...
在持有用户密钥的情况下,全密态客户端驱动程序GoLang_EncMySQL能够自动完成密文数据的解密并返回明文数据。整个过程对应用透明,应用程序仅需配置几行代码即可接入全密态数据库。GoLang_EncMySQL可以降低全密态功能的使用成本,使得应用...
禁止fetch请求ER域名自身 报错信息@Fetch.fetch:fetch authority is same with origin authority,which is forbidden 报错原因 不允许在ER代码内fetch请求ER域名自身。例如ER域名为 1.a.com ,您可以在ER代码内fetch请求 1.a.com 以外的...
禁止fetch请求ER域名自身 报错信息@Fetch.fetch:fetch authority is same with origin authority,which is forbidden 报错原因 不允许在ER代码内fetch请求ER域名自身。例如ER域名为 1.a.com ,您可以在ER代码内fetch请求 1.a.com 以外的...
本文介绍如何使用TPC-C工具测试 PolarDB-X 1.0 数据库的联机交易处理(偏向OLTP能力),您可以按照本文介绍自行测试对比,快速了解数据库系统的性能。背景信息 TPC-C是业界常用的一套Benchmark,由TPC委员会制定发布,用于评测数据库的联机...
在线数据重新分片 数据库版本 特点 实现方法 MongoDB 5.0以前 重新分片过程复杂且需要手动分片。方法一:先dump整个集合,然后用新的分片键把数据库重新加载到一个新的集合中。由于这是一个需要离线处理的过程,因此您的应用程序在重新加载...
pg_profile 是 PolarDB PostgreSQL版 支持的一款第三方插件,能够统计目标数据库中资源密集型活动,来分析和优化数据库。此扩展基于PostgreSQL的统计视图和部分社区插件,完全由PL/pgSQL编写,无需任何外部库或软件。配合 pg_cron 插件可以...