常见问题（FAQ）
除版本外，Delta Lake还存储事务日志，以跟踪对表或Blob存储目录所做的所有提交，以提供ACID事务。如何使用Delta Lake读写数据？您可以使用自己喜欢的Apache Spark API来使用Delta Lake读写数据。Delta Lake在哪里存储数据？写入数据时，您...
常见问题
ID²到期前您可以在 设置>授权>授权详情>IoT设备身份认证 页面中设置 自动续期策略>自定义，在对应的产品下开启 自动续期。ID²到期后再次活跃会自动消耗ID²授权并续期。如果您未启用 自动续期，ID²到期后将无法使用。2.哪些情况会消耗ID...
代码仓库加密是如何实现的？
代码内容及文件名，都存储在blob及tree对象当中，所以可以认为，对象中是包含用户的代码内容数据，也就是 包含敏感数据 的。Git中的对象存储，为了降低磁盘占用，会通过zlib进行一次数据的压缩。换句话说，只需通过解压缩就可以获取到数据...
使用函数计算
更多信息，请参见 什么是函数计算。函数计算示例请参见 表格存储函数计算示例。Tablestore Stream是用于获取Tablestore表中增量数据的一个数据通道，通过创建Tablestore触发器，能够实现Stream和函数计算的自动对接，让计算函数中自定义的...
OSS数据源
不写"nullFormat"这个参数，等同于“未配置”，代表来源是什么数据就直接按照什么数据写入目标端，不做任何转换。否 无 skipHeader 类CSV格式文件可能存在表头为标题情况，需要跳过。默认不跳过，压缩文件模式下不支持 skipHeader。否 ...
如何使用 Git LFS
为什么选择使用 Git LFS？Git LFS 为了解决大文件托管的效率问题，提供了五大特性，抽象看来为：更大：支持 GB 级别的大文件版本控制。更小：让Git仓库空间占用减小。更快：仓库的克隆和拉取更快。透明：Git使用上对用户完全透明。兼容：...
读写数据
读写数据 用户可以调用SDK方法进行读写数据状态为CLOSED和ACTIVE的shard都可以读取数据，不过只有状态为ACTIVE的shard可以写数据。同时用户可以引入datahub-client-library依赖，datahub-client-library是在Java-SDK读写功能的封装，用户...
FTP数据源
不写"nullFormat"这个参数，等同于“未配置”，代表来源是什么数据就直接按照什么数据写入目标端，不做任何转换。否 无 markDoneFileName 标档文件名，数据同步前检查标档文件。如果标档文件不存在，等待一段时间重新检查标档文件，如果...
MySQL
MySQL CDC源表不支持读取PolarDB MySQL版1.0.19及以前版本的多主架构集群（什么是多主集群？PolarDB MySQL版1.0.19及以前版本的多主架构集群产生的Binlog可能出现重复Table id，导致CDC源表Schema映射错误，从而解析Binlog数据报错。...
Web前端直接调用
文件 在同地域O SS 如果您的文件存放在上海OSS中，可以参考 请求签名 进行调用，本文以银行卡识别（RecognizeBankCard）为例，仅展示关键步骤及关键代码，完整的示例可下载 WebDemo。您如果调用其他算法，请参考注释和实际业务修改相应代码...
Shape
可以是Blob文件对象或者URL链接。LinkToFile Enum 是 是否将图片链接到创建该图片的文件。更多信息，请参见 MsoTriState。SaveWithDocument Enum 是 是否将已链接的图片插入到文档一起保存。如果参数 LinkToFile 取值为 msoFalse，则此参数...
PolarDB MySQL版8.0.2版本发布日志
禁用Blob的small partial update特性，以避免读取Blob类型的字段时可能读错数据的问题。使用HINT语法 SET_VAR 设置参数 loose_optimizer_switch 的值时，末尾不再需要添加逗号。2024-04-07 问题修复 修复执行 EXCHANGE PARTITION 操作时，...
将Oracle数据同步到表格存储
通过Tapdata Cloud的可视化界面，您可以将Oracle数据实时同步到表格存储（Tablestore）中。前提条件 使用Tapdata Cloud同步Oracle数据到表格存储前，需要完成如下准备工作。已注册 Tapdata Cloud账号。已创建表格存储实例和表。具体操作，...
Fetch API
说明 对浏览器内部的多种Fetch模式不做区分，例如 CROS fetch，在CDN/DCDN上您可以Fetch任何源站。如果需要4个及以上的子请求时，请 填写信息 申请配额。请求URL的总长度不超过4 KB。ER通过Fetch获取的gzip压缩资源默认解压。如不希望默认...
Fetch API
说明 对浏览器内部的多种Fetch模式不做区分，例如 CROS fetch，在CDN/DCDN上您可以Fetch任何源站。如果需要4个及以上的子请求时，请 填写信息 申请配额。请求URL的总长度不超过4 KB。ER通过Fetch获取的gzip压缩资源默认解压。如不希望默认...
Fetch API
说明 对浏览器内部的多种Fetch模式不做区分，例如 CROS fetch，在CDN/DCDN上您可以Fetch任何源站。如果需要4个及以上的子请求时，请 填写信息 申请配额。请求URL的总长度不超过4 KB。ER通过Fetch获取的gzip压缩资源默认解压。如不希望默认...
PolarDB MySQL版8.0.1版本发布日志
修复在预读Blob类型的数据时，访问无效的Blob引用导致节点崩溃的问题。修复将本地表并行导出至OSS引擎时可能导出失败的问题。修复在执行checkpoint操作时，checkpoint的LSN位点不符合预期，导致集群异常重启后，崩溃恢复逻辑无法正常运行的...
容量和清理说明
当代码库容量满后，企业管理者可以选择「升级企业套餐」以获取更多容量，参见 云效基础功能和高级版专属功能说明：说明 什么是大文件存储 Git LFS 容量？Codeup Git LFS 功能简介 2.如何清理代码库容量？为了保证平台资源不被恶意滥用，...
部分克隆（Partial clone）介绍
部分克隆功能简介 什么是部分克隆?众所周知，Git是一个分布式的版本控制系统，当在默认情况（例如不带任何参数情况下使用git clone命令）下克隆仓库时，Git会自动下载仓库所有文件的所有历史版本。如此设计一方面带来了分布式的代码协同...
DBMS_REDACT
如果希望使用脱敏前的值进行判断，可以使用以下SQL关闭子查询脱敏功能。SET polar_enable_subquery_masking=off;此时再次执行上述 SELECT 语句即可在 JOIN 子句中使用未脱敏的值进行 LEFT JOIN，同样返回的值也是未脱敏的。ADD_POLICY 该...
二进制数据类型
为了操作 BLOB，提供了以下函数：有两种初始化BLOB类型数据的方法，一种是使用EMPTY_BLOB函数来初始化空的BLOB类型数据，另一种是直接插入数据到表中。如需将二进制值转换为 BLOB 类型，请使用 TO_LOB 或 TO_BLOB 函数。
CDN的技术术语
什么是Referer Referer的作用 什么是空Referer 在防盗链设置中允许空Referer和不允许空Referer的区别 什么是跨域 什么是CORS CORS的作用 什么是Referer Referer是HTTP Header的一部分，当浏览器向Web服务器发送请求时，一般会带上Referer，...
使用Kafka客户端消费订阅数据
TYPE_DATETIME_NEW 18 MYSQL_TYPE_TIME_NEW 19 MYSQL_TYPE_JSON 245 MYSQL_TYPE_DECIMAL_NEW 246 MYSQL_TYPE_ENUM 247 MYSQL_TYPE_SET 248 MYSQL_TYPE_TINY_BLOB 249 MYSQL_TYPE_MEDIUM_BLOB 250 MYSQL_TYPE_LONG_BLOB 251 MYSQL_TYPE_BLOB...
附录：DataHub消息格式
目前支持Tuple与Blob两种类型：DataHub类型 写入DML消息 写入上游心跳消息 写入DDL消息 源表和目标topic映射方式 数据类型 Tuple 支持 不支持 不支持 单表对单topic DataHub支持的类型 Blob 支持 支持 支持 单库（多表）对单topic Blob...
使用Kafka客户端消费订阅数据
TYPE_DATETIME_NEW 18 MYSQL_TYPE_TIME_NEW 19 MYSQL_TYPE_JSON 245 MYSQL_TYPE_DECIMAL_NEW 246 MYSQL_TYPE_ENUM 247 MYSQL_TYPE_SET 248 MYSQL_TYPE_TINY_BLOB 249 MYSQL_TYPE_MEDIUM_BLOB 250 MYSQL_TYPE_LONG_BLOB 251 MYSQL_TYPE_BLOB...
静态列（static column）实战
定义静态列 在表中将某个列定义为 STATIC 很简单，只需要在列的最后面加上 STATIC 关键字，具体如下：CREATE TABLE"iteblog_users_with_status_updates"("username"text,"id"timeuuid,"email"text STATIC,"encrypted_password"blob STATIC,...
iOS端接入
implementation MyJSBridge/*重置处理器-该方法将会在加载新页面时调用，可以做一些清理工作。param context WVBridge 被重置时的上下文。param request 要加载的新页面。(void)resetWithContext:(id)contextwithNextRequest:(NSURLRequest...
Cassandra数据类型
Cassandra中二进制大对象是以十六进制存储的，如果想将任意的文本数据类型使用blob存储，可以使用textAsBlob()函数实现。inet：这个数据类型可以表示IPv4或IPv6网络地址。cqlsh接受用于定义IPv4地址的任何合法格式，包括包含十进制，八进制...
基本概念
如果您想了解如何使用蓝图，请参见 什么是蓝图编辑器。工具栏 工具栏位于编辑器页面的最上方，您可以查看工具栏所提供的功能：切换画布/蓝图、美化、滤镜、全局搜索图层/指令/组件/设计库、刷新画布、控制右侧设置面板的显隐、切换主题、...
调优原理和执行计划
PolarDB-X 可以基于统计信息、执行计划、并发策略和执行之后反馈的运行时长等信息，找出导致SQL执行慢的原因，进行针对性调优。一条慢查询可能和物理SQL执行快慢、并发度数量、执行计划和索引选择是否合适都有关系。所以在分布式数据库中，...
二进制类型
二进制字符串可以存储以下数据类型。表 1.二进制大对象 名称 存储大小 描述 BINARY 二进制字符串的长度。定长二进制字符串，长度介于1和8300之间。BLOB 实际二进制字符串加1字节（如果二进制字符串小于127字节）或4字节（如果二进制字符串...
基于Tair与LLM构建企业专属Chatbot
def insert_text_to_tair(self,docs:List[Document]=None,filename:str=""):Tair.from_documents(docs,self.text_embeddings_model,tair_url=self.tair_url)"""结合私域数据，做prompt提交给大模型。def chat_by_prompt(self,query:...
git-filter-repo
介绍 git-filter-repo 是官方推荐用于修改 commit 历史的小工具，详情参见：https://github.com/newren/git-filter-repo/tree/main/contrib/filter-repo-demos 依赖条件 要使用 git-filter-repo 工具，需要做如下准备：git>=2.22.0 at a ...
数据迁移概述
将数据迁移至OSS 您可以基于实际业务需求将本地、第三方存储设备或者OSS源存储空间（Bucket）内的数据迁移至OSS目标Bucket，具体如下表所示：迁移方式 说明 相关文档 在线迁移 使用在线迁移服务，您可以将第三方数据轻松迁移至阿里云对象...
PolarDB HTAP实时数据分析技术解密
用户甚至可以增加一层proxy，自动将TP型负载路由至MySQL数据库，而将分析型负载路由至OLAP数据库。这样的架构有其灵活之处。例如，对于TP数据库和AP数据库都可以各自选择最好的方案，并且实现了TP/AP负载的完全隔离。但其缺点也是显而易见...
OGG for Bigdata(Kafka)
OGG for Bigdata是Oracle官方的将数据库数据实时流式传输到大数据系统的工具，对于Oracle19c及以下的版本均可以支持，目前OGG for Bigdata可以将数据写入Kafka，而DataHub已经兼容Kafka Producer协议，所以用户除了使用DataHub插件将Oracle...
列存索引技术架构介绍
用户甚至 可以增加一层Proxy，自动将TP型负载路由到MySQL上，将分析性负载路由到OLAP数据库上，对应用层屏蔽底层数据库的部署拓扑。架构图如下：该架构 有其灵活之处。如对于TP数据库和AP数据库都可以各自选择最好的方案，而且实现了TP/AP...
文件存储CPFS（NFS协议）备份
max_file_workers=64 max_blob_uploader=128 max_backend_connection=32 说明 以上参数的默认值如下：max_file_workers=10 max_blob_uploader=32 max_backend_connection=5 步骤四：新建备份计划 备份客户端安装完成后，您就可以在 云备份 ...
协同消费
下次启动任务时，可以从服务端获取上次提交的点位，从指定点位的下一条记录开始消费。将点位保存在服务端才能够实现shard重新分配后，能够从上次提交的点位之后消费，是协同消费功能的前提。在Consumer中不需要手动处理点位，在config中...
DM（达梦）数据源
例如在做测试时，可以将 where 条件指定为limit 10。在实际业务场景中，通常会选择当天的数据进行同步，可以将 where 条件指定为 gmt_create>$bizdate：where 条件可以有效地进行业务增量同步。where 条件不配置或为空时，则视作全表同步...
- 产品推荐
- 这些文档可能帮助您