实时消费Kafka数据
云原生数据仓库AnalyticDB PostgreSQL版 中创建目标用户和目标表，同时在任务中使用的数据库用户需要具备以下权限。使用gpfdist协议创建只读外表的权限。任务中配置的数据库Schema的USAGE和CREATE权限。任务中配置的写入目标表的SELECT和...
通过文件管理优化性能
OPTIMIZE events ZORDER BY(eventType)Z-Order支持在多个维度（多列）优化数据布局，在Z-Ordering多列时，使用逗号分隔：OPTIMIZE events ZORDER BY(eventType,generateTime)如果您经常在where语句中使用到某个列，且该列的基数很大（有很...
通过导入实现列更新
在Memtable下刷的时候，会查找历史数据，用历史数据补齐一整行，并写入数据文件中，同时将历史数据文件中相同Key的数据行标记删除。当出现并发导入时，SelectDB会利用MVCC机制来保证数据的正确性。如果两批数据导入都更新了一个相同Key的...
通过整库迁移配置集成任务
说明 可上传单个.xlsx文件或单个包含一个或多个.xlsx文件的压缩包，压缩格式仅支持zip类型。文件需小于50M。单击 解析文件。参数 描述 ① 操作区 搜索来源文件：支持通过文件名称搜索当前来源文件。仅查看解析失败任务：列表将仅展示解析...
ListAutoSnapshotPolicies-列出自动快照策略
当一星期内需要创建多次自动快照时，可以传入多个时间点，时间点之间用半角逗号（,）隔开，最多传入 7 个时间点。例如，["1","3","5"]表示每周一、周三、周五重复创建自动快照。string 自动快照的重复日期，周期为星期。1"TimePoints ...
Hologres结果表
如何使用宽表Merge/局部更新功能 对于常见的多个流的数据写入至一张Hologres宽表的场景，具体使用方法如下：假设Hologres有一张宽表 WIDE_TABLE，有A、B、C、D、E几列，其中A字段是主键，Flink一个流包含数据A、B、C，另一个流包含数据A、D...
如何基于LSM-tree架构实现一写多读
其次是数据组织方式不一样，LSM-tree引擎采用分层存储，追加写入新数据，需要解决多个计算节点一致性物理快照以及Compaction问题。最后，作为数据库引擎，还需要解决一写多读模式下DDL的物理复制问题。同时，为了产品化，充分发挥B+tree...
SendFile-上传本地文件到ECS实例
使用多个标签过滤资源，查询到同时绑定了多个标签的资源数量不能超过 1000 个。如果资源数量超过 1000 个，您需要使用 ListTagResources 接口进行查询。最多支持 64 个字符，不能以 aliyun 或 acs:开头，不能包含 http:// 或 https:// 。...
FAQ
TSDB For InfluxDB®如何处理多个shard之间的field的类型差异？TSDB For InfluxDB®可以存储的最小和最大整数是多少？TSDB For InfluxDB®可以存储的最小和最大时间戳是多少？如何知道存储在field中的数据类型？是否可以改变field的数据...
将NAS数据迁移至本地
通过Robocopy工具迁移数据 方案优势：Robocopy是Windows系统自带的目录复制命令，该功能可以创建两个文件结构相同的镜像副本且不复制任何不需要的重复文件，同时还允许您保留所有相关的文件信息，包括日期、时间戳等等。同时您也可以通过在...
功能发布记录
这些地域100%兼容开源新特性，包括支持使用RRF实现文本和向量召回结果混排、内置ELSER模型支持语义搜索、向量维度从1024提升至2048、KNN查询支持多个字段同时查询等。09月08日 地域：杭州、上海、深圳、成都、广州等 版本：ES 8.9版本 版本...
CreateSnapshot-创建快照
调用CreateSnapshot给一个数据库文件系统创建快照。接口说明 以下场景中，您无法为指定的数据库文件系统创建快照：上一份快照还未完成创建。数据库文件系统实例未处于已挂载（Attached）或者待挂载（Unattached）状态。调试 您可以在Open...
CreateSnapshot-创建快照
访问级别：是指每个操作的访问级别，取值为写入（Write）、读取（Read）或列出（List）。资源类型：是指操作中支持授权的资源类型。具体说明如下：对于必选的资源类型，用背景高亮的方式表示。对于不支持资源级授权的操作，用 全部资源 ...
迁移数据至阿里云NAS
使用Robocopy工具迁移数据 Robocopy是Windows系统自带的目录复制命令，该功能可以创建两个文件结构完全的镜像副本而不复制任何不需要的重复文件，同时还允许您保留所有相关文件信息，包括日期、时间戳等等。同时您也可以通过在windows ECS...
Kafka数据源
[realms]模块指定kdc地址，可以包含多个realm子模块，每个realm子模块以realm名称=开头。后面紧跟一组用大括号包含配置项，每个配置项也以key=value格式书写，典型的Kerberos配置文件格式如下（根据实际情况替换以下内容中的xxx）：...
数据模型
ColumnName Type AggregationType Comment user_id LARGEINT 无 用户ID date DATE 无 数据写入日期 city VARCHAR(20)无 用户所在城市 age SMALLINT 无 用户年龄 sex TINYINT 无 用户性别 last_visit_date DATETIME REPLACE 用户最后一次...
写入文件提示无法满足最小写入副本要求
DataNode负载过高时或者DataNode本身容量太小，同时写入多个文件会导致DataNode无法处理NameNode的分块请求，需要对DataNode进行扩容。说明 您可以通过HDFS Web UI查看DataNode节点的负载，详细信息请参见 HDFS Web UI介绍。如果【X】不为0...
ListTagResources-查询标签的资源
访问级别：是指每个操作的访问级别，取值为写入（Write）、读取（Read）或列出（List）。资源类型：是指操作中支持授权的资源类型。具体说明如下：对于必选的资源类型，用背景高亮的方式表示。对于不支持资源级授权的操作，用 全部资源 ...
UntagResources-解绑并删除标签
删除指定文件系统标签。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中...
视频DNA
同一用户（UID）根据不同业务创建多个视频DNA库。提交视频DNA任务。如果您的视频存量少于2000小时，可以直接通过提交视频DNA作业接口提交任务。详情参见 提交DNA作业。如果您有大容量底库视频需求，请 提交工单 申请对应资源。如果您在实时...
DescribeAutoSnapshotPolicies-查询已创建的自动快照...
访问级别：是指每个操作的访问级别，取值为写入（Write）、读取（Read）或列出（List）。资源类型：是指操作中支持授权的资源类型。具体说明如下：对于必选的资源类型，用背景高亮的方式表示。对于不支持资源级授权的操作，用 全部资源 ...
迁移 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...
移除/全部移除 数据传输支持在数据映射时，对暂时选中到目标端的单个或多个对象进行移除操作。移除单个迁移对象 在选择区域的右侧列表中，鼠标悬停至目标对象，单击显示的 移除，即可移除该迁移对象。移除全部迁移对象 在选择区域的右侧...
极速型NAS
极速型NAS是基于阿里云最新一代网络架构和全闪存储打造的高性能共享文件存储产品，全托管的云存储服务与阿里云丰富的计算服务完全集成，充分发挥公共云计算生态的能力。具有低时延、高IOPS、大容量等特性，适用于Linux时延敏感型企业应用、...
资源包概述
相对于存储包，资源包无需绑定文件系统即可直接使用，同时可以抵扣多个文件系统的存储费用。NAS资源包支持叠加购买，叠加购买等同于升级单个资源包的基准容量。注意事项 购买NAS资源包后，不会生成文件系统。NAS资源包只支持抵扣NAS文件...
INSERT INTO语句
本文为您介绍如何使用INSERT INTO语句在一个作业中写入一个Sink或多个Sink。背景信息 INSERT语句支持使用Hints使用OPTIONS选项给结果表传递参数，详情请参见 SQL Hints。写入一个Sink示例-源表 CREATE TEMPORARY TABLE datagen_source(name...
文件存储 HDFS 版和对象存储OSS双向数据迁移
Hadoop兼容文件系统提供单写者多读者并发语义，针对同一个文件，同一时刻可以有一个写者写入和多个读者读出。以 文件存储 HDFS 版 到对象存储OSS的数据迁移为例，数据迁移任务打开 文件存储 HDFS 版 的文件F，根据当前系统状态决定文件F的...
管理健康报告
字段 说明 表集合 记录导入任务可能同时写入的所有相关表信息，表现为一个包含多个表的集合。表类型 用于区分不同类型的表，主要分为主键表和非主键表两类。非主键表包括明细表、聚合表和更新表。小文件影响得分 通过算法评估潜在小文件...
FTP数据源
否 60,000（1分钟）path FTP文件系统的路径信息，FTP Writer会写入Path目录下多个文件。是 无 fileName FTP Writer写入的文件名，该文件名会添加随机的后缀作为每个线程写入实际文件名。是 无 singleFileOutput FtpWriter写入的文件名受...
配置OSS输出组件
写入文件个数 目标端OSS的文件写入策略。支持写入单个文件和多个文件。单个文件：将写入目标端OSS的单个文件中。多个文件：将写入目标端OSS的多个文件中。同时需要配置后缀格式，格式可选择生成序列后缀，如_0、_1、_2 等；也可选择生成...
配置OSS输出组件
写入文件个数 目标端OSS的文件写入策略。支持写入单个文件和多个文件。单个文件：将写入目标端OSS的单个文件中。多个文件：将写入目标端OSS的多个文件中。同时需要配置后缀格式，格式可选择生成序列后缀，如_0、_1、_2 等；也可选择生成...
单元格填报
支持 添加、删除、复制：可以有多个写入配置从而实现同时写入多张表。配置字段映射：选择已有表或新建表之后，您可以配置填报字段和底表的对应关系。选择 已有表 为对应的 控件 选择写入的 表字段名，将自动匹配表字段名的 字段描述、字段...
用户和组映射
用户和组的数量 单个文件系统最多添加1000个用户。单个文件系统最多添加30个组。每个用户最多属于10个组。文件系统不允许删除用户名和组，只能删除用户和组的映射关系。即一旦一个用户或组以任何方式添加到了文件系统中，则不允许被删除。
企业版产品系列
产品优势 秒级横向写扩展 支持不同库/表在不同计算节点并发写入，最多支持32个节点同时写入。不同数据库可以在不同计算节点秒级动态调度，极大提升整体的并发读写能力。多主互备（省去备节点）如果某个主节点发生故障，可秒级切换到其他低...
配置Amazon S3输出组件
写入文件个数 目标端Amazon S3的文件写入策略。支持写入单个文件和多个文件。单个文件：将写入目标端Amazon S3的单个文件中。多个文件：将写入目标端Amazon S3的多个文件中。同时需要配置后缀格式，格式可选择生成序列后缀，如_0、_1、_2 ...
配置Amazon S3输出组件
写入文件个数 目标端Amazon S3的文件写入策略。支持写入单个文件和多个文件。单个文件：将写入目标端Amazon S3的单个文件中。多个文件：将写入目标端Amazon S3的多个文件中。同时需要配置后缀格式，格式可选择生成序列后缀，如_0、_1、_2 ...
表格填报
支持 添加、删除、复制：可以有多个写入配置从而实现同时写入多张表。配置字段映射：选择已有表或新建表之后，您可以配置填报字段和底表的对应关系。选择 已有表 为对应的 控件 选择写入的 表字段名，将自动匹配表字段名的 字段描述、字段...
使用限制
客户端限制 阿里云DBFS客户端的限制：最多可同时打开 65535 个文件。list 目录及其下面的文件不会统计为打开文件。不支持在 Microsoft Windows 上使用 DBFS 客户端访问 DBFS 文件系统。每台ECS最多可挂载16个DBFS文件系统（开启RAID0条带化...
OSS存储卷概述
多个客户端挂载同一个OSS Bucket时，依赖用户自行协调各个客户端的行为，例如，避免多个客户端写入同一个文件等。不支持硬链接（Hard Link）。CSI plugin为v1.20.7以下的版本时，仅检测本地修改，而不能检测其他客户端或工具的外部修改。为...
自动优化
说明 详细内容可参考Databricks官网文章：自动优化 自动优化的工作原理 自动优化包含两个重要特性：优化Delta表的写入 在开源版Spark中，每个executor向partition中写入文件时，都会创建一个文件进行写入，最终会导致一个partition中包含...
数据集填报
支持 添加、删除、复制：可以有多个写入配置从而实现同时写入多张表。配置字段映射：选择已有表或新建表之后，您可以配置填报字段和底表的对应关系。选择 已有表 为对应的 控件 选择写入的 表字段名，将自动匹配表字段名的 字段描述、字段...
- 产品推荐
- 这些文档可能帮助您