对象存储OSS
当配置了跟上游的chained operator不一样的parallelism时，写文件的算子会使用指定的sink parallelism，如果开启了文件合并，文件合并的算子也会使用指定的sink parallelism。说明 这个值应该大于0，否则将抛出异常。配置Bucket鉴权信息 ...
CreateDBClusterEndpoint
当两个节点都是只读节点时，写请求都会发往主节点。PolarDB PostgreSQL版和PolarDB PostgreSQL版（兼容Oracle）必须包含主节点。ReadWriteMode String 否 ReadOnly 读写模式，取值范围如下：ReadWrite：可读可写（自动读写分离）。ReadOnly...
CreateDBClusterEndpoint
当两个节点都是只读节点时，写请求都会发往主节点。PolarDB PostgreSQL版和PolarDB PostgreSQL版（兼容Oracle）必须包含主节点。ReadWriteMode String 否 ReadOnly 读写模式，取值范围如下：ReadWrite：可读可写（自动读写分离）。ReadOnly...
现代IM系统中的消息系统—实现
因此在消息写扩散时，只需知道群内用户的user_id列表和好友user_id，即可以完成写扩散。功能：用户检索 对于用户，添加好友的需求有很多种，本样例中您只需要维护用户表，并且创建多元索引，即可轻松实现。样例中未实现，您可以根据自己...
NAS性能测试
FIO会将指定的文件大小全部读/写完成，然后才停止测试，除非受到其他选项（例如运行时）的限制。如果未指定该参数，FIO将使用给定文件或设备的完整大小。也可以将大小作为1到100之间的百分比给出。例如指定size=20%，FIO将使用给定文件或...
JindoData版本说明
优化了临时目录异常或者出现坏盘时，JindoMagicCommitter客户端写OSS的重试逻辑，以最大程度保证作业写入成功并避免InvalidPart异常 One or more of the specified parts could not be found or the specified entity tag might not have ...
测试块存储性能
FIO会将指定的文件大小全部读/写完成，然后才停止测试，除非受到其他选项（例如运行时）的限制。如果未指定该参数，FIO将使用给定文件或设备的完整大小。也可以将大小作为1到100之间的百分比给出。例如指定size=20%，FIO将使用给定文件或...
Rowkey设计
为了防止在写操作时出现hotspotting，设计行键时应该使得数据尽量同时往多个地域上写，而避免只向一个地域写，除非那些行真的有必要写在一个地域里。下面介绍了集中常用的避免hotspotting的技巧，它们各有优劣。Salting Salting 从某种程度...
CreateDBClusterEndpoint-创建自定义集群地址
当两个节点都是只读节点时，写请求都会发往主节点。PolarDB PostgreSQL 版和 PolarDB PostgreSQL 版（兼容 Oracle）必须包含主节点。pi-*,pi-*ReadWriteMode string 否 读写模式，取值范围如下：ReadWrite：可读可写（自动读写分离）。...
数据总线DataHub
说明 如果您填写的topic是blob类型（一种无类型的非结构化数据的存储方式），则在Flink消费时，表定义中必须有且只有一个VARBINARY类型的字段。accessId 阿里云账号的AccessKey ID。String 是 无 详情请参见 如何查看AccessKey ID和...
ThingModelJson数据说明
调用某些物模型相关API时，请求参数或返回参数中包含参数 ThingModelJson，该参数的取值格式为物模型功能定义在物联网平台系统的存储结构，与TSL中的数据结构有所不同。ThingModelJson中所有字段按照key的字符排序。物模型功能定义的限制...
通用云盘IO加速功能技术介绍
当出现大规模数据读写或频繁数据读写请求时，IO操作可能成为系统瓶颈。因此，阿里云RDS产品推出新的存储类型——通用云盘。在兼容ESSD云盘所有特性的基础上，通用云盘采用三级存储架构对不同类型的数据和缓存进行分级管理和读写，并且引入...
数据库
buffers_backend_fsync bigint 执行fsync调用的次数（通常即使后端会自动进行写操作，后台写进程也会处理这些）。buffers_alloc bigint 被分配的缓冲区数量。stats_reset timestamp with time zone 这些统计信息上次被重置的时间。活动状态...
数据库
buffers_backend_fsync bigint 执行fsync调用的次数（通常即使后端会自动进行写操作，后台写进程也会处理这些）。buffers_alloc bigint 被分配的缓冲区数量。stats_reset timestamp with time zone 这些统计信息上次被重置的时间。活动状态...
写入或更新调优指南
SQL为点查点写，那么就会走右侧的执行链路，此链路统称为Fixed Plan。Fixed Plan的Query特征足够简单，没有QO等组件的开销，因此在写入或更新时是行锁，这样就能极大的提高Query的并发能力及性能。因此在优化写入或更新性能时，优先考虑让...
ModifyDBClusterEndpoint-修改PolarDB的集群地址属性
当两个节点都是只读节点时，写请求都会发往主节点。PolarDB PostgreSQL 版和 PolarDB PostgreSQL 版（兼容 Oracle）必须包含主节点。pi-*,pi-*ReadWriteMode string 否 读写模式，取值范围如下：ReadWrite：可读可写（自动读写分离）...
OSS存储读写分离最佳实践
通过ossfs进行写操作时，注意事项如下。并发写场景中，OSSFS无法保证数据写入的一致性。挂载状态下，登录应用Pod或宿主机，在挂载路径下删除或变更文件，都会直接删除或变更OSS Bucket中对应的源文件。您可以通过开启OSS Bucket的版本控制...
Hudi
理论上，bulk_insert写任务的并发数就是划分的bucket数，当每个bucket在写到文件大小上限（parquet 120 MB）时，会滚动到新句柄，所以最终的写文件数量大于等于bulk_insert写任务的并发。write.bulk_insert.shuffle_input 是否将数据按照...
Hive数据源
通过读取HDFS文件的方式，从Hive写出数据至HDFS。再通过Hive JDBC客户端执行LOAD DATA SQL语句，加载HDFS文件中的数据至Hive表。Hive Writer底层的逻辑和HDFS Writer插件一致，您可以在Hive Writer插件参数中配置HDFS Writer相关的参数，...
异构数据源访问
参数 参数 说明[WRITABLE|READABLE]创建可写外表时，必须定义WRITABLE关键字。创建可读外表时，可定义READABLE关键字或省略。READABLE 可读外表，可选。path-to-hdfs-dir HDFS数据存储目录的绝对路径。PROFILE 指定HDFS外表数据格式，文本...
HBase数据源
附录：脚本Demo与参数说明 附录：离线任务脚本配置方式 如果您配置离线任务时使用脚本模式的方式进行配置，您需要在任务脚本中按照脚本的统一格式要求编写脚本中的reader参数和writer参数，脚本模式的统一要求请参见 通过脚本模式配置离线...
通过命令行工具快速使用云存储网关软件版
在设置SeqMode选项时，由于涉及到云存储网关软件版写模式的转变，因此请确保设置时挂载点没有IO。在SeqMode没有设置成功之前，新的IO请求均会返回失败。在标准模式下，如果挂载点IO刚结束，同时有很多文件正在上传，那么设置SeqMode选项时...
MariaDB数据源
是 无 writeMode 选择导入模式，支持insert into、on duplicate key update和replace into 三种方式：insert into：当主键/唯一性索引冲突时会写不进去冲突的行，以脏数据的形式体现。如果您通过脚本模式配置任务，请设置 writeMode 为...
大数据计算服务MaxCompute
增量源表独有 增量源表通过间歇轮询MaxCompute服务器获取所有的分区信息来发现新增的分区，读取新分区时要求分区内数据已写入完毕，详情参见 增量MaxCompute源表监听到新分区时，如果该分区还有数据没有写完，如何处理？通过startPartition...
使用ossfs上传大文件时提示“There is no enough disk...
ossfs在上传文件时会写一些临时缓存文件到/tmp 目录下，在写这些文件之前需要先判断/tmp 目录所在的磁盘可用空间是否小于您上传的文件总量，若判断磁盘可用空间小于您上传文件总量，就会出现本地磁盘可用空间不足的报错。以下场景会导致...
Elasticsearch数据源
支持的字段类型 类型 离线读（Elasticsearch Reader）离线写（Elasticsearch Writer）实时写 binary 支持 支持 支持 boolean 支持 支持 支持 keyword 支持 支持 支持 constant_keyword 不支持 不支持 不支持 wildcard 不支持 不支持 不支持...
MySQL数据源
字段类型 离线读（MySQL Reader）离线写（MySQL Writer）实时读 实时写 TINYINT 支持 支持 支持 支持 SMALLINT 支持 支持 支持 支持 INTEGER 支持 支持 支持 支持 BIGINT 支持 支持 支持 支持 FLOAT 支持 支持 支持 支持 DOUBLE 支持 支持 ...
通过读写分离提升数据吞吐性能
一般情况下，对数据库的读和写都在同一个数据库服务器中操作时，业务系统性能会降低。为了提升业务系统性能，优化用户体验，可以通过读写分离来减轻主数据库的负载。本教程主要介绍如何使用中间件MySQL-proxy实现读写分离。前提条件 使用本...
如何设置签名？
1、在写邮件页面，点击正文编辑器中的 插入签名，可选择 Local、新建签名 或进入 签名设置。2、选择 Local 可以插入或编辑网页端自带的签名。
PolarDB-X 2.0数据源
是 无 writeMode 选择导入模式，支持 insert into 和 replace into 两种方式：insert into：当主键/唯一性索引冲突时会写不进去冲突的行，以脏数据的形式体现。如果您通过脚本模式配置任务，请设置 writeMode 为insert。replace into：没有...
MongoDB 4.4功能概览
在以下两个场景中，Streaming Replication功能会大大提升性能：当用户的写操作指定了 writeConcern 参数为"majority"时，写操作需要等待足够多次数的“备库返回复制成功”。而在新的复制机制下，高延迟的网络环境也可以平均提升50%的 ...
通过自定义角色访问数据（跨账号场景）
OSS投递任务（新版）运行时，将读取Logstore中数据并投递到OSS Bucket中。您可以授予OSS投递任务使用自定义角色来完成以上操作。...请记录该信息，如果您在创建OSS投递任务时使用的是自定义角色，则需要在 写OSS RAM角色 中输入该信息。
通过RAM用户写数据到MaxCompute
MaxCompute投递任务（新版）运行时，需要将读取到的Logstore数据投递到MaxCompute表中，您可以使用RAM用户完成该操作。本文介绍如何对RAM用户进行授权。前提条件 执行本操作的账号为主账号。已创建RAM用户。具体操作，请参见 创建RAM用户。...
Quick BI数据填报在写入数据时的入库审批设置方法
概述 本文为您介绍Quick BI数据填报在写入数据时的入库审批设置方法。详细信息 在表单设置中开启【入库审批】即可，开启后在进行填报时会选择相应的审批人，待审批人同意后才可把数据录入成功。适用于 Quick BI
注册域名时如何填写域名信息
本文为您介绍注册域名时如何填写域名信息。注册域名时不填写正确的信息可以吗？域名持有者英文信息怎么...当域名属于个人所有时，域名管理联系人和域名持有者可以是同一个人。icmsDocProps={'productMethod':'created','language':'zh-CN',};
将时空数据写入宽表引擎
不使用时空函数查询，在数据流表中执行查询语句时会默认将时空数据转化为WKT格式，有关WKT格式的介绍请参见 空间数据类型。SELECT*FROM gps_data_stream;查询结果如下：使用时空函数查询。SELECT*FROM gps_data_stream WHERE ST_Contains...
使用Java SDK写入数据时报错The count of attribute ...
问题现象 使用 表格存储 Java SDK写入数据到数据表时出现如下报错：The count of attribute columns exceeds the maximum:128 可能原因 写入数据到 表格存储 数据表时，一行最多支持写入1024列。在使用TableStoreWriter的过程中，客户端会...
企业认证时，发证机构如何填写？
概述 本文介绍企业认证时如何填写发证机构。详细信息 当在申请企业认证的时候，发证机构就是给您发营业执照的机构单位；适用于 专属钉钉
写入Oracle时空值会写为NULL
详细信息 Dataphin通过数据管道同步数据至Oracle数据库时，会把空字符串解析插入为NULL。Oracle 认为''和NULL等价，这个是Oracle特性决定的，手动写SQL插入Oracle空字符串，查询发现实际也是NULL。这个和同步任务没关系。适用于 Dataphin
- 产品推荐
- 这些文档可能帮助您