全球多活使用限制
不一致情况 图示 说明 value互换 子实例A在1.1时刻收到SET命令（key->value_A），并于1.2时刻将数据写入数据库。子实例B在2.1时刻收到SET命令（key->value_B），并于2.2时刻将数据写入数据库。在3.1时刻子实例A向子实例B同步数据（key->...
全球多活使用限制
不一致情况 图示 说明 value互换 子实例A在1.1时刻收到SET命令（key->value_A），并于1.2时刻将数据写入数据库。子实例B在2.1时刻收到SET命令（key->value_B），并于2.2时刻将数据写入数据库。在3.1时刻子实例A向子实例B同步数据（key->...
定时SQL Exactly-Once
当您将数据写入到相同的Hash Key中时，如果待写入数据的Sequence ID大于Hash Key中记录的最近一次写入的数据的Sequence ID，则日志服务将允许数据写入，并更新Hash Key中的Sequence ID。基于幂等写入的定时SQL Exactly-Once 定时SQL采用幂...
CREATE TABLE AS SELECT（CTAS）
示例2 从 customer 表读取 customer_id、customer_name 列的数据，并将数据写入新表 new_customer。示例语句如下：CREATE TABLE new_customer AS SELECT customer_id,customer_name FROM customer;示例3 从 customer 表读取 customer_id、...
HTTP API
TSDB For InfluxDB® HTTP路径（endpoint）路径 描述/ping 使用/ping 检查TSDB For InfluxDB®实例的状态和TSDB For InfluxDB®的版本/query 使用/query 查询数据和管理数据库、保留策略和用户/write 使用/write 将数据写入到一个已经存在...
Kafka兼容说明
本文介绍通过开源Kafka客户端将数据写入流表的操作步骤。操作步骤 获取流引擎连接地址。具体操作，请参见 查看连接地址。创建流表。如何创建，请参见 流表。获取Kafka Topic名称。Kafka Topic名称的格式为：LINSTREAM-+Database名+“.”+流...
写入时空对象
在索引表创建完成、时空对象创建完成后，即可调用数据写入接口将数据写入到Lindorm Ganos中。单条记录写入 Lindorm Ganos通过GeoTools API中的SimpleFeatureWriter写入单条数据，SimpleFeatureWriter支持事务，可以通过DataStore的...
写入时空对象
在索引表创建完成、时空对象创建完成后，即可调用数据写入接口将数据写入到HBase Ganos中。单条记录写入 HBase Ganos通过GeoTools API中的SimpleFeatureWriter写入单条数据，SimpleFeatureWriter支持事务，可以通过DataStore的...
2023年
2023-05-06 全部地域 Tablestore外部表 支持将数据带表头写入OSS的CSV文件 MaxCompute支持将数据写入OSS的CSV文件中时，指定第一行为表头名称。2023-05-06 全部地域 创建OSS外部表 新增多个内建函数 MaxCompute新增4个数学函数，3个时间...
开启透明数据加密TDE
背景信息 Tair 的TDE功能可以将RDB数据文件在写入磁盘之前进行加密，从磁盘读入内存时进行解密，具有不额外占用存储空间、无需更改客户端应用程序等优势。图 1.TDE加密 影响 由于开启TDE功能后无法关闭，在开启前，需要评估对业务的影响，...
写数据表
写数据表组件将数据写入MaxCompute表。本文为您介绍写数据表的参数配置。前提条件 如果您需要写入分区表，则需要先创建待写入的分区表，再使用该组件写入数据，关于如何创建分区表，详情请参见 创建分区表。使用限制 支持的计算引擎为...
配置MaxCompute输出
例如：配置MaxCompute表分区字段值来源为源端字段A，当A字段值为aa时，实时同步会将数据写入到MaxCompute表对应的aa分区中，当A字段值为bb时，实时同步会将数据写入到MaxCompute表对应的bb分区中。单击工具栏中的 图标。
将数据写入OSS
非分区路径 示例：通过内置文本数据解析器将数据写入OSS-分区路径 示例：通过内置文本数据解析器将数据以压缩方式写入OSS 示例：通过内置开源数据解析器将数据写入OSS 通过自定义解析器将数据写入OSS 当需要将数据以自定义格式文件写入OSS...
行协议写入
本文介绍通过InfluxDB行协议将数据写入Lindorm时序引擎的方法和示例。背景信息 Lindorm时序引擎兼容InfluxDB的行协议（Line Protocol）格式。对于通过行协议发送数据的应用或设备，都可以将数据写入Lindorm时序引擎中。支持的数据类型 行...
补数据任务概述
Dataphin补数据任务可以对历史数据进行补数，将数据写入至对应时间分区。代码中若使用调度参数，则该参数将根据补数据时选择的业务日期自动替换为具体值，结合业务代码将对应时间数据写入对应分区。帮助您对数据中缺失、错误、重复或不完整...
补数据任务概述
Dataphin补数据任务可以对历史数据进行补数，将数据写入至对应时间分区。代码中若使用调度参数，则该参数将根据补数据时选择的业务日期自动替换为具体值，结合业务代码将对应时间数据写入对应分区。帮助您对数据中缺失、错误、重复或不完整...
INTO子句
语法 SELECT_clause INTO<measurement_name>FROM_clause[WHERE_clause][GROUP_BY_clause]语法描述 INTO 子句支持多种指定measurement的格式：INTO将数据写入到一个指定的measurement。如果您使用CLI写入数据，那么写入数据的measurement...
使用Flink写入时序引擎
说明 实时计算Flink版默认不具备访问公网的能力，如需通过公网将数据写入时序引擎，请参见 Flink全托管集群如何访问公网。已开通时序引擎。Lindorm时序引擎为3.4.7及以上版本，如何查看或升级时序引擎版本，请参见 时序引擎版本说明 和 ...
入门概览
本文介绍 云原生多模数据库 Lindorm 时序引擎的使用流程...对于通过行协议发送数据的应用或设备，都可以将数据写入Lindorm时序引擎中。行协议写入 应用开发，包括数据建模、写入、数据查询、预降采样、机器学习等。具体操作请参见 开发指南。
安全白皮书
TDE功能将在RDB数据文件写入磁盘之前进行加密，从磁盘读入内存时进行解密，确保该实例在所有需要生成RDB文件的场景中（备份及主备数据全量同步等），RDB文件均已被加密，从而提高数据的安全性。TDE功能具有不额外占用存储空间、无需更改...
安全白皮书
TDE功能将在RDB数据文件写入磁盘之前进行加密，从磁盘读入内存时进行解密，确保该实例在所有需生成RDB文件的场景中（备份及主备数据全量同步等），RDB文件均已被加密，从而提高数据的安全性。TDE功能具有不额外占用存储空间、无需更改客户...
通过Logstash导入数仓版
Logstash是开源的服务器端数据处理管道，能够同时从多个数据源采集数据，然后对数据进行转换，并将数据写入指定的存储中。AnalyticDB MySQL 完全兼容MySQL，您可以将Logstash Input插件支持的任一数据源中的数据写入 AnalyticDB MySQL。...
MySQL分库分表同步至Hologres（方案1.0）
注意事项 同步数据至Hologres时，目前仅支持将数据写入分区表子表，暂不支持写入数据至分区表父表。需求分析 场景描述：MySQL实例有三个分库分表数据库 order_db01、order_db02、order_db03。业务上有两种逻辑表：订单表 t_order 和用户表 ...
创建同步MaxCompute
分区模式 分区模式决定了将数据写入到MaxCompute哪个分区中，目前DataHub支持以下分区方式：分区模式 分区依据 支持Topic类型 说明 USER_DEFINE Record中的分区列（和MaxCompute的分区字段同名）的value值 TUPLE(1).DataHub schema中必须...
命令行界面介绍
包括支持Go语言风格的正则表达式，例如：>SELECT*FROM/.*/LIMIT 1->SELECT*FROM“cpu_load_short”->SELECT*FROM“cpu_load_short”WHERE“value”>0.9 这就是你在入门指南里需要知道的将数据写入TSDB For InfluxDB®并进行查询的全部内容...
通过HTTP API写入数据
Length:150 {"error":"field type conflict:input field \"booleanonly\"on measurement \"tobeornottobe\"is type float,already exists as type boolean dropped=1"} 将数据写入到一个不存在的数据库：curl-i-XPOST 'https://<网络地址>:...
计费常见问题
当您在 文件存储 HDFS 版 中写入文件数据产生实际存储容量，则开始计费。文件存储 HDFS 版 服务如何停止计费？如果您确实不再使用 文件存储 HDFS 版 服务，可以删除数据，并删除挂载点，再删除文件系统，即可在下一个账期不产生扣费。删除...
MySQL分库分表同步至Hologres（方案2.0）
注意事项 同步数据至Hologres时，目前仅支持将数据写入分区表子表，暂不支持写入数据至分区表父表。需求分析 场景描述：MySQL实例有三个分库分表数据库 order_db01、order_db02、order_db03。业务上有两种逻辑表：订单表 t_order 和用户表 ...
写入文件提示无法满足最小写入副本要求
本文介绍写入文件提示无法满足最小写入副本要求问题的原因和解决方案。具体报错 报错信息如下所示。其中，【X】是当前正在运行的DataNode数量，【Y】是被排除在此操作之外的DataNode数量。org.apache.hadoop.ipc.RemoteException(java.io....
Memcache（OCS）数据源
使用限制 当前仅支持使用脚本模式将数据写入Memcache（OCS）。支持的字段类型 Memcache Writer目前支持一种格式的写入方式，不同写入方式的类型转换方式不一致。text：Memcache Writer将来源数据序列化为STRING类型格式，并使用您在同步...
配置并管理实时同步任务
选择表建立方式 您可以在 表建立方式 列选择在同步任务执行时自动根据映射关系在目标端创建表，或选择将数据写入已有表。配置表分类 在 表类型 列，确认及修改目标表类型，关于分区表和维度表的相关介绍请参见：基本概念。选择分布字段列 ...
UPSERT
如果指定行不存在，则直接将数据写入。仅支持 CONSISTENCY 为 strong 的表。CONSISTENCY 参数的详细介绍，请参见 表属性（table_options）。如果您想要更改 CONSISTENCY 参数的值，请参见 ALTER TABLE。示例 假设示例表sensor的结构如下：...
一键实时同步至AnalyticDB for MySQL 3.0
选择表建立方式 您可以在 表建立方式 列选择在同步任务执行时自动根据映射关系在目标端创建表，或选择将数据写入已有表。配置表分类 在 表类型 列，确认及修改目标表类型，关于分区表和维度表的相关介绍请参见：基本概念。选择分布字段列 ...
全增量实时同步至Hologres
注意事项 同步数据至Hologres时，目前仅支持将数据写入分区表子表，暂不支持写入数据至分区表父表。操作流程 步骤一：选择同步方案 步骤二：网络与资源配置 步骤三：选择要同步的表 步骤四：目标表映射 步骤五：报警配置 步骤六：高级参数...
MySQL分区表写入最佳实践
为了在您使用MySQL处理庞大数据集时优化写入查询性能，本文详细介绍了DataWorks数据集成将数据写入MySQL分区表的最佳实践。前提条件 已具备MySQL数据库，并在DataWorks中添加为数据源。具体操作，请参见 MySQL数据源。准备工作 创建源表，...
Tablestore
将数据写入到Tablestore%spark/定义将要插入Tablestore的DataFrame；val add_df=spark.createDataFrame(Seq(("1086","20191118-10",2250.0,"jack"),("1010","20191118-11",2200.0,"rose"))).toDF("user_id","order_id","price","name")/将...
实时同步任务延迟解决方案
说明 实时同步任务从一个系统读数据，并将数据写入另一个系统，当写数据比读数据慢时，则读数据一侧的系统会受到反压，导致速度变慢。即造成瓶颈的系统可能会由于反压导致另一侧系统的一些异常，此时要优先关注造成瓶颈的系统的异常情况。...
缓冲区管理
对于未来页，只读节点无法将未来的数据页转换为所需的数据页，因此需要在主节点将数据写入共享存储时考虑所有只读节点的回放情况，从而避免只读节点读取到未来页，这也是Buffer管理需要解决的主要问题。除此之外，Buffer管理还需要维护一致...
通过导入实现列更新
通过正常的导入方式将一部分列的数据写入SelectDB的Memtable，此时Memtable中并没有整行数据。在Memtable下刷的时候，会查找历史数据，用历史数据补齐一整行，并写入数据文件中，同时将历史数据文件中相同Key的数据行标记删除。当出现并发...
最佳实践
压缩文件 如果您不断将数据写入Delta表，随着时间的流逝，它将累积大量文件，尤其是如果您少量添加数据时。这可能会对表读取的效率产生不利影响，也可能影响文件系统的性能。理想情况下，应定期将大量小文件重写为少量大文件。这称为压缩。...
- 产品推荐
- 这些文档可能帮助您