RDS MySQL迁移至AnalyticDB MySQL 3.0
源库中待迁移的表无主键，则自动生成一个自增主键列，可能会导致源库和目标库数据不一致。已选择对象 如需更改单个迁移对象在目标实例中的名称，请右击 已选择对象 中的迁移对象，设置方式，请参见 库表列名单个映射。如需批量更改迁移对象...
列存索引如何实现高效数据过滤
对于存量数据来说，可以找个空闲时间进行变更操作，而如果查询条件很多不包含分区键，则建议采用其他优化手段。统计信息剪枝：由于写入时不排序，统计信息对于数据分布离散均匀的场景效果比较差，有以下优化方案：减小pack大小。对于minmax...
CREATE MATERIALIZED VIEW
说明 SELECT 查询可以包含 DISTINCT、GROUP BY、ORDER BY 和 LIMIT 等，但是相应的转换是在每个插入数据块上独立执行的。示例：创建 SELECT 子句指定的源表。CREATE TABLE test ON CLUSTER default(id Int32,name String)ENGINE=...
PolarDB MySQL版迁移至AnalyticDB MySQL 3.0
源库中待迁移的表无主键，则自动生成一个自增主键列，可能会导致源库和目标库数据不一致。已选择对象 如需更改单个迁移对象在目标实例中的名称，请右击 已选择对象 中的迁移对象，设置方式，请参见 库表列名单个映射。如需批量更改迁移对象...
2.0数据类型版本
如果不指定以上两个参数，则默认为 decimal(38,18)。说明 同一个表中不能同时存在新老Decimal数据类型。执行 setproject odps.sql.hive.compatible=true;命令开启Hive兼容模式时，Decimal(precision,scale)类型在数据导入（Tunnel Upload）...
常见问题
为什么Kafka外表建表后数据不增加？为什么客户端看到的时间结果和时区显示的不一样？为什么数据写入后不可见？为什么optimize任务很慢？为什么optimize后数据仍未主键合并？为什么optimize后数据TTL仍未生效？为什么optimize后更新删除操作...
按时间戳冷热分离
范围查询Scan 说明 如果范围查询（Scan）不设置 HOT_ONLY 参数和 TimeRange，或 TimeRange 包含位于冷存储区的时间，则系统会并行查询冷热数据并合并结果。范围查询仅支持HBase Shell和HBase Java API使用方式。方式一：HBase Shell 不带 ...
离线同步数据质量排查
数据库则使用来源数据update更新目标表已有数据行，在目标表存在多个数据约束的情况下，数据替换可能会失败并产生脏数据 如果写出数据和目标存储已有数据没有发生数据约束，数据库则将来源数据插入（和insert into行为限制一致）至目标存储...
从RDS同步至MaxCompute
警告 选择为 忽略报错并继续执行，可能导致数据不一致，给业务带来风险，例如：表结构一致的情况下，如果在目标库遇到与源库主键的值相同的记录，在初始化阶段会保留目标库中的该条记录；在增量同步阶段则会覆盖目标库的该条记录。表结构不...
INSERT INTO
本文介绍如何用INSERT INTO 语句向 云数据库 ClickHouse 数据表中插入数据。基本语法 INSERT INTO 语句基本格式如下：INSERT INTO[db.]table[(c1,c2,c3)]VALUES(v11,v12,v13),(v21,v22,v23),.对于存在于表结构中但不存在于插入列表中的列，...
数据操作
ts（可选）：时间戳即数据的版本号，可以由系统自动生成或者自定义，如果不设置此参数，则默认由系统自动生成。更多信息，请参见 数据版本和生命周期。condition 否 ignore 使用条件更新，可以设置原行的存在性条件。取值范围如下：ignore...
商品属性提取和多模搜索
如果这些图片素材没有被很好地管理和利用，则经常会出现找不到之前已经准备好的素材，需要重新拍摄的情况。分析型数据库MySQL版可以帮助电商卖家管理和检索图片素材，可以根据图片类别、属性或者相似图片做多模检索。例如，检索与输入图片...
写入数据
如果不检查返回值，则可能会忽略掉部分操作的失败。当服务端检查到某些操作出现参数错误时，BatchWriteRow接口可能会抛出参数错误的异常，此时该请求中所有的操作都未执行。一次请求中支持分别对PutRow、UpdateRow、DeleteRow子操作设置...
写数据表
本文介绍写数据表算子的使用方法。用途 写数据表 算子用于将模型上游节点处理之后的出具写入指定的数据表中。适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 ...如果不一致则将抛出异常，需要用户自行处理。
Interval范围分区
如果间隔设置为1个月，并且在当前插入最新分区之后两个月的数据，则仅创建该月的分区，而不创建中间分区。例如，您可以创建一个间隔范围分区表，间隔为每月，最新分区的范围为2019年1月15日至2019年2月15日。如果您尝试插入2019年5月10日的...
插入或覆写动态分区数据（DYNAMIC PARTITION）
MaxCompute支持通过 insert into 或 insert overwrite 操作向动态分区中插入数据。本文中的命令您可以在如下工具平台执行：MaxCompute客户端 使用SQL分析连接 使用DataWorks连接 MaxCompute Studio 前提条件 执行 insert into 和 insert ...
整库离线同步至Elasticsearch
如果没有相同的主键，则直接插入数据。更新数据时，是先将原有的一行数据全部删除后再重新插入。每批次写入的条数 每次批量写入Elasticsearch的数据条数，即攒够一定条数的数据后，一次性写入Elasticsearch。默认为 1000。您可以根据实际...
DBMS_REDACT
如果regexp_pattern与数据不匹配，则 返回NULL。regexp_replace_string 指定替换字符串值。regexp_position 指定搜索必须开始的字符位置。默认情况下，函数参数是RE_BEGINNING。regexp_occurence 指定子字符串的替换出现。如果常量是RE_ALL...
写入数据
数据的版本号可以由系统自动生成或者自定义，如果不设置此参数，则默认由系统自动生成。当由系统自动生成数据的版本号时，系统默认将当前时间的毫秒单位时间戳（从1970-01-01 00:00:00 UTC计算起的毫秒数）作为数据的版本号。当自定义数据...
导出至OSS
INSERT OVERWRITE SELECT 功能：INSERT OVERWRITE SELECT 用于向表中批量插入数据。如果目标外表中已存在数据，则每次写入会先删除原外表路径下全部数据文件，再产生新的OSS数据文件。重要 写入的外表必须保持列个数的完整，不允许用户指定...
使用DTS将华为云文档数据库迁移至阿里云
如果选择屏蔽告警检查项，可能会导致数据不一致等问题，给业务带来风险。预检查通过率 显示为 100%时，单击 下一步购买。在 购买 页面，选择数据迁移实例的链路规格，详细说明请参见下表。类别 参数 说明 信息配置 资源组配置 选择实例所属...
使用DTS将华为云文档数据库迁移至阿里云
如果选择屏蔽告警检查项，可能会导致数据不一致等问题，给业务带来风险。预检查通过率 显示为 100%时，单击 下一步购买。在 购买 页面，选择数据迁移实例的链路规格，详细说明请参见下表。类别 参数 说明 信息配置 资源组配置 选择实例所属...
识别规则及识别方式
不更新：仅采样存储一次，如果采样成功，则后续不主动更新数据。空值补偿：当采样数据中单个字段全是空值时，会无法按照内容识别。开启空值补偿后，如果抽样的字段全是空值，会再次进行一次非空采样，采样成功进入识别流程，采样失败则该...
使用SQL管理外部项目
向表中插入数据。向非分区表插入数据。进入关联的MaxCompute项目（非外部项目）。use doc_test_prod;向非分区表中插入数据。insert into table ext_mcdlf_ddl.ddl_test values(1,"ddl_test_1");向分区表中插入数据。进入关联的MaxCompute...
冷热分离
get.setTimeRange(0,1568203111265)Scan 如果scan不设置Hot Only，或者TimeRange包含冷区时间，则会并行访问冷数据和热数据来合并结果，这是由于HBase的Scan原理决定的。Shell/不带HotOnly Hint的查询，一定会查询到冷数据 hbase(main):017...
DML操作常见问题
对 VARCHAR(10)数据类型的字段插入数据时，数据长度溢出时会截断并不报错。在执行MaxCompute SQL过程中，报错Transaction timeout because cannot acquire exclusive lock，如何解决？问题现象 执行MaxCompute SQL的过程中，返回报错如下。...
填充数据库
在一个事务中做所有插入的一个额外好处是：如果一个行的插入失败则所有之前插入的行都会被回滚，这样你不会被卡在部分载入的数据中。2.使用COPY 使用 COPY 在一条命令中装载所有记录，而不是一系列 INSERT 命令。COPY 命令是为装载大量行而...
通过实时计算订阅数据
说明 如果数据格式不匹配，需要进行相应的 数据格式转换 工作，例如使用 from_unixtime 函数等。示例代码如下：INSERT INTO target_table SELECT t.dts_order_id,t.dts_buyer_id,t.dts_buyer_name,t.dts_product_id,t.dts_product_name,t....
INSERT ON DUPLICATE KEY UPDATE
使用 INSERT ON DUPLICATE KEY UPDATE 语句批量插入数据时，您无需在每个 VALUES()语句后都添加 ON DUPLICATE KEY UPDATE，仅需在最后一个 VALUES()后加上即可。例如，需要在 student_course 表中批量插入3条数据，您可以执行如下语句：...
列存索引配置参数说明
说明 开启列存和行存自动引流功能后，如果SQL语句的预估执行代价阈值大于50000，则路由至列存节点。loose_cost_threshold_for_imci 列存节点内部当前SQL语句的预估执行代价阈值。取值范围：1~18446744073709551615。默认值为50000。说明 ...
调试实时任务
如果数据源无开发元表，则不支持 自动抽样。若任务中使用的是 Project_Name.元表名，则自动抽取生产元表。如果您没有生产环境元表权限，则会报错。请先申请生产表权限，请参见 申请表权限。若任务中使用的是${Project_Name}.元表名 或 元表...
INSERT
如果使用 insert into select 的方式插入数据，目标列和查询列类型需要一一对齐。使用示例 插入普通表。CREATE TABLE holotest(a int,b bigint,c bool,e decimal(38,10),f text,g timestamp,h timestamptz,i jsonb,j int[]);INSERT INTO ...
调试实时任务
如果数据源无开发元表，则不支持 自动抽样。若任务中使用的是 Project_Name.元表名，则自动抽取生产元表。如果您没有生产环境元表权限，则会报错。请先申请生产表权限，请参见 申请表权限。若任务中使用的是${Project_Name}.元表名 或 元表...
RDS SQL Server同步至RDS MySQL
警告 如您选择不使用源库的Schema名称，则源库多个Schema中不允许有名称相同的table，否则可能会导致数据不一致或任务失败。SQLServer增量同步模式 非堆表用日志解析增量同步，堆表用CDC增量同步：优点：支持源库堆表、无主键表、压缩表、...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
警告 选择为 忽略报错并继续执行，可能导致数据不一致，给业务带来风险，例如：表结构一致的情况下，如在目标库遇到与源库主键或唯一键的值相同的记录：全量期间，DTS会保留目标集群中的该条记录，即源库中的该条记录不会同步至目标数据库...
新建TDengine数据源
如果数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类打标，如何创建标签，请参见 数据源管理标签。配置数据源与Dataphin的连接参数。若您的数据源配置选择 生产+开发数据源，则需配置 生产+...
新建TDengine数据源
如果数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类打标，如何创建标签，请参见 数据源管理标签。配置数据源与Dataphin的连接参数。若您的数据源配置选择 生产+开发数据源，则需配置 生产+...
RDS SQL Server迁移至RDS MySQL
警告 如您选择不使用源库的Schema名称，则源库多个Schema中不允许有名称相同的table，否则可能会导致数据不一致或任务失败。SQLServer增量同步模式 非堆表用日志解析增量同步，堆表用CDC增量同步：优点：支持源库堆表、无主键表、压缩表、...
RDS SQL Server迁移至PolarDB MySQL版
警告 如您选择不使用源库的Schema名称，则源库多个Schema中不允许有名称相同的table，否则可能会导致数据不一致或任务失败。SQLServer增量同步模式 非堆表用日志解析增量同步，堆表用CDC增量同步：优点：支持源库堆表、无主键表、压缩表、...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
警告 如您选择不使用源库的Schema名称，则源库多个Schema中不允许有名称相同的table，否则可能会导致数据不一致或任务失败。SQLServer增量同步模式 非堆表用日志解析增量同步，堆表用CDC增量同步：优点：支持源库堆表、无主键表、压缩表、...
- 产品推荐
- 这些文档可能帮助您