区间柱状图
当选择 多选 时，单击事件可抛出多条数据，数据格式为数组，可高亮多个柱子。柱子颜色 柱子被选中状态下的颜色。柱子描边 柱子描边线的样式，包括描边线条的类型、线条的粗细和描边线的颜色。说明 当线的类型选择 虚线 或 点线 时，还可以...
条形图
当选择 多选 时，单击事件可抛出多条数据，数据格式为数组，可高亮多个柱子。柱子颜色 柱子被选中状态下的颜色。柱子描边 柱子描边线的样式，包括描边线条的类型、线条的粗细和描边线的颜色。说明 当线的类型选择 虚线 或 点线 时，还可以...
柱状图
当选择 多选 时，单击事件可抛出多条数据，数据格式为数组，可高亮多个柱子。柱子颜色 柱子被选中状态下的颜色。柱子描边 柱子描边线的样式，包括描边线条的类型、线条的粗细和描边线的颜色。交互增强：柱状图的数据过多时可设置数据交互...
DML操作
目录 插入单条数据 插入多条数据 单值分区表插入数据 修改数据-单条数据 修改数据-用查询结果批量修改 说明 若您需对Dataphin中逻辑表进行DML操作，请参见 逻辑表DML操作。插入单条数据 INSERT INTO<table_name>VALUES(value1,value2,value...
通过脚本模式配置离线同步任务
单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT类型的目标列中，则会因为转换不合理导致脏数据不会成功写入目的端。您可以在同步任务配置...
创建同步任务
单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT类型的目标列中，则会因为转换不合理导致脏数据不会成功写入目的端。您可以在同步任务配置...
通过向导模式配置离线同步任务
单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT类型的目标列中，则会因为转换不合理导致脏数据不会成功写入目的端。您可以在同步任务配置...
MySQL分库分表同步至Hologres（方案2.0）
同时，为了便于在Hologres表里区分某条记录属于源端哪个物理库、物理表，则需要在Hologres表中添加上三个附加字段（src_datasource、src_database、src_table），标识某条记录的来源数据源实例、数据库以及表，这三个附加字段和物理表中的...
配置API输出组件
多条数据：一次请求以数组形式传递一批数据，每次传递的数据量为批量条数的值。URL路径 非必填，输入URL中的路径，此处的路径会被拼接数据源中配置的URL后。写入JSON路径 非必填，填写JSON路径后可读取数组数据，不填写则读取单条数据。...
配置API输出组件
多条数据：一次请求以数组形式传递一批数据，每次传递的数据量为批量条数的值。URL路径 非必填，输入URL中的路径，此处的路径会被拼接数据源中配置的URL后。写入JSON路径 非必填，填写JSON路径后可读取数组数据，不填写则读取单条数据。...
通过DTS采集数据
注意 DataHub同步的是增量数据，您的数据库中必须插入、删除或更新一条或多条数据后，才会同步到DataHub中。本案例采用手动插入数据的方法，但在实际情况中，都是将用户的购买行为，通过程序的方式动态同步到数据库中的。进行数据抽样时，...
常见问题
ClickHouse每次写入都会生成一个data part，如果每次写入一条或者少量的数据，那会造成ClickHouse内部有大量的data part（会给merge和查询造成很大的负担）。为了防止出现大量的data part，ClickHouse内部做了很多限制，这就是too many ...
MapReduce
最后，一个Key的多条数据经过Reduce的作用后，将变成一个值。输出结果数据。说明 上文仅是对MapReduce框架的简单介绍，更多详情请查阅 功能介绍。下文将以WordCount为例，为您介绍MaxCompute MapReduce各个阶段的概念。假设存在一个文本a....
自定义配置 DDL/DML
如果需要同步的表涉及不支持的 DDL 类型，数据迁移或数据同步项目可能会中断并造成数据问题，且无法恢复。请勿在结构迁移/结构同步、全量迁移/全量同步阶段执行库或者表结构变更的 DDL 操作，否则可能导致数据迁移或数据同步项目中断。操作...
百分比条形图
当选择 多选 时，单击事件可抛出多条数据，数据格式为数组，可高亮多个柱子。柱子颜色 柱子被选中状态下的颜色。柱子描边 柱子描边线的样式，包括描边线条的类型、线条的粗细和描边线的颜色。说明 当线的类型选择 虚线 或 点线 时，还可以...
进度条表格
可单击进度条表格选择列进行多选时抛出临时变量，默认抛出数据中自定义的 id、value、sales、proportion 和 city 字段。具体配置请参见 组件交互配置。当点击操作项时 打开开关，开启关联全局变量功能。可单击进度条表格操作项时抛出临时...
PolarDB数据源
数据示例 源表数据+-+-+-+|id|name|age|+-+-+-+|1|zhangsan|1|2|lisi|+-+-+-+目标表原始数据+-+-+-+|id|name|age|+-+-+-+|2|wangwu|+-+-+-+运行任务后，成功写入目标表1条数据，脏数据1条。id|name|age|+-+-+-+|1|zhangsan|1|2|wangwu|+-+-...
PolarDB-X 2.0数据源
否 无 postSql 执行数据同步任务之后执行的SQL语句，目前向导模式仅允许执行一条SQL语句，脚本模式可以支持多条SQL语句。例如，加上某一个时间戳：tablename为表名，colname为列名 alter table tablename add colname timestamp DEFAULT ...
数据导入性能优化
通过JDBC使用程序导入数据调优 客户端优化 应用端攒批，多条批量导入 在通过JDBC使用程序导入数据过程中，为减少网络和链路上的开销，建议攒批导入。无特殊要求，请避免单条导入。批量导入条数建议为2048条。如果单条数据量过大达到数百KB...
数据导入性能优化
通过JDBC使用程序导入数据调优 客户端优化 应用端攒批，多条批量导入 在通过JDBC使用程序导入数据过程中，为减少网络和链路上的开销，建议攒批导入。无特殊要求，请避免单条导入。批量导入条数建议为2048条。如果单条数据量过大达到数百KB...
源为PolarDB-X的功能规范和约束说明
源端执行大量DDL操作、网络、目的库性能等问题，可能会导致DTS任务存在延迟，此时如刚好遇到机房故障，且同步或迁移至目标库的最后一条数据的时间戳与故障发生时的时间戳之差大于RPO（如5分钟），那么切流需要非常谨慎，建议您暂时不要执行...
源为PolarDB-X的功能规范和约束说明
源端执行大量DDL操作、网络、目的库性能等问题，可能会导致DTS任务存在延迟，此时如刚好遇到机房故障，且同步或迁移至目标库的最后一条数据的时间戳与故障发生时的时间戳之差大于RPO（如5分钟），那么切流需要非常谨慎，建议您暂时不要执行...
离线同步能力说明
单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT类型的目标列中，导致因为转换不合理而无法写入的数据。您可以在同步任务配置时，控制同步...
主备方案介绍
Q：数据D1写入主实例，但数据D1尚未到达备实例时发生切换，此时备实例中写入一条数据D2后数据D1才到达，备实例中存储的是数据D1还是数据D2？A：存储的是数据D1和数据D2中时间戳更大的数据，数据在LTS同步过程中不会改变数据原有的时间戳，...
SQL Server数据源
目前向导模式仅允许执行一条SQL语句，脚本模式可以支持多条SQL语句，例如清除旧数据。否 无 postSql 执行数据同步任务之后执行的SQL语句。目前向导模式仅允许执行一条SQL语句，脚本模式可以支持多条SQL语句，例如加上某一个时间戳。否 无 ...
同步时源库为MySQL的注意事项及限制
由于DTS的延迟时间是根据同步到目标库最后一条数据的时间戳和当前时间戳对比得出，源库长时间未执行DML操作可能导致延迟信息不准确。如果任务显示的延迟时间过大，您可以在源库执行一个DML操作来更新延迟信息。说明 如果同步对象选择为整库...
迁移 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...
由于 UPDATE 和 DELETE 操作在 RDS PostgreSQL 中不支持 LIMIT 语法，当全列匹配时匹配到多条数据，可能会出现 UPDATE 或 DELETE 数据比目标端多的情况。例如，无主键表 t1 中存在 c1 和 c2 两列，在源端有两条 c1=1 和 c2=2 的数据。当源...
网络洞察仪
您可以将网络洞察仪作为业务单元的网络监测件，通过配置业务相关资源，网络洞察仪将为您分析业务单元流量的实时运行状况，帮助您及时感知业务网络异常，并提供网络质量评估和事件影响面分析。基本概念 术语 说明 网络洞察仪 由用户自定义的...
时序引擎版本说明
修复最新值查询在扩容后可能会出现返回多条数据的问题。修复降采样查询中不支持常量折叠计算的问题。修复正则查询降采样数据时间条件不生效的问题。3.4.10 2022年02月28日 新特性 SQL查询语句tags支持通过正则表达式过滤。支持non_negative...
DLA Lakehouse实时入湖
随着数据湖的应⽤越来越多，⼤家发现依赖数据湖最原始的能力，仅仅做简单的存储和分析，往往会遇到很多的问题。比较典型的痛点如下：多源头数据需要统⼀存储管理，并需要便捷的融合分析。源头数据元信息不确定或变化大，需要⾃动识别和管理...
PostgreSQL数据源
否 无 fetchSize 该配置项定义了插件和数据库服务器端每次批量数据获取条数，该值决定了数据集成和服务器端的网络交互次数，能够较大的提升数据抽取性能。说明 fetchSize 值过大（>2048）可能造成数据同步进程OOM。否 512 PostgreSQL ...
Oracle数据源
Oracle数据源为您提供读取和写入Oracle双向通道的功能，方便您后续可以通过向导模式和脚本模式配置数据同步任务。本文为您介绍DataWorks的Oracle数据同步能力支持情况。支持的版本 离线读写 版本 离线读（Oracle Reader）离线写（Oracle ...
DM（达梦）数据源
DM（达梦）数据源作为数据中枢，为您提供读取和写入DM数据库的双向通道，能够快速解决海量数据的计算问题。本文为您介绍DataWorks的DM数据同步的能力支持情况。使用限制 离线同步支持读取视图表。DM Reader和DM Writer仅支持使用 独享数据...
离线同步常见问题
脏数据定义：单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。脏数据影响：脏数据将不会成功写入目的端。您可以控制是否允许脏数据产生，并且支持控制脏数据条数，数据集成默认...
Logview诊断实践
产生小文件的原因主要有两个：我们使用Tunnel上传数据时操作不正确（例如每上传一条数据就重新建一个 upload session），具体可以参考文档：Tunnel命令常见问题。对分区表进行 insert into 操作时，会在 partition 目录下面生成一个新文件...
常见问题
本文汇总了搜索索引的常见问题。开通与购买 为什么已购买搜索引擎，使用搜索索引还需要单独开通？功能特性 什么是搜索索引？搜索索引的适用场景有哪些？搜索索引与二级索引的区别是什么？模糊查询和分词查询的区别及适用的场景有哪些？分区...
AnalyticDB for PostgreSQL数据源
目前向导模式仅允许执行一条SQL语句，脚本模式可以支持多条SQL语句，例如清除旧数据。否 无 postSql 执行数据同步任务之后执行的SQL语句。目前向导模式仅允许执行一条SQL语句，脚本模式可以支持多条SQL语句，例如加上某一个时间戳。否 无 ...
如何解决全量迁移慢或迁移卡住
问题现象 DTS在全量数据同步或迁移阶段时，可能会出现耗时很久的现象，或者出现任务卡住的迹象。可能原因 源库待同步或迁移的数据量大或无主键。源库创建了多个DTS任务。源或目标库连接异常。例如，数据库设置了白名单、账号权限不足、账号...
全增量实时同步至Hologres
限流：考虑到速度过高可能对数据库造成过大的压力从而影响生产，数据集成同时提供了限速选项，您可以通过限流控制同步速率，从而保护读取端数据库，避免抽取速度过大，给数据库造成太大的压力。限速最小配置为1MB/S，最高上限为30MB/s。离...
离线同步任务调优
本文为您介绍影响数据同步速度的因素、如何通过调整同步任务的并发配置来实现同步速度最大化、作业的限速选项，以及数据同步过慢的场景。文档概述 同步速度受同步任务本身配置、数据库、网络等多方面影响，详情请参见：数据同步速度的影响...
- 产品推荐
- 这些文档可能帮助您