折线类常见问题
当数据里有 s 字段时，不同的 s 字段值为不同的系列（多条折线）。说明 配置项中的样式渲染默认按照数据的顺序。即如果第一个出场的数据是系列2，则该系列的数据将以配置项中的第一个系列样式来渲染。如果系列期望特定的排序，建议使用过滤...
查看并管理已生成实例
查看已生成实例列表 补数据实例运维列表页面展示当前 补数据名称-业务日期、补数据状态、补数据任务、补数据提交人、业务日期、提交时间、运行时长、节点数 及支持的操作。已生成实例的单个已生成实例包括三层，如下图所示。区域 描述 ① ...
查看并管理已生成实例
查看已生成实例列表 补数据实例运维列表页面展示当前 补数据名称-业务日期、补数据状态、补数据任务、补数据提交人、业务日期、提交时间、运行时长、节点数 及支持的操作。已生成实例的单个已生成实例包括三层，如下图所示。区域 描述 ① ...
AnalyticDB for MySQL 3.0数据源
AnalyticDB for MySQL 3.0数据源为您提供读取和写入 AnalyticDB for MySQL 3.0双向通道的功能，本文为您介绍DataWorks的AnalyticDB for MySQL 3.0数据同步的能力支持情况。使用限制 ADB湖仓版数据源不支持在公共资源组配置以及运行同步任务...
配置同步任务
加载策略 向目标数据源（HDFS数据源）写入数据时，数据写入表中的策略。加载策略包括覆盖数据、追加数据、文件名冲突报错，适用场景说明如下：覆盖数据：覆盖数据策略下，先删除目标目录下的文件，再新增数据文件。追加数据：追加数据策略...
DM（达梦）数据源
DM（达梦）数据源作为数据中枢，为您提供读取和写入DM数据库的双向通道，能够快速解决海量数据的计算问题。本文为您介绍DataWorks的DM数据同步的能力支持情况。使用限制 离线同步支持读取视图表。DM Reader和DM Writer仅支持使用 独享数据...
DataHub数据源
datahub侧对于一次request请求写入的数据条数限制是10000条，超出10000条数据会超出限制导致任务出错，请根据您单条数据平均数据量*10000条数据的数据总量来从侧方面进行单次写入datahub的数据条数控制。比如每条数据10 k，那么此参数的...
SET TRANSACTION
事务的隔离级别确定当其他多个事务同时运行时事务可看到的数据：READ COMMITTED 语句只能看到在开始执行这条语句之前提交的行。这是默认值。SERIALIZABLE 当前事务的所有语句只能看到在此事务中执行第一个查询或数据修改语句之前提交的行。...
Tunnel SDK常见问题
问题类别 常见问题 Tunnel SDK Upload 使用Tunnel SDK上传数据时，上传的数据可以自动分配到各个分区吗？使用Tunnel SDK上传数据时，编写完UDF打成JAR包后上传，对JAR包大小有要求吗？使用Tunnel SDK上传数据时，是否有分区数量限制？使用...
API概览
数据操作 API 标题 API概述 InsertList 插入多条数据 调用InsertList批量插入数据。ExecuteStatement 执行SQL语句 调用ExecuteStatement接口对指定数据库执行SQL语句。BatchExecuteStatement 批处理SQL语句 调用BatchExecuteStatement接口...
数据导入方式介绍
为满足多样化的数据导入需求，云原生数据仓库AnalyticDB MySQL版 提供了多种数据导入方式，包括：通过外表导入数据、使用DataWorks导入数据和利用JDBC通过程序导入数据等。本文介绍各导入方式的特性及适用场景，帮助您选择正确的数据导入...
H5客户端接入
其他情况返回false，网站开发者可根据该返回值决定是否需要进行下⼀步操作，提交表单或ajax进行⼆次验证。通过ajax方式进行⼆次验证示例!DOCTYPE html> <html lang="zh"> <script> initAlicom4({/省略配置参数 },function(captchaObj){/省略...
实时数据订阅概述
背景信息 云原生多模数据库 Lindorm 数据订阅功能支持任何一个表的每一条数据变更，您可以在客户端查看数据变更记录。当您开通某一张表的数据订阅功能后，其变更数据的操作就会被存储。每次对Lindorm表格的数据执行增删改操作时，数据订阅...
常见问题
（自动生成是指配置cleanup=true执行同步任务）向ES写入数据时，会做一次无用户名的提交，但仍需验证用户名，导致提交失败，因此提交的所有请求数据都被记录，导致审计日志每天都会有很多，如何处理？Elasticsearch writer配置了Settings，...
创建EMR Presto节点
使用EMR Presto节点查询数据时，返回的查询结果最大支持 10000 条数据，并且数据总量不能超过 10M。其他 数据血缘：当前EMR Presto节点的任务不支持产出血缘关系。创建EMR Presto节点（单击展开查看详情）进入数据开发页面。登录 DataWorks...
创建单物理表服务单元
最多返回1000条数据。单击 提交，完成单物理表服务单元的创建。后续步骤 在服务单元页面，单击 操作 列下的 图标，选择 发布，将单物理表服务单元提交至生产环境，后续就可基于此单物理表服务单元创建API。详情请参见 API任务概述。物理表...
配置DataHub输出组件
配置DataHub输出组件，可以将外部数据库中读取数据写入到DataHub，或从大数据平台对接的存储系统中将数据复制推送至DataHub，进行数据整合和再加工。本文为您介绍如何配置DataHub输出组件。前提条件 已创建DataHub数据源。具体操作，请参见...
配置DataHub输出组件
配置DataHub输出组件，可以将外部数据库中读取数据写入到DataHub，或从大数据平台对接的存储系统中将数据复制推送至DataHub，进行数据整合和再加工。本文为您介绍如何配置DataHub输出组件。前提条件 已创建DataHub数据源。具体操作，请参见...
通过DTS采集数据
注意 DataHub同步的是增量数据，您的数据库中必须插入、删除或更新一条或多条数据后，才会同步到DataHub中。本案例采用手动插入数据的方法，但在实际情况中，都是将用户的购买行为，通过程序的方式动态同步到数据库中的。进行数据抽样时，...
RestAPI（HTTP形式）数据源
multiData：从返回的JSON中取一个JSON数组，传递多条数据给writer。是 无 responseType 返回结果的数据格式，目前仅支持JSON格式。是 JSON column 读取字段列表，type指定源数据的类型，name指定当前column数据获取的JSON路径。您可以指定...
导入
导入状态：导入并保存：仅导入并保存数据，不生成新的版本 导入并提交：导入数据，并将最新导入的数据提交一个新的版本 批量导入仅支持导入.xlsx 格式文件，每次最多可导入30000条数据，并且文件大小不超过10MB。查看导入结果。在 完成 页...
Excel导入
事件 分片大小 Excel导入组件在数据提交时采用分片上传方式提高上传速度，默认分片大小为1000条数据/请求。无特殊情况采用默认值即可，可根据部署环境网络状况与服务器性能进行适当调整。分片上传结束 每一次分片数据上传完成后触发事件。...
填充数据库
1.禁用自动提交 在使用多个 INSERT 时，关闭自动提交并且只在最后做一次提交（在普通 SQL 中，这意味着在开始发出 BEGIN 并且在结束时发出 COMMIT。某些客户端库可能背着你就做了这些，在这种情况下你需要确定在你需要做这些时该库确实帮你...
查询机制
INSERT 当您使用INSERT插入一条数据时，具体过程如下：从数据文件中读取一个数据块到内存中，并将这行数据写入这个数据块，系统生成一条INSERT的WAL日志。当执行COMMIT命令后，系统会产生一条COMMIT的WAL日志。INSERT WAL日志和COMMIT WAL...
搜索（审计）
重要 单次最多可导出1000万条数据。对于采用冷热混合存储的SQL洞察和审计，查询或导出冷存储的数据时，系统会创建对应的查询或导出任务，您可以在 任务列表 页面，查看任务进度及历史任务。对于企业版 V0 和V1，DAS将保存最近2天内的导出...
生成测试数据
默认值：1000 条数据，最多生成不超过 100W 行数据，所以用户可以在文本框中输入 1\~1000000 间的任意正整数。批处理大小 指定每生成多少条数据进行一次提交（COMMIT 命令）操作。默认每生成 200 条数据进行一次提交，最大不超过 500 条，...
任务管理
事务 仅当配置单个数据库时生效，支持的选项：开启：任务中的多条SQL语句将以事务的方式执行。关闭（默认）并发执行组内任务 仅当配置多个数据库时生效，支持的选项：开启：SQL语句会同步执行到所有数据库中。关闭（默认）：SQL语句会执行...
资源角色
数据库Owner 每个数据库最多可以有三个数据库Owner，在数据库首次同步字典时初始化实例DBA为数据库Owner。DBA角色、管理员角色用户或原数据库Owner可对数据库Owner角色进行编辑调整（转交、释放、新增）。可通过流程主动申请。可对数据库的...
数据迁移链路规格说明
说明 如果一条SQL语句中包含对多行数据的操作，则计为多条数据记录变化；对同一条记录反复增删改则计为多条数据记录变化。每次COMMIT操作也会被计为一次数据记录变化的次数。数据迁移规格说明 数据迁移根据迁移链路的迁移性能上限，定义了...
SQL洞察
重要 对于采用冷热混合存储的SQL洞察和审计，超过7天的SQL洞察和审计数据采用冷存储，分析7天前的SQL明细数据时，系统会创建对应的任务重新进行计算和分析，您可以在 任务列表 页面，查看任务进度及历史任务。查询分析超过7天的SQL洞察和...
平滑扩容
整个扩容过程对上层的业务正常服务几乎没有影响（如果RDS/PolarDB MySQL实例规格过小或者压力过大则可能造成部分影响），切换时如果应用不停服，建议操作选择在数据库访问低谷期进行，降低同一条数据并发更新覆盖的概率。
查看数据同步项目的详情
平均执行时间、平均提交时间 重要 仅同步 OceanBase 数据库 MySQL 租户的数据至 AnalyticDB MySQL，以及同步 OceanBase 数据库的数据至 OceanBase 数据库时进行统计。平均执行时间：每条 SQL 执行时间的均值，单位为 ms。平均提交时间：...
区域图（v4.0以下版本）
由于在配置面板的 数据配置 中设置了 最大容量 为 6，因此可视化应用上仅显示前6条数据。x：折线图中每个圆点的类目，即x轴的值。该字段类型与格式须与配置项中x轴的标签数据种类与格式保持一致。y：折线图中每个圆点的值，即y轴的值。s：...
流式气泡层（v1.x版本）
流式气泡层是基础平面地图的子组件，支持独立的样式和数据配置，包括气泡的大小、位置、颜色、动画效果以及经纬度等，能够以流式气泡的形式表现地理位置上的点数据信息。本文介绍流式气泡层各配置项的含义。注意 当前为v1.x版本的流式气泡...
TSDB数据源
DataWorks数据集成支持使用TSDB Writer将数据点写入到阿里巴巴云原生多模数据库Lindorm TSDB数据库中，本文为您介绍DataWorks的TSDB数据写入能力。支持的版本 TSDB Writer目前仅支持Lindorm TSDB全部版本以及HiTSDB 2.4.x及以上版本，其他...
创建EMR Impala节点
使用EMR Impala节点查询数据时，返回的查询结果最大支持10000条数据，并且数据总量不能超过10M。如果您的工作空间绑定多个EMR引擎，则需要根据业务需求选择合适的引擎。如果仅绑定一个EMR引擎，则无需选择。如果您需要修改代码中的参数赋值...
如何支持超大事务
即每个事务写入2048条数据时，数据写入总量从512 MB到16 GB不等。实际的写入量比这个值稍大，因为bigint类型的ID也占用一定的空间。重要 受计算节点（CN）的参数 MAX_ALLOWED_PACKET 的影响，每个查询的请求包大小不应超过 MAX_ALLOWED_...
创建EMR Spark SQL节点
使用EMR Spark SQL节点查询数据时，返回的查询结果最大支持10000条数据，并且数据总量不能超过10M。如果您的工作空间绑定多个EMR引擎，则需要根据业务需求选择合适的引擎。如果仅绑定一个EMR引擎，则无需选择。如果您需要修改代码中的参数...
离线同步数据质量排查
如果写出数据和目标存储已有数据发生数据约束（主键冲突、唯一键约束、外键约束等），数据库则使用来源数据替换目标表已有数据，在目标表存在多个数据约束的情况下，数据替换可能会替换掉多条目标记录 如果写出数据和目标存储已有数据没有...
查看并管理待提交实例
待提交实例是对周期任务发起定时补数据操作时产生的实例，待提交实例将在未来时间段生成可运行实例并提交执行补数据。您可以在待提交实例页面，对待提交实例执行暂停、恢复、重试等操作。本文为您介绍如何查看并管理待提交实例。待提交 ...
- 产品推荐
- 这些文档可能帮助您