管理问题数据
系统生成的问题数据表会保留字段值为空的问题数据，即所有空值均为问题数据。空值个数/总行数，固定值。空值的个数与行总数的比率与一个固定值进行比较。说明 该固定值是一个小数。重复值 重复值个数/总行数，固定值。重复值个数与总行数的...
管理数据集
else$and order_date is not null/*若条件1和条件2都不满足，则返回表中order_date字段不为空的数据。endif$if、elseif判断逻辑，若满足层级1则直接返回数据；若不满足层级1，则判断是否满足层级2，若满足，则返回数据；若都不满足，则不...
时序引擎版本说明
时序预测，修复输入非单位频率（如freq=30s）的数据时，推理结果为空的问题。时序异常检测，修复训练时可能由于并发保存模型文件导致训练失败的问题。时序异常检测，修复istl-esd算法自动检测频率会报错的问题。时序异常检测，修复istl-esd...
一键实时同步至Kafka
一键实时同步至Kafka方案支持全增量一体化同步，先进行全量数据迁移，然后再实时同步增量数据至目标端。本文为您介绍如何创建一键实时同步至Kafka任务。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，配置好您需要同步的源...
403错误
You are denied by bucket referer policy 问题原因：防盗链校验 解决方案：通过设置Referer白名单以及是否允许空Referer，限制仅白名单中的域名可以访问Bucket内的资源。详情请参见 设置防盗链。Invalid according to Policy:Policy ...
配置DataHub输出组件
说明 一次提交数据量、batchSize、maxCommitInterval三个参数，只需满足一个参数则进行投递。另外DataHub对于一次Request请求写入的数据条数限制是10000条，超出10000条会导致任务出错，建议将batchSize设置为小于或等于10000条，避免任务...
配置DataHub输出组件
说明 一次提交数据量、batchSize、maxCommitInterval三个参数，只需满足一个参数则进行投递。另外DataHub对于一次Request请求写入的数据条数限制是10000条，超出10000条会导致任务出错，建议将batchSize设置为小于或等于10000条，避免任务...
2020年
更新说明 SEMI JOIN支持MAPJOIN Hint，提高LEFT SEMI或ANTI JOIN的性能，为数据倾斜问题提供解决方案。SEMI JOIN（半连接）2020-10-30 MaxCompute支持SORT BY不带 DISTRIBUTE BY。更新说明 MaxCompute支持不带DISTRIBUTE BY的SORT BY，提供...
常见错误码及解决方案
本文主要介绍您在配置旧版在线迁移的数据地址或迁移任务时可能会遇到的错误码及解决方案。错误码 错误信息 处理方案 AzureSourceConnStrAccountInvalid Azure连接字符串或者存储账户无效。Azure的连接字符串填写错误或者存储账户存在问题，...
0002-00000707
问题示例 您发起了默认V1版本签名的POST请求，且在表单域中包含签名认证相关的表单域，但是请求中 OSSAccessKeyId 表单域值为空。解决方案 根据所用的签名版本，在相应的表单域 OSSAccessKeyId，x-oss-access-key-id 或者 AWSAccessKeyId ...
导入与导出
数据同步过程中，可以修改源表中的字段类型，目前仅支持整型数据类型之间、浮点数据类型之间的列类型更改，并且只能将取值范围小的数据类型更改为取值范围大的数据类型，或者将单精度数据类型更改为双精度数据类型。整型数据类型：支持...
MaxCompute UDF（Python）常见问题
本文为您介绍使用Python语言编写的MaxCompute UDF的常见问题。类或资源问题 调用MaxCompute UDF运行代码时的常见类或资源问题如下：问题现象一：运行报错描述为 function 'xxx' cannot be resolved。产生原因：原因一：调用MaxCompute UDF...
概览
为了更好地指导您使用数据管理DMS（Data Management），DMS推出解决方案系列文档，旨在通过最佳实践（Step by Step）的形式向您介绍DMS研发流程、数据安全、数据开发的解决方案。研发流程解决方案 DMS为在线流程化系统，可统一管理企业内...
版本发布说明
修复窗口函数中order by和partition by字段为空时，在某些执行模式下执行可能报错的问题。修复查询information schema下的tables视图可能报错的问题。修复修改拆分区列类型时，如果存在大写列名执行会失败问题。修复XRPC下使用流式早停，小...
在线查询设置教程
一、功能效果 对于企业会有一些和自身业务相关的数据，需要给到客户提供查询服务，在线查询功能...Q：在表单查询功能中，若某表单项为非必填，且提交记录为空，可以查到吗？A：可以，若不填写，并把查询模式设置为精准查询，则可以查到空值。
常见问题
读取Loghub同步某字段有数据但是同步过来为空 读取Loghub同步少数据。读取Loghub字段映射时读到的字段不符合预期。读取kafka配置了endDateTime来指定所要同步的数据的截止范围，但是在目的数据源中发现了超过这个时间的数据。Kafka中数据量...
MaxCompute UDF（Java）常见问题
解决措施：请根据业务情况填写并提交 网络连接申请表单，MaxCompute技术支持团队会及时联系您完成网络开通操作。表单填写指导，请参见 网络开通流程。性能问题 调用MaxCompute UDF运行代码时的常见性能问题如下：问题现象一：运行报错描述...
文档更新动态（2024年）
更新说明 创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 新建Doris数据源 创建GreenPlum数据源 数据引入-离线集成-离线单条管道-...
运行失败
小类目检索准备阶段GetSmallCategoryDocNum为空 报错信息 解决方法 该问题的主要原因是表当中某些字段的值为空，比如 category 列的值为空或者 pk 列的值为空，建议通过SQL将这些空值对应的record删除。小类目检索阶段schema validation不...
版本说明
问题修复 修复查询中因空指针异常造成的查询结果为空的问题。V2.6.4 2020年12月3日 新特性 支持空间数据类型的写入与查询（该特性未正式公开，若要试用可提工单咨询）。问题修复 修复创建 tsdb 用户导致鉴权功能异常的问题。修复多节点并行...
配置同步任务
针对同步到Dataphin的数据为空时的处理策略，支持选择 任务视为成功 或 任务视为失败。当数据同步来源端为 HDFS 时，配置参数如下。参数 描述 数据源 支持根据数据类型筛选数据源。Dataphin支持的同步来源数据源类型包括HDFS。路径 填写...
常见问题
扫描MaxCompute、OSS、阿里云数据库服务（RDS、PolarDB-X、PolarDB、OceanBase、表格存储等）和自建数据库中的数据，通过敏感数据规则，判断和打标敏感数据，为数据安全审计、数据脱敏、智能异常检测等数据安全解决方案提供基础。...
资产全景及目录概述
支持表级及字段级血缘展示，通过数据血缘关系，获取数据生产的全链路信息，为您解决找数难、理解数据难的问题。支持在个人数据中心快捷查看自己所负责的资产。名词解释 元数据：是描述数据的数据（Data About Data），主要是描述数据属性的...
资产全景及目录概述
支持表级及字段级血缘展示，通过数据血缘关系，获取数据生产的全链路信息，为您解决找数难、理解数据难的问题。支持在个人数据中心快捷查看自己所负责的资产。名词解释 元数据：是描述数据的数据（Data About Data），主要是描述数据属性的...
Presto FAQ
本文汇总了使用DLA Presto的常见问题及解决方案。高频问题 在哪些情况下，共享集群（Public）不计费？共享集群（Public）的算力是多大？在控制台执行SELECT语句为什么会有Limit 500的限制？...解决方案：您需要手动过滤掉属性列为空的记录。
使用须知
问题与解决方法 使用云数据库HBase的SQL功能（Phoenix）的过程中可能会遇到以下问题，为您提供解决以下问题的方法。meta可能存在不同步。问题描述：在同一时间多个连接访问Phoenix的场景下，一个连接进行DDL操作后（例如创建表，删除表，...
无锁结构变更
背景信息 为解决变更数据库表结构时的锁表问题，ODC V4.2.0 版本提供了无锁结构变更功能，该功能可以较好地规避因锁表以致于阻塞业务。本文档旨在介绍如何通过提交无锁变更工单实现数据库无锁结构变更。ODC 支持的在线结构变更 分类 操作 ...
PolarDB MySQL版8.0.1版本发布日志
修复将冷数据归档为IBD格式的文件时，由于频繁执行DDL和HA操作，导致新连接仍然会访问已被废弃的旧文件的问题。8.0.1.1.39 类别 说明 发布时间 新增功能和性能优化 支持任意节点访问列存的INFORMATION_SCHEMA视图信息，默认聚合展示所有列...
错误码
DPN.TaskScheduler.Node.NodeOutputNameEmpty 问题原因：节点输出名称为空。解决方案：请指定节点输出名称。对于SQL任务，建议输出名的格式为[项目名].[表名]。注意 节点输出名称在系统内是唯一的。DPN.TaskScheduler.Node....
如何基于LSM-tree架构实现一写多读
MVCC（多版本并发控制）物理复制技术解决了数据同步的问题，为存储计算分离打下了基础。为了实现弹性、动态升降配和增删只读节点的能力，需要只读节点具备一致性读的能力，另外RW节点和RO节点共享一份数据，历史版本回收也是必需要考虑的...
输入框
图表样式 输入框是控件组件的一种，支持自定义输入框的背景颜色、文本样式、边框样式以及多种状态下输入框按键的样式等，可以作为输入表单在可视化应用中使用，将用户的输入提交到后端进行处理。配置面板 搜索配置：单击 配置 面板右上角的...
Tunnel常见错误码
本文为您介绍使用Tunnel过程中的常见错误码，帮助您了解错误码产生原因，并提供解决措施。Tunnel常见错误码如下：报错信息：ErrorCode=NoSuchPartition,ErrorMessage=The specified partition does not exist.报错信息：ErrorCode=...
离线同步并发和限流之间的关系
用户配置并发数为5，任务限速为3MB/s，则任务会尝试切分为5个分片并发执行，每个分片执行速率为3/5 向上取整为1MB/s。如果任务实际执行并发为5，则作业的最终速度上限为 5MB/s，超出任务速度上限。如果任务实际执行并发为1，则作业的最终...
PolarDB PostgreSQL版间的迁移
通过数据传输服务DTS（Data Transmission Service），可以实现 PolarDB PostgreSQL版 集群间的迁移。前提条件 已创建源和目标 PolarDB PostgreSQL版 数据库集群，详情请参见 创建PolarDB PostgreSQL版数据库集群。已将源和目标 PolarDB ...
离线同步常见问题
文档概述 问题分类 相关文档 离线同步任务运维常见问题 为什么数据源测试连通性成功，但是离线同步任务执行失败？如何切换数据集成任务执行资源组？脏数据如何排查和定位？如何查看脏数据？如果离线同步传输数据时，脏数据超出限制，是否...
DB2数据源
DB2数据源作为数据中枢，为您提供读取和写入DB2数据库的双向通道，能够快速解决海量数据的计算问题。本文为您介绍DataWorks的DB2数据同步的能力支持情况。支持的版本 DB2 Reader和DB2 Writer使用的DB2驱动版本为 IBM Data Server Driver ...
在程序中通过AnalyticDB MySQL版Client高效写入数据到...
本文介绍了在程序中通过 AnalyticDB MySQL版 Client高效写入数据到2.0集群的方法。背景信息 AnalyticDB MySQL版 Client旨在为用户提供一个高效、简单地插入数据到AnalyticDB MySQL 2.0集群的方法。您只需要通过接口将数据提交给 AnalyticDB...
PostgreSQL数据源
关闭其它数据写入方，保证当前数据为静态数据，例如锁表、关闭备库同步等。缺点是可能影响在线业务。数据库编码问题 PostgreSQL在服务器端仅支持EUC_CN和UTF-8两种简体中文编码，PostgreSQL Reader底层使用JDBC进行数据抽取，JDBC天然适配...
DM（达梦）数据源
DM（达梦）数据源作为数据中枢，为您提供读取和写入DM数据库的双向通道，能够快速解决海量数据的计算问题。本文为您介绍DataWorks的DM数据同步的能力支持情况。使用限制 离线同步支持读取视图表。DM Reader和DM Writer仅支持使用 独享数据...
0002-00000704
问题描述 POST请求表单中签名表单域为空。问题原因 您发起了带有签名信息的POST请求，但是请求表单中签名表单域值为空。具体表现如下：对于默认的V1版签名和 Amazon S3 V2兼容版本签名，需要通过 Signature 表单域提供签名信息。对于V2和V4...
- 产品推荐
- 这些文档可能帮助您