Dataphin事实逻辑表修改字段类型由string改为bigint，...
问题描述 Dataphin事实逻辑表修改字段类型由string改为bigint，提交失败报错："DPN.Onedata.FactTablePublishFail。{"traceId":"87e68f3d1f6949c7","code":"0","message":"","data":[{"id":167045,"modelId":5571812,"modelType":2,...
Dataphin使用MaxCompute计算源修改表字段数据类型报错...
问题描述 用户是MaxCompute计算源，需要调整物理表字段类型，执行SQL报错，代码即报错如下：alter table< table_name >change[column]< old_column_name ><new_column_name>< new_data_type>;问题原因 目前MaxCompute列操作都是公测试用状态，...
Dataphin上使用String 类型显示乱码
概述 本文主要描述了Dataphin离线管道抽取HANA的数据，源系统字段是varbinary,Dataphin上使用String类型显示乱码的解决方法。详细信息 用户要使用这个字段，那这个字段就需要加工，二进制数据转换成字符串一定是乱码，所以是需要转换成其他...
ListDataSourceTypes-枚举数据源类型
枚举目前威胁分析支持的多云接入数据源类型。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略...
Dataphin离线管道任务运行报错：类型转换错误
问题描述 Dataphin离线管道任务运行报错：类型转换错误 {"message":"类型转换错误,无法将[1\u000130\u00010.0\u000123400\u00012022-01-12 15:10:49.701]转换为[LONG]","record":[],"type":"reader"} 问题原因 管道任务的数据输入端Hive...
新建Flink DataStream类型的公共节点
Flink DataStream节点是流式节点，运行于Flink云计算资源之上，支持对RDS MySQL、Table Store、Hive、Kafka、Hbase、Phoenix、AnalyticDB MySQL、AnalyticDB_PostgreSQL和DataHub等类型的数据进行处理。本文介绍如何新建Flink DataStream...
新建Flink DataStream类型的公共节点
Flink DataStream节点是流式节点，运行于Flink云计算资源之上，支持对RDS MySQL、Table Store、Hive、Kafka、Hbase、Phoenix、AnalyticDB MySQL、AnalyticDB_PostgreSQL和DataHub等类型的数据进行处理。本文介绍如何新建Flink DataStream...
新建Blink DataStream类型的公共节点
Blink DataStream节点是流式节点，运行于Blink云计算资源之上，支持对DataHub Service、AnalyticDB、Table Store、MaxCompute、和ApsaraDB for RDS类型的数据源进行处理。本文介绍如何新建 Blink DataStream类型的公共节点。操作步骤 方式...
新建Blink DataStream类型的公共节点
Blink DataStream节点是流式节点，运行于Blink云计算资源之上，支持对DataHub Service、AnalyticDB、Table Store、MaxCompute、和ApsaraDB for RDS类型的数据源进行处理。本文介绍如何新建 Blink DataStream类型的公共节点。操作步骤 方式...
ListDataImportSQLType-获取数据导入SQL类型
获取数据导入SQL类型。接口说明 仅支持导入模式为安全模式的数据导入工单使用此 API，不支持极速模式的数据导入使用此 API。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动...
Dataphin新建快照事实...类型转TIMESTAMP类型校验不通过
问题描述 Dataphin新建快照事实逻辑表快照时间字段Datetime类型转TIMESTAMP类型校验不通过。问题原因 创建快照事实逻辑表会自动创建快照时间的字段且为TIMESTAMP类型，映射来源表字段时需要来源字段也为TIMESTAMP格式，否则需要转为时间戳...
Dataphin管道任务将FTP数据源STRING类型数据同步到...
问题描述 管道任务将FTP数据源STRING类型数据同步到Hive数据源中DATE类型字段，当FTP中改STRING类型数据为空时，管道任务会提示脏数据。但是FTP中该字段为空数据正常业务场景。2021-11-08 18:42:43.305[0-0-0-reader]INFO ...
选择不到项目用到的数据源类型怎么处理
问题描述 Dataphin创建API创建服务单元时，选择不到项目用到的数据源类型怎么处理。问题原因 数据服务模块目前支持选择以下类型数据源：MySQL、Microsoft SQL Server、PostgreSQL、Oracle、AnalyticDB for MySQL 2.0、AnalyticDB for MySQL...
Dataphin管道任务从MAXC到ADB报错“...字段类型为[CHAR...
问题描述 Dataphin管道任务从MAXC->ADB报错如下：DataX抽取 ODPS 数据不支持字段类型为:[CHAR].目前支持抽取的字段类型有：bigint,boolean,datetime,double,decimal,string。问题原因 管道任务目前不支持同步CHAR类型的数据。解决方案 源表...
Hive，过滤组件中对Date类型数据处理出现脏数据
问题描述 Dataphin集成任务从Oracle 抽数据到 Hive，过滤组件中对Date类型数据处理出现脏数据。{"category":"filter","distribute":true,"name":"WHERE","parameter":{"condition":"(ODS_LOAD_DT='2021-12-31')","conditionObject":"[{\...
Dataphin集成任务同步失败报错：...数据类型转换错误
问题描述 Dataphin集成任务同步失败报错："同步数据出现业务脏数据情况，数据类型转换错误。2021-10-12 11:44:46.696[0-0-0-writer]ERROR DlinkTaskPluginCollector-脏数据:{"exception":"Code:[Common-01],Describe:[同步数据出现业务脏...
Dataphin即席查询中timestamp类型数据没有转换为对应...
产品名称 Dataphin 产品模块 即席查询 概述 描述即席查询中timestamp类型数据如何转换为对应的yyyy-MM-dd格式。问题描述 即席查询中timestamp类型数据如何转换为对应的yyyy-MM-dd 的格式？问题原因 NA 解决方案 使用from_unixtime()函数，...
获取公共数据集实体类型列表
获取平台公共数据集包含的实体类型列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填...
Dataphin数据服务模块发布的List类型的API，测试调用...
概述 排查定位SDK代码调用List类型的API服务结果返回为空问题的原因。问题描述 如下SDK代码调用Dataphin中发布的API服务，加上参数条件数据返回为空，不加条件数据返回正常。API服务参数定义情况：SDK代码不设置参数条件的代码截图：代码不...
Dataphin修改了维度逻辑表的字段类型，为什么维度逻辑...
概述 本文主要介绍修改了维度逻辑表的字段类型，维度逻辑表的物化表变化的原因。详细信息 Dataphin修改了维度逻辑表的字段类型，为什么维度逻辑表的物化表变化了？解释如下：维度逻辑表的物化拆分，涉及产出时间、行为属性（字段来源）、主...
请确认表名、字段类型、精度等符合您需求后再点击
问题描述 Dataphin集成任务一键生成目标表报错："请确认表名、字段...问题原因 odps的double不支持设置精度，创建语句中类型double的表字段带了精度导致的。解决方案 将double后面的精度去掉就可以了。适用于 Dataphin 独立部署 v3.2.4版本
发现NVCHAR2类型的字段映射至STRING类型字段
问题描述 Dataphin中Oracle数据源数据通过管道同步至HIVE库，发现NVCHAR2类型的字段映射至STRING类型字段，同步之后数据查询为乱码。Oracle和HIVE库组件编码都是UTF-8，且源表字段类型是VARCHAR2不会乱码，NVCHAR2的就都会乱码。Oracle数据...
7.数据加载
是否是 容器组件 加载的 数据个数 预期 上下文 推荐的 数据容器类型 说明 否 一个 一个 Data 当前只有 Data 类型是加载一个实体对象。否 一组 一组 List-Data 这种类型的组件相当于把一组实体对象当成一个变量来使用，所以使用 List-Data ...
Dataphin中通过元数据库查看任务节点ID、作业类型、...
概述 本文介绍现场运维同学如何通过元数据库查询Dataphin环境中任务的节点ID、作业类型、任务节点名、任务状态、调度周期、调度时间等详细信息；查询任务上下游节点任务的ID、名称等信息。详细信息 具体查询任务节点ID、作业类型、任务节点...
Dataphin管道任务中输入、输出组件字段类型是decimal...
概述 本文介绍Dataphin管道任务中输入、输出组件字段类型是decimal，映射列表展示为double的原因。详细信息 如下MySQL数据源中字段类型是decimal，但是数据集成输入、输出组件中，映射列表展示的类型变成了double类型。这个原因是：管道...
DescribeDomainDetailDataByLayer-按协议类型获取详细...
调用DescribeDomainDetailDataByLayer按协议类型获取加速域名的数据明细（域名维度）。接口说明 单用户调用频率：20 次/秒。支持查询的时间粒度 根据单次查询的最大时间跨度不同，请求参数 Interval 支持不同的查询数据时间粒度，对应的可...
开发不同功能的组件
DataType是为了区分数据类型的，分为三种类型：Data、List、List-Data，需要根据实际情况在defaultValue配置。说明 这三种类型的含义如下：Data：加载的数据源是实体对象，一般只有单个child，比如魔笔默认提供的Data数据容器。List：加载...
小区管理
上传bizCode=COMMUNITY_FILE certificateUploadId2 String 否 证书地址2 certificateUploadId3 String 否 证书地址3 返回结果 参数名 参数描述 数据类型 data JSON 小区信息 小区信息 参数名 参数描述 数据类型 communityId Long 小区ID 1....
会议
} 观众同步文档操作内容 语法 表达式.SetDocView({ Type,Data })表达式：文档类型应用对象 参数 同步内容参数通过监听文档操作变化获取 属性 数据类型 说明 Type String 文档操作变化类型 Data Object 文档操作变化信息 示例 async ...
创建Data Science集群
集群类型 Data Science：主要面向大数据+AI场景，提供Hive和Spark离线大数据ETL和TensorFlow模型训练，您可以选择CPU+GPU的异构计算框架，通过英伟达GPU对部分深度学习算法进行高性能计算。产品版本 默认最新的软件版本。组件版本 展示集群...
AI写真：Go SDK使用说明
AIGCImageCheckData data字段说明：AIGCImageCheckData对象 参数名称 参数说明 类型 CheckResults 代表输入每张图片的检测结果。每个图片对应一个字典，每个字典一共有三个key，分别是url、message与frontal，分别代表图片的URL、图片检测...
查询资源标签
382DX8F5*集群ID Data.N.TagKey String TestTagKey1 集群标签键 Data.N.ResourceType String CLUSTER 资源类型 Data.N.TagValue String TestTagValue1 集群标签值 示例 请求示例：https://[EndPoint]/?Action=ListTagResources&ResourceIds...
在GPU计算型实例中安装Tesla驱动（Windows）
全部 各GPU计算型规格的GPU信息，以及支持的Tesla驱动和CUDA包版本如下所示：信息项 gn5 gn5i gn6v gn6i gn6e gn7 gn7i gn7e 产品类型 Data Center/Tesla Data Center/Tesla Data Center/Tesla Data Center/Tesla Data Center/Tesla Data ...
数据处理状态查询API
一级参数 说明 类型 是否必传 serviceId 服务Id Long 是 dataIds 数据主键Id List是 dataImportId 任务id Long 否 响应参数 一级参数 说明 类型 datas 响应结果 List<data>status 任务状态 String 一级参数 二级参数 说明 类型 data dataId...
UpdateInstanceNetworkType-切换实例的网络类型
true 返回参数 名称 类型 描述 示例值 object Schema of Response RequestId string Id of the request 9CC37B9F-F4B4-5FF1-939B-AEE78DC70130 Data string 返回结果。枚举值：true：成功。false：失败。true Success boolean 请求结果。...
修改网关路由表的下一跳类型和下一跳
修改网关路由表的下一跳类型和下一跳。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 ...
附加弹性网卡到专有网络VPC类型实例上
调用AttachNetworkInterface附加一个弹性网卡（ENI）到一台专有网络VPC类型ECS实例上。接口说明 调用该接口时，请注意：弹性网卡必须处于 可用（Available）状态，一个弹性网卡只能同时附加到一台相同可用区且相同专有网络的实例上。实例需...
AttachClassicLinkVpc-将经典网络类型实例连接到专有...
调用AttachClassicLinkVpc将一台经典网络类型实例连接到专有网络VPC中，使经典网络类型实例可以和VPC中的云资源私网互通。接口说明 调用该接口时，您需要注意：连接经典网络类型实例前，实例必须处于 运行中（Running）或者 已停止...
数据类型
本文介绍Data Lake Analytics兼容Hive的数据类型。建表语法 CREATE EXTERNAL TABLE[IF NOT EXISTS][db_name.]table_name[(col_name data_type[COMMENT col_comment],.[constraint_specification])][COMMENT table_comment][PARTITIONED BY...
其它
1 PageNo Integer 否 页数，默认：1 PageSize Integer 否 每页显示数目，默认：10 其他请求参数，请参见 公共请求参数 返回参数 名称 类型 描述 PageNumber Integer 页数 PageSize Integer 每页数目 TotalCount Integer 总数 data Array ...
- 产品推荐
- 这些文档可能帮助您