Quick BI创建MaxCompute数据源链接成功，SQL创建数据...
问题描述 Quick BI创建MaxCompute数据源链接成功，SQL创建数据集报错：INTERNAL:java.lang.NullPointerException 问题原因 用户创建数据源配置的AccessKey ID没有CreateInstance权限导致。You have NO privilege 'odps:CreateInstance' on ...
调度设计文档
用途 数据输入表 数据产出表 调度周期 320170257 workshop_start 虚拟节点，用于管理下游节点 Null Null 日 320170260 MySQL数据同步 拉取MySQL数据源数据 ods_user_info_d ods_user_info_d 日 320170260 FTP数据同步 拉取FTP数据源数据 ...
ListDataSource-查询数据源列表
null OracleNlsLengthSemantics string nls_length_semantics 属性，仅针对 Oracle 和 OceanBase 数据库 Oracle 租户数据源。null OperatingSystem string 操作系统。OceanBase 数据源没有该参数。Linux Version string 版本。4.1.0 ...
ListProjects-分页查询项目列表
设置为 true，表示选择忽略：当目标端表对象存在数据时，如果原数据与写入数据冲突，数据传输采用将冲突数据记录日志，保留原数据不变的策略进行数据写入。注意 选择忽略，全量校验将使用 IN 模式拉取数据，无法校验目标端多数据的场景，...
DescribeProject-查询项目的详情
本接口用于查询数据迁移或数据同步项目的项目详情。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称...
Quick BI修改Presto数据源的数据库地址后，点击确认后...
错误信息：null”。问题原因 更换数据库地址后，需要同时检查其他配置项是否填写正确。用户更换数据库地址后，填写的实例ID未修改，导致报错。解决方案 修改填写正确对应数据库的实例ID即可。适用于 Quick BI 说明：本文档描述的功能已在...
通过函数计算节点实现GitHub实时数据分析与结果发送
开发人员在基于GitHub开源项目进行开发时会产生海量事件，GitHub会记录每次事件的类型、详情、开发...本实践使用的公共Github数据存储在公共的MySQL数据库中，您需要先创建一个MySQL数据源，用于后续同步数据至MaxCompute时对接MySQL数据库。...
LOAD
如果需要将指定数据源的部分列映射至Hologres外部表，需要配置该参数，指定Hologres源表的字段和Hologres外部表字段的映射关系。如果不配置该参数，按照源表字段顺序映射至Hologres外部表。如果Hologres里的字段名称是大写的话，需要为...
LOAD
如果需要将指定数据源的部分列映射至Hologres外部表，需要配置该参数，指定Hologres源表的字段和Hologres外部表字段的映射关系。如果不配置该参数，按照源表字段顺序映射至Hologres外部表。如果Hologres里的字段名称是大写的话，需要为...
源库连接性检查
源数据库对来源IP进行了限制 检测方法 使用命令行或客户端连接源数据库，如果连接正常，说明源数据库可能限制了DTS服务器IP地址。如果源数据库为自建MySQL，可以使用客户端连接源数据库后执行下述命令进行检查。SELECT HOST FROM mysql....
产品架构
如果需要在迁移期间保持源数据库的正常运行，当您在配置迁移任务时，必须将结构迁移、全量数据迁移和增量数据迁移都选为所需的迁移类型。结构迁移：在迁移数据之前，DTS需要在目标数据库中重新创建数据结构。对于异构数据库之间的迁移，DTS...
Quick BI连接hive数据源报错："Required field&39;...
问题描述 Quick BI连接hive数据源报错："Required field&39;client_protocol&39;is unset!Struct:TOpenSessionReq(client_protocol:null,configuration:{use:database=group3_dm}。问题原因 hive版本属于cdh hive，quick bi支持的是apache ...
数据集成支持的数据源
离线集成支持的数据源 数据源 读取 写入 大数据存储型数据源 MaxCompute 支持 支持 Hive 支持 支持 Hologres 支持 支持 IMPALA 支持 支持 TDH Inceptor 支持 支持 Kudu 支持 支持 StarRocks 支持 支持 Hudi 支持 支持 Doris 支持 支持 ...
数据源权限管理
一个数据源分享给目标用户后，源数据源可以控制分享关系，随时解除分享，且无需检查已分享数据源的任务依赖情况。一个数据源以 可编辑 模式分享给目标用户后，如果目标用户执行 取消分享 操作，会检查该分享数据源的任务依赖情况。如果有...
Dataphin支持的数据源
大数据存储型数据源 数据源类型 离线集成 实时集成 离线研发 实时研发 全域质量 隐私计算 数据服务 创建指导 MaxCompute 支持 支持 不支持 支持 支持 支持 不支持 创建MaxCompute数据源 Hive 支持 支持 不支持 支持 支持 不支持 不支持 ...
Dataphin支持的数据源
大数据存储型数据源 数据源类型 离线集成 实时集成 离线研发 实时研发 全域质量 隐私计算 数据服务 创建指导 MaxCompute 支持 支持 不支持 支持 支持 支持 不支持 创建MaxCompute数据源 Hologres 支持 不支持 不支持 支持 支持 支持 支持 ...
新建SQL查询
Dataphin分析平台提供专注...查询数据源数据需要选择对应数据源。若无可选数据源，可以单击+新建数据源 进行新建。单击 确定，完成SQL查询新建。后续步骤 完成SQL查询新建后，您可以对SQL查询进行编辑和管理。更多信息，请参见 SQL查询概述。
新建数据源
相关操作 在数据源添加成功后，在 数据源管理 页面，可对数据源进行以下操作：操作 说明 查看数据源详情 在数据源列表，单击目标数据源 操作 列的 更多，选择 查看详情，查看数据源的基本信息和数据对象的表结构信息。编辑数据源 在数据源...
新建数据源
相关操作 在数据源添加成功后，在 数据源管理 页面，可对数据源进行以下操作：操作 说明 查看数据源详情 在数据源列表，单击目标数据源 操作 列的 更多，选择 查看详情，查看数据源的基本信息和数据对象的表结构信息。编辑数据源 在数据源...
数据源和项目协同
查看数据源 数据源列表中，支持如下操作：操作项 说明 数据源名 显示数据源的名称、类型、实例 ID、租户 ID 和数据库用户名信息。单击数据源名称支持管理其中的数据库、会话和回收站。查找目标数据源。筛选数据源类型。排序数据源。刷新...
数据集成支持的数据源
离线集成支持的数据源 数据源 读取 写入 大数据存储型数据源 MaxCompute 支持 支持 Hologres 支持 支持 IMPALA 支持 支持 TDH Inceptor 支持 支持 StarRocks 支持 支持 Hudi 支持 支持 Doris 支持 支持 GreenPlum 支持 支持 TDengine 不...
配置Hologres输出组件
同步其他数据源的数据至Hologres数据源的场景中，完成源数据的信息配置后，需要配置Hologres输出组件的目标数据源。本文为您介绍如何配置Hologres输出组件。前提条件 已创建Hologres数据源并已申请Hologres数据源的同步写权限：如何创建...
配置Hologres输出组件
同步其他数据源的数据至Hologres数据源的场景中，完成源数据的信息配置后，需要配置Hologres输出组件的目标数据源。本文为您介绍如何配置Hologres输出组件。前提条件 已创建Hologres数据源并已申请Hologres数据源的同步写权限：如何创建...
管理数据源
查看数据源 创建数据源后，您可以在数据源列表查看所有已创建数据源的基本信息、详情和网络连接等信息，也可以根据数据源类型进行筛选、根据数据源的创建时间进行排序，以及模糊搜索指定数据源。登录 OceanBase 管理控制台。在左侧导航栏，...
创建OpenGauss数据源
数据源编码配置成功后不支持修改。数据源描述 对OpenGauss数据源的描述。不超过128字符。数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不...
配置Vertica输入组件
同步Vertica数据源的数据至其他数据源的场景中，您需要先配置Vertica输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置Vertica输入组件。在开始执行操作前，请确认您已完成以下操作：已创建Vertica数据源。...
配置Vertica输入组件
同步Vertica数据源的数据至其他数据源的场景中，您需要先配置Vertica输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置Vertica输入组件。在开始执行操作前，请确认您已完成以下操作：已创建Vertica数据源。...
创建OpenGauss数据源
数据源编码配置成功后不支持修改。数据源描述 对OpenGauss数据源的描述。不超过128字符。数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不...
配置OceanBase输入组件
同步OceanBase数据源的数据至其他数据源的场景中，您需要先配置OceanBase输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置OceanBase输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建...
配置OceanBase输入组件
同步OceanBase数据源的数据至其他数据源的场景中，您需要先配置OceanBase输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置OceanBase输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建...
配置Teradata输入组件
同步Teradata数据源的数据至其他数据源的场景中，您需要先配置Teradata输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置Teradata输入组件。使用限制 不支持读取Teradata数据库的视图。前提条件 在开始执行...
创建Redis数据源
数据源编码配置成功后不支持修改。数据源描述 对数据源的简单描述。不超过128字符。数据源配置 选择需要配置的数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，...
新建自定义数据源
完成自定义数据源类型后，您可将该类型的数据源接入到Dataphin中，为后续进行集成开发做准备。前提条件 已有自定义数据源类型。具体操作，请参见：新建离线自定义源类型。新建实时自定义源类型。操作步骤 请参见 数据源管理入口，进入 数据...
配置IBM DB2输入组件
同步IBM DB2数据源的数据至其他数据源的场景中，您需要先配置IBM DB2输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置IBM DB2输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建IBM DB2...
配置IBM DB2输入组件
同步IBM DB2数据源的数据至其他数据源的场景中，您需要先配置IBM DB2输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置IBM DB2输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建IBM DB2...
数据清理
背景信息 ODC 支持在源数据库中的数据归档到目标数据库后，删除源数据库中的数据，以提高数据库查询性能，降低在线存储成本。本文档旨在介绍如何通过提交数据清理工单实现归档数据。原理介绍 前提条件 清理的表中必须包含主键。注意事项 ...
创建Salesforce数据源
数据源描述 对数据源的简单描述。不超过128字符。数据源配置 选择需要配置的数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可以...
创建Salesforce数据源
数据源描述 对数据源的简单描述。不超过128字符。数据源配置 选择需要配置的数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可以...
新建TDengine数据源
说明 通常情况下，生产数据源和开发数据源需配置非同一个数据源，以使开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。配置 集群配置 区域的参数。参数 描述 ...
基本概念
结构迁移 在结构迁移阶段，DTS将待迁移对象的结构定义从源数据库迁移到目标数据库，例如表、视图、触发器和存储过程。对于异构数据库之间的结构迁移，DTS会将源库的结构定义转换为目标库支持的结构定义，例如将Oracle数据库中的NUMBER数据...
- 产品推荐
- 这些文档可能帮助您