数据源概述
在配置数据集成同步任务之前，您需要首先定义好同步任务的源端和目的端数据源信息，以便在配置同步任务时，能够通过选择数据源名称来确定数据的读取和写入数据库。本文将介绍配置数据源时您需要了解的相关信息。数据源功能概述 配置数据源...
报错“源库账号缺乏sysadmin权限”
增量迁移需要源库具备sysadmin权限，否则无法获取源库日志。参见：迁移任务的注意事项及限制。解决方案 为源库账号配置sysadmin权限：若源库为自建SQLServer，请自行赋予账号sysadmin权限。若源库为RDS SQL Server，请按照以下方式，设置...
批量添加数据源
您可以通过 数据库备份DBS 的批量添加数据源功能，快速导入大批量同类型的数据源，便于后续对数据源进行管理与备份。功能说明 批量导入功能仅支持MySQL公网自建数据库。费用说明 添加数据源操作不会产生费用，只有在添加数据源后开启备份才...
场景：跨账号创建数据源
注意事项 跨账号创建的数据源不能用于数据开发和调度。...详情请参见 创建MaxCompute数据源、创建Hologres数据源。...本文仅适用于MaxCompute、...进入运维中心、数据地图，查看数据源的更多详细信息。详情请参见 运维中心概述、数据地图概述。
新建自定义数据源
下文以自定义的mysql5数据源类型为例，mysql5数据源类型为RDBMS数据库类型，需要配置的数据源信息为链接地址、用户名和密码。在新建mysql5数据源对话框中，配置连接信息。参数 描述 数据源名称 填写数据源名称。数据源名称由汉字、数字、...
新建自定义数据源
下文以自定义的mysql5数据源类型为例，mysql5数据源类型为RDBMS数据库类型，需要配置的数据源信息为链接地址、用户名和密码。在新建mysql5数据源对话框中，配置连接信息。参数 描述 数据源名称 填写数据源名称。数据源名称由汉字、数字、...
对接LDAP身份源
SASE 以身份驱动下发安全策略，如果企业已使用LDAP身份源管理组织架构，可以通过 SASE 对接企业的LDAP身份源，无需您再次为企业员工创建身份信息。对接企业LDAP身份源后，企业员工可使用与企业身份一致的账号体系登录 SASE App办公。本文...
访问CDN加速域名返回5XX错误的常见问题
源站的相关安全防护规则导致的CDN回源异常，通常都是TCP超时，会在10秒或以内就5xx，且大部分情况会返回 503 Service Temporarily Unavailable 的错误，具体的排查方法和解决方案可以参见 源站存在安全防护等原因导致访问CDN域名报503错误...
Quick BI的仪表板取数报错：“不支持的数据源”
概述 Quick BI的仪表板取数报错：“不支持的数据源”，异常如下：详细信息 Quick BI中两个相同类型的MaxCompute数据源不同的数据库关联之后生成的数据集（相当于两个不同的MaxCompute数据源数据库），创建仪表板的取数报错：不支持的数据源...
步骤二：实时项目规划
本文将指导您完成本教程的Ververica Flink计算源、数据源、实时项目的创建与绑定。步骤一：创建 Ververica Flink 计算源 在Dataphin首页，单击顶部菜单栏的 规划。按照下图操作指引，进入 Ververica Flink新建计算源 页面。在 新建计算源 ...
步骤二：实时项目规划
本文将指导您完成本教程的Ververica Flink计算源、数据源、实时项目的创建与绑定。步骤一：创建 Ververica Flink 计算源 在Dataphin首页，单击顶部菜单栏的 规划。按照下图操作指引，进入 Ververica Flink新建计算源 页面。在 新建计算源 ...
Quick BI数据集如何切换数据源
产品名称 Quick BI 产品模块 数据集 概述 本文通过介绍切换数据源的入口，在不影响仪表板的前提下，帮您实现修改数据集取数的数据库的需求。问题描述 有个数据集已经创建了很多仪表板，现在需要从另一个数据库里取该数据，如何在不影响仪表...
开发Dataphin数据源并加速数据查询
开发Dataphin数据源即将Dataphin中的逻辑表和物理表配置为供应用调用的Dataphin数据源，同时您可以为已开发的Dataphin数据源所在的计算空间添加Hologres加速计算源，以满足对查询速度有要求的业务场景。本文为您介绍如何开发Dataphin数据源...
步骤二：规划数仓
在 新建MySQL数据源 对话框，配置数据源信息。参数 描述 数据源名称 输入为 dataphin_tutorial。版本 选择为 MySQL8。数据源描述 填写数据源简单描述。例如，入门教程的源数据。数据源配置 选择“生产”数据源。标签 默认 不填。JDBC URL ...
步骤二：规划数仓
在 新建MySQL数据源 对话框，配置数据源信息。参数 描述 数据源名称 输入为 dataphin_tutorial。版本 选择为 MySQL8。数据源描述 填写数据源简单描述。例如，入门教程的源数据。数据源配置 选择“生产”数据源。标签 默认 不填。JDBC URL ...
流水线源 sources
流水线源sources：Flow 目前支持配置代码源、Jenkins源、Flow流水线源三种类型的流水线源，并且支持配置多个源。代码源：支持配置 Codeup、github、gitlab、gitee 等常见代码源。Jenkins源：支持配置外部 Jenkins 服务触发流水线运行。Flow...
配置Vertica输入组件
同步Vertica数据源的数据至其他数据源的场景中，您需要先配置Vertica输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置Vertica输入组件。在开始执行操作前，请确认您已完成以下操作：已创建Vertica数据源。...
源站探测
全球加速提供源站探测功能，您可以通过全球加速的监听创建源站探测任务，实时监控从探测点经过全球加速至源站的全链路网络质量，从而快速定位网络故障，针对性的进行网络优化。源站探测介绍 您可以为全球加速的监听创建源站探测任务，源站...
配置IBM DB2输入组件
同步IBM DB2数据源的数据至其他数据源的场景中，您需要先配置IBM DB2输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置IBM DB2输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建IBM DB2...
配置IBM DB2输入组件
同步IBM DB2数据源的数据至其他数据源的场景中，您需要先配置IBM DB2输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置IBM DB2输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建IBM DB2...
配置Teradata输入组件
同步Teradata数据源的数据至其他数据源的场景中，您需要先配置Teradata输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置Teradata输入组件。前提条件 已创建Teradata数据源，如何创建，请参见 创建Teradata...
Quick BI
背景信息 Hologres与Quick BI高效连通，支持通过Hologres数据源直接连接Quick BI，将Hologres高效查询的数据直接进行可视化分析。说明 当前Quick BI高级版和专业版支持Hologres数据源，其余版本请使用PostgreSQL数据源，更多关于PostgreSQL...
新建自建MySQL数据源报“数据源连通性异常，请检查...
问题描述 新建自建MySQL数据源报错，报错信息为“数据源连通性异常，请检查参数是否正常”。解决方案 1.登录ECS管理控制台，检查是否添加了端口通行规则。2.如果没有，请先添加安全组规则，再添加数据源。请参见添加安全组规则。3.登录RDS...
资源添加CDN后访问文件大小为“0”
解决方案 CDN加速后访问文件大小为0的排查方法如下：资源通过CDN下载后会出现访问异常的情况，经过测试复现该问题，确认资源是没有在CDN上缓存，回源拉取的资源出现content-length为0的情况，如下图所示，因此怀疑是源站的问题，但是绑定源...
配置源站
源站探测逻辑：TCP连接异常：如果 DCDN 节点与源站IP地址之间连续两次出现TCP连接不可用（建连失败或连接超时），DCDN 会从可用源站地址列表中剔除该源站IP地址，并将该IP地址加入dead table中，这样后续的回源请求就不会去访问这个源站IP...
MySQL分库分表同步至Hologres（方案1.0）
在 数据来源 区域，确认需要同步的源端数据源相关信息。在 选择同步的源表 区域，选中需要同步的 源表，单击 图标，将其移动至 已选源表。该区域会为您展示所选数据源下所有的表，您可以选择整库全表或部分表进行同步。在 设置表（库）名的...
为数据加工任务开启监控告警
当数据加工出现异常报错时触发告警。关联仪表盘 数据加工诊断>异常详情 消除方法 请按照如下对应报错信息进行处理：错误信息中包含Unauthorized、InvalidAccessKeyId或SignatureNotMatch，则说明数据加工任务读取源Logstore数据、或者写入...
数据处理状态查询API
CHUNK_TEXT_SERVER_INVOKE_ERROR(120005,"切分文本服务调用出现异常"),CHUNK_TEXT_READ_LAYOUT_ERROR(120006,"读取文件layout出现异常"),CHUNK_TEXT_PARSE_LAYOUT_ERROR(120007,"解析文件layout出现异常"),CHUNK_TEXT_PARSE_ERROR(120008,...
访问ECS实例异常时的问题排查和指引
本文主要介绍通过私网或本地公网访问ECS实例上相关...根据实际情况确认是否要进行抓包，当需要抓包时，请参见 网络异常时抓包操作说明，在出现异常时从源服务器和目标服务器抓包。客户端通过公网进行访问 如果客户端是通过公网进行访问的，...
SDK概述
对Loghub数据源出现的几种服务端错误进行重试。Loghub数据源offset计算逻辑重构，减少额外计算和存储开销。修复读取DataHub无数据时出现NPE问题。v1.6.0 新增Spark Streaming SQL测试工具。Spark Streaming SQL适配Loghub数据源。新增...
数据源常见问题
添加自建MySQL数据源时，出现“数据源连通性异常，请检查参数是否正确”。是否支持连接采用kerberos认证的Hive自建数据源？是否支持连接Hologres数据源？支持哪些数据源？请参见 概述。是否支持连接自建数据库？可以。请参见 创建数据库...
备份数据库
建议您在购买时选择更高规格的备份计划，或在出现异常后请先尝试 升级备份计划 至较高规格，再重新尝试备份。若问题仍无法解决，请到DBS客户咨询群（钉钉群号：35585947）进行咨询。Q：备份PolarDB MySQL引擎，在预检查时显示源库binlog...
通过DTS实现数据库的垂直拆分
此步骤创建的反向迁移任务的作用是为业务提供回退方案，业务恢复运行后，一旦出现异常可将业务切换至原有的数据库中。警告 在配置反向数据迁移任务时，在设置迁移类型及列表环节仅需选择增量数据迁移，然后选择需要迁移回源数据库的库或表...
业务切换流程
此步骤创建的反向迁移任务的作用是为业务提供回退方案，业务恢复运行后，一旦出现异常可将业务切换至原有的数据库中。例如原先是将自建MySQL迁移至RDS MySQL，反向数据迁移任务配置案例请参见 从RDS MySQL迁移至自建MySQL（仅选择 增量数据...
0041-00000104
问题描述 请求触发镜像回源时，无法从源站读取数据。问题原因 因源站异常导致请求触发镜像回源时，无法从源站读取数据。问题示例 无 解决方案 检查是否能正常访问镜像回源地址中的文件。排查源站异常 相关文档 镜像回源
业务切换流程
此步骤创建的反向迁移任务的作用是为业务提供回退方案，业务恢复运行后，一旦出现异常可将业务切换至原有的数据库中。例如原先是将自建MySQL迁移至RDS MySQL，反向数据迁移任务配置案例请参见 从RDS MySQL迁移至自建MySQL（仅选择 增量数据...
0041-00000101
问题描述 请求触发镜像回源时，源站返回了非404、206、200状态码。问题原因 源站异常导致触发镜像回源时，源站返回了非404、206、200状态码，导致回源失败。问题示例 无 解决方案 排查源站异常。相关文档 镜像回源
新建及管理质量规则模板
跨数据源对比字段会被自动转换为string类型，部分特殊字段类型可能会出现异常情况。建议码表中的字段类型和校验字段类型都是string或其他相同类型。码表：选择目标码表。码表名称：输入码表名称，作为质量规则配置时的提示信息。码表参照...
新建及管理质量规则模板
跨数据源对比字段会被自动转换为string类型，部分特殊字段类型可能会出现异常情况。建议码表中的字段类型和校验字段类型都是string或其他相同类型。码表：选择目标码表。码表名称：输入码表名称，作为质量规则配置时的提示信息。码表参照...
数据归档至RDS MySQL
注意事项 若在数据归档过程中选择了自动清理源库表数据，请注意源库表空间的预留情况，避免由于空间不足导致归档过程中出现异常。源库和目标库的管控模式均为安全协同或稳定变更，才可执行周期归档任务。若您仅需要单次执行归档任务，则不...
- 产品推荐
- 这些文档可能帮助您