DLA Presto CU版本快速入门
配置数据源网络 说明 如果需要连接您VPC内的数据源（如VPC内的RDS、AnalyticDB等）,您需要配置数据源网络，如不需要连接，忽略此步骤即可。在配置数据源网络前，您需要授予DLA账户访问您VPC相关API的权限，详细操作步骤请参见 配置数据源...
常用监控指标
一般由于回源网络质量变差、回源链路有访问控制拦截回源请求导致源站无响应。建议检查回源网络链路、回源链路中间的访问控制策略、源站处理资源负载、数据库等情况。检查源站是否拦截了WAF回源IP的请求。status:503（Service Unavailable）...
MySQL节点
访问公网或VPC网络的MySQL数据源，请选择与MySQL数据源网络连通的调度资源组，作为周期调度任务使用的资源组。详情请参见 配置资源组与网络连通。提交并发布节点任务。单击工具栏中的 图标，保存节点。单击工具栏中的 图标，提交节点任务。...
常见问题
PolarDB数据源网络联通性测试失败怎么办？Oracle数据源网络联通性测试失败怎么办？MySQL数据源网络联通性测试失败怎么办？实时任务，运行报错：...
同阿里云主账号访问
在进行数据同步前，您需要确保用于执行同步任务的独享数据集成资源组与您将要同步的数据来源端与目的端数据源的网络连通性。本文为您介绍数据源与DataWorks工作空间同阿里云主账号时如何进行网络连通。背景信息 网络连通方案选择取决于数据...
源代码仓库常见问题
容器镜像服务提供了源代码仓库（阿里云Codeup、Github、GitLab、Git、Gitee）的镜像构建功能，支持源代码修改后自动进行镜像构建。本文介绍在使用源代码仓库过程中，可能遇到的问题以及解决方法。阿里云Code项目名称修改后，无法自动构建 ...
Kafka实时ETL同步至Hologres
准备独享数据集成资源组并与数据源网络连通 在进行数据同步前，需要完成您的独享数据集成资源组和数据源的网络连通，详情请参见 配置网络连通。说明 Kafka与Hologres支持的网络类型如下：Kafka:指定VPC网络、公网。Hologres:指定VPC网络、...
代码配置
代码源访问Token 如果您需要访问私有代码集，则需要指定该参数。GitHub Token的获取方式请参见下方的 附录：获取GitHub账号的Token。本地存储目录 挂载数据时，所挂载的文件位置，默认为/root/code/。单击 提交。管理代码集 创建完成代码...
添加数据源
查看数据源 查看您已创建的数据源详细信息，包括类型、数据源网络地址、数据源共享目录、备份客户端组等。编辑数据源 修改您已创建的数据源配置参数。注销数据源 注销数据源。当您确认不需要归档数据时，可以执行此操作。调整客户端组 修改...
概述
应用数据源 Dataphin（专业版）DMS 宜搭（专业版）数据源网络要求 添加数据源时，Quick BI对数据源的网络类型有以下要求：VPC RDS实例可以通过外网域名访问Quick BI，其中MySQL和SQL Server实例还可以通过内网域名访问Quick BI，除此以外的...
全增量同步任务常见问题
PolarDB数据源网络联通性测试失败怎么办？OceanBase数据源网络联通性测试失败怎么办？MySQL数据源网络联通性测试失败怎么办？全增量实时至MaxCompute时，数据源被置灰了没法选择怎么办？实时任务，运行报错：...
常见问题
PolarDB数据源网络联通性测试失败怎么办？MySQL数据源网络联通性测试失败怎么办？实时任务，运行报错：com.alibaba.otter.canal.parse.exception.PositionNotFoundException: can't find start position for XXX 实时任务，运行报错：...
配置并管理实时同步任务
完成数据源、网络、资源的准备配置后，您可创建实时同步节点，同步数据至DataHub。本文为您介绍如何创建数据实时同步任务，并在创建完成后查看任务运行情况。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，配置好您需要同步...
配置并管理实时同步任务
完成数据源、网络、资源的准备配置后，您可创建实时同步节点，同步数据至Hologres。本文为您介绍如何创建数据实时同步任务，并在创建完成后查看任务运行情况。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，配置好您需要...
CDN回源时网站出现5xx报错的排查方法
问题描述 当您使用阿里云CDN加速站点访问资源后，客户端的请求将首先发送到CDN的L1节点（一级节点），再回源到L2节点（二级节点），然后再回源到源站。因此如果访问过程中出现问题，可能涉及到多级网络链路的问题。当CDN回源源站异常失败时...
约束和限制
目录下面采样最新和最老的文件，每个文件读取前1000行 元数据发现SLS数据源发现历史投递数据 如果投递中途修改了分区格式，不会发现修改前的数据 一键建仓/多库合并支持的数据源网络类型 VPC 一键建仓/多库合并支持的数据源 PolarDB MySQL ...
配置并管理实时同步任务
完成数据源、网络、资源的准备配置后，您可创建实时同步节点，同步数据至 AnalyticDB for MySQL。本文为您介绍如何创建数据实时同步任务，并在创建完成后查看任务运行情况。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，...
配置数据源网络
本文主要介绍Serverless Spark如何配置数据源网络来访问用户VPC网络中的数据。这些数据包括RDS系列、ADB系列、PolarDB系列、MongoDB、Elasticsearch、HBase、E-MapReduce、Kafka以及用户在ECS上自建的各种数据服务等。背景信息 Serverless ...
数据传输作业：数据集成
在配置同步任务前，您需要确保数据集成资源组与您将同步的数据源网络环境已经连通，详情请参见 配置资源组与网络连通。实时同步 DataWorks提供的实时数据同步功能，使用单表或整库同步方式，将源端数据库中部分或全部表的数据变化实时同步...
元数据采集
如果数据源未开启白名单限制，请参考 资源组操作及网络连通 文档进行数据源网络打通。采集计划 包括 手动采集、每月、每周、每天 及 每小时。根据不同的执行周期，生成不同的执行计划，在相应执行计划的时间内，对目标数据源进行元数据采集...
跨阿里云主账号访问
您在跨账号进行数据同步任务之前，需要设置并确保执行任务的独享数据集成资源组，与源端及目标端数据库之间的网络连通性。本文将为您介绍在使用跨阿里云账号时，数据库与DataWorks工作空间之间的网络连通操作。背景信息 网络连通方案选择取...
配置并管理实时同步任务
完成数据源、网络、资源的准备配置后，您可创建实时同步节点，同步数据至MaxCompute。本文为您介绍如何创建数据实时同步任务，并在创建完成后查看任务运行情况。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，配置好您需要...
使用DataWorks
MaxCompute支持通过DataWorks的数据集成功能将MaxCompute中的数据以离线方式导出至其他数据源。当您需要将MaxCompute中的数据导出至其他数据源执行后续数据处理操作时，您可以使用数据集成功能导出数据。本文为您介绍如何将MaxCompute的...
DataStudio侧实时同步任务配置
完成数据源、网络、资源的准备配置后，您可创建实时同步节点，将多种输入及输出数据源搭配组成同步链路，进行单表或整库数据的实时增量同步。本文为您介绍如何创建单表或整库增量数据实时同步任务，并在创建完成后查看任务运行情况。前提...
DataWorks on EMR Serverless StarRocks最佳实践
DataWorks支持StarRocks数据源，通过数据源对接EMR Serverless StarRocks，可实现EMR Serverless StarRocks的数据集成、开发、分析、数据服务等功能。本文为您介绍EMR Serverless StarRocks在DataWorks上的操作流程。背景信息 了解EMR ...
构建仓库与镜像
功能特点 说明 使用构建功能需绑定源代码仓库，请您创建个人版实例后，绑定源代码仓库。代码变更时自动触发构建 开启 代码变更自动构建镜像 后，每次提交代码将自动触发镜像构建，减少手动触发构建的繁琐工作。登录 容器镜像服务控制台。在...
基础常见问题
您需要在源代码页面解绑GitLab，在GitLab新建仓库，然后在源代码页面绑定GitLab。关于绑定GitLab的具体操作，请参见 绑定源代码托管平台。如何恢复误删除的个人版实例的命名空间？不支持恢复误删除的个人版实例的命名空间。容器镜像服务...
使用企业版实例构建镜像
容器镜像服务企业版提供安全且高效的源代码到容器镜像的自动化持续集成流程，并支持基于Dockerfile规则触发的自动构建镜像和镜像仓库提交功能。前提条件 已创建容器镜像服务企业版实例。具体操作，请参见 创建企业版实例。已准备构建镜像的...
使用企业版实例构建镜像
容器镜像服务企业版提供安全且高效的源代码到容器镜像的自动化持续集成流程，并支持基于Dockerfile规则触发的自动构建镜像和镜像仓库提交功能。前提条件 已创建容器镜像服务企业版实例。具体操作，请参见 创建企业版实例。已准备构建镜像的...
添加ClickHouse数据源
网络 数据源可选的网络类型。说明 当前仅支持外网访问。域名 连接数据库的地址。重要 该地址是DataV服务器能够通过公网或阿里云部分Region内网访问您数据库的域名或IP地址。端口 数据库设置的端口。用户名 登录数据库的用户名。密码 登录...
创建PolarDB-X 2.0数据订阅任务
若源库为经典网络的实例，则不支持通过公网IP方式进行数据订阅。注意事项 类型 说明 源库限制 待订阅的表需具备主键或唯一约束，且字段具有唯一性，否则可能会导致订阅到的重复数据。如订阅对象为表级别，则单次订阅任务仅支持至多500张表...
创建RDS MySQL数据订阅任务
通过数据订阅功能，您可以实时订阅源库的增量数据，轻松帮助业务实现轻量级缓存更新、业务异步解耦、含ETL逻辑的数据实时同步等场景。本文将介绍如何创建 RDS MySQL 数据订阅任务。前提条件 已创建源 RDS MySQL 实例，创建方式，请参见 ...
创建RDS PostgreSQL数据订阅任务
若源库为经典网络的实例，则不支持通过公网IP方式进行数据订阅。注意事项 类型 说明 源库限制 待订阅的表需具备主键或唯一约束，且字段具有唯一性，否则可能会导致订阅到的重复数据。如订阅对象为表级别，则单次订阅任务仅支持至多500张表...
创建PolarDB MySQL版数据订阅任务
若源库为经典网络的实例，则不支持通过公网IP方式进行数据订阅。注意事项 类型 说明 源库限制 待订阅的表需具备主键或唯一约束，且字段具有唯一性，否则可能会导致订阅到的重复数据。如订阅对象为表级别，则单次订阅任务仅支持至多500张表...
容器镜像常见问题
本文汇总了容器镜像基础常见问题、Docker登录、推送和拉取失败常见问题、源代码仓库常见问题等。基础常见问题 使用个人版实例在海外构建镜像成功后，推送至中国内地时存在推送慢的现象 构建镜像时，基础镜像可以使用需要认证的个人仓库里的...
新建离线自定义源类型
数据源JSON 填写数据源JSON代码及上传读写插件：填写数据源JSON代码，即定义数据源的配置项，代码示例说明如下：[{"columnName":"url","columnType":"NORMAL","text":{"zh_CN": "链接地址","en_US":"address","zh_TW":"繁体"},"placeholder...
新建离线自定义源类型
数据源JSON 填写数据源JSON代码及上传读写插件：填写数据源JSON代码，即定义数据源的配置项，代码示例说明如下：[{"columnName":"url","columnType":"NORMAL","text":{"zh_CN": "链接地址","en_US":"address","zh_TW":"繁体"},"placeholder...
构建多架构容器镜像
绑定源代码托管平台。具体操作，请参见 绑定源代码托管平台。代码工程支持在目标架构上构建。背景信息 当仅选择一种架构时，构建推送后的Tag中只包含该架构的镜像。当同时选择多个架构时，构建系统会将多个架构的镜像以同一Tag的形式推送到...
在Dockerfile中使用构建打包镜像并运行
存在源码泄露风险 打包镜像时，源代码容易被打包到镜像中，从而产生源代码泄漏的风险。多阶段构建优势 针对Java这类的编译型语言，使用Dockerfile多阶段构建，具有以下优势：保证构建镜像的安全性 当您使用Dockerfile多阶段构建镜像时，...
配置数据订阅任务
数据订阅功能可以帮助您获取数据库的实时增量数据，您可以根据自身业务需求自由消费增量数据，并写入任意目标端，适配各类业务场景，例如缓存更新、业务异步解耦、异构数据源数据实时同步及含复杂ETL的多种业务场景。本文将介绍在DTS专属...
- 产品推荐
- 这些文档可能帮助您