通过DataWorks导入数据
已完成数据集成资源组与数据源的网络连通。详情请参见：配置资源组与网络连通。操作步骤 新增RDS SQL Server数据源。具体操作，请参见 配置SQLServer数据源。新增AnalyticDB MySQL数据源。具体操作，请参见 配置AnalyticDB for MySQL 3.0...
新建 PostgreSQL 数据源
新建数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 PostgreSQL 数据源。前提条件 已创建 RDS PostgreSQL 实例。详情请参见 创建 RDS PostgreSQL 实例。重要 数据传输不支持 Serverless 模式实例和只读实例...
出错提示S0客户端调用SMC服务出错
其中S0_*可能的错误码如下：S0_U28 S0_U7 S0_U56 S0_U6 S0_U35 问题原因 源系统到SMC的服务域名网络访问不通。解决方案 确认SMC服务域名。默认激活码域名（通过控制台自动导入或手动生成激活码的方式）：默认公网域名：...
新建 PolarDB-X 2.0 数据源
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 PolarDB-X 2.0 数据源。背景信息 云原生数据库 PolarDB 分布式版（简称 PolarDB-X）是由阿里巴巴自主研发的云原生分布式数据库，为您提供高吞吐、大...
MySQL一键实时同步至MaxCompute
已完成独享数据集成资源组与数据源的网络连通。详情请参见：配置资源组与网络连通。已完成数据源环境准备。MaxCompute：Decimal类型为MaxCompute 2.0支持的数据类型，所以在同步前，您需要先开启MaxCompute2.0数据类型。详情请参见 2.0数据...
MySQL一键实时同步至MaxCompute
已完成独享数据集成资源组与数据源的网络连通。详情请参见：配置资源组与网络连通。已完成数据源环境准备。MaxCompute：Decimal类型为MaxCompute 2.0支持的数据类型，所以在同步前，您需要先开启MaxCompute2.0数据类型。详情请参见 2.0数据...
配置并管理实时同步任务
完成数据源、网络、资源的准备配置后，您可创建实时同步节点，同步数据至DataHub。本文为您介绍如何创建数据实时同步任务，并在创建完成后查看任务运行情况。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，配置好您需要同步...
新建 PolarDB-X 1.0 数据源
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 PolarDB 数据源。背景信息 PolarDB-X 1.0 是由阿里巴巴自主研发的 PolarDB 分布式版数据库，融合分布式 SQL 引擎和分布式自研存储 X-DB，基于云原生...
新建 MySQL 数据源
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输新建 MySQL 数据源。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建...
新建 Oracle 数据源
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 Oracle 数据源。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 ...
数据集成：全领域数据汇聚
DataWorks的数据集成功能模块是稳定高效、弹性伸缩的数据同步平台，致力于提供复杂网络环境下、丰富的异构数据源之间高速稳定的数据移动及同步能力。功能概述 DataWorks数据集成支持离线同步、实时同步，以及离线和实时一体化的全增量同步...
配置并管理实时同步任务
完成数据源、网络、资源的准备配置后，您可创建实时同步节点，同步数据至MaxCompute。本文为您介绍如何创建数据实时同步任务，并在创建完成后查看任务运行情况。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，配置好您需要...
MySQL分库分表同步至MaxCompute
操作流程 步骤一：选择同步方案 步骤二：网络与资源配置 步骤三：分库源表设置 步骤四：设置目标表 步骤五：设置表粒度同步规则 步骤六：DDL消息处理规则 步骤七：设置任务运行资源 步骤八：执行同步任务 步骤一：选择同步方案 创建同步...
MySQL分库分表同步至MaxCompute
操作流程 步骤一：选择同步方案 步骤二：网络与资源配置 步骤三：分库源表设置 步骤四：设置目标表 步骤五：设置表粒度同步规则 步骤六：DDL消息处理规则 步骤七：设置任务运行资源 步骤八：执行同步任务 步骤一：选择同步方案 创建同步...
新建 TiDB 数据源
新建数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 TiDB 数据源。前提条件 已获取相关数据库的 IP 地址和端口号。已存在用于数据迁移的数据库用户。建议您为数据迁移项目创建一个专属的数据库用户，该用户...
DataStudio侧实时同步任务配置
完成数据源、网络、资源的准备配置后，您可创建实时同步节点，将多种输入及输出数据源搭配组成同步链路，进行单表或整库数据的实时增量同步。本文为您介绍如何创建单表或整库增量数据实时同步任务，并在创建完成后查看任务运行情况。前提...
ElasticSearch
使用DDI读写ElasticSearch数据源 打通DDI集群与ElasticSearch数据源的网络 登录到 Elasticsearch管理控制台。点击上部选择实例所在 region。点击实例ID进入实例详情页面。查看 基本信息 找到对应的VPV和VSwitch。登录到 Databricks数据洞察...
数据集成侧同步任务配置
完成数据源、网络、资源的准备配置后，您可以根据同步场景选择同步解决方案，创建并执行同步任务，将源端数据同步至目标端。本文为您介绍同步任务的通用配置流程，不同的同步方案配置流程可能存在差异，对应方案配置详情请以界面为准。前提...
配置并管理实时同步任务
完成数据源、网络、资源的准备配置后，您可创建实时同步节点，同步数据至Kafka。本文为您介绍如何创建数据实时同步任务，并在创建完成后查看任务运行情况。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，配置好您需要同步的...
MySQL整库离线同步到OSS
网络与资源配置：点击下拉框分别选择已经创建的MySQL数据源、独享数据集成资源组、OSS数据源，单击 测试所有连通性，保障资源组与数据源之间的网络连通性。步骤二：配置同步任务 周期全量配置方式 在 新建同步任务 页面，选择 同步步骤 为 ...
采集数据
1、配置同步网络链接 此步骤中，使用 独享数据集成资源组 测试与源端HttpFile数据源 user_behavior_analysis_httpfile，以及目标端MaxCompute数据源的网络连通。数据来源：数据来源选择 HttpFile，数据源名称选择 user_behavior_analysis_...
出错提示S11目标实例中转服务网络连接出错
问题描述 在SMC迁移时，迁移任务出错提示“S11_*目标实例中转服务网络连接出错”，其中S11_*可能的错误码如下：S11_U28 S11_U7 S11_U56 S11_U6 问题原因 源系统SMC客户端进行目标实例中转服务网络连接时出错，可能原因如下：说明 目标实例...
什么是源站OFFLOAD
使用源站OFFLOAD的优势 提升缓存命中率 新的回源架构会提升您的网站的缓存命中率，客户端发起的访问请求无需回到源站获取资源，可直接从CDN节点命中，减少回源的同时，减少了回源的网络链路，进一步提升网站的性能。说明 使用源站OFFLOAD后...
新建 OceanBase 数据源
新建数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 OceanBase 数据源。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 ...
采集数据
1、配置同步网络链接 此步骤中，使用 独享数据集成资源组 测试与源端OSS数据源 oss_workshop_log，以及目标端MaxCompute的odps_first数据源的网络连通。数据来源：数据来源选择 OSS，数据源名称选择 oss_workshop_log，即 步骤二：创建数据...
访问控制策略配置示例
关键配置项如下：配置项 说明 示例值 源类型 网络流量的发起方。您需要选择访问源类型，并根据访问源类型输入发送流量的访问源地址。IP 访问源 0.0.0.0/0 说明 0.0.0.0/0表示所有公网IP。目的类型 网络流量的接收方。您需要选择目的类型，...
CDN
内容分发网络（Content Delivery Network，CDN）是建立并覆盖在承载网上，由不同区域的服务器组成的分布式网络。将源站资源缓存到全国各地的边缘服务器，供用户就近获取，降低源站压力。
进阶功能
更换第三方依赖镜像源 源码部署中，使用了多种镜像源来加快依赖拉取速度，包括Ubuntu的apt源、Go语言的Goproxy、Python的pip源、Node.js的npm源、Java的Maven仓库地址、PHP的composer源。镜像源为阿里公网、内网源，以及其他开源镜像源。...
Ubuntu实例如何备份iptables规则
概述 Ubuntu实例排查网络问题，由于需要备份iptables规则，然后清空iptables规则排除来自iptables的影响。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例...
数据源概览
本章节主要介绍如何使用Databricks数据洞察完成对多种数据源的读写，以及如何使用Databricks数据洞察完成与其他阿里云产品数据源之间的网络连接。静态数据源 Databricks数据洞察支持直接读取静态数据源。CSV文件 JSON文件 Parquet文件 ORC...
配置VPC数据源
本文介绍在DataV中配置专有网络VPC（Virtual Private Cloud）内数据源的方法。通过专有网络VPC数据源的配置，您可以将专有网络VPC内的数据库接入到DataV中，并作为组件的数据源进行大屏展示。背景信息 了解专有网络VPC，详情请参见 什么是...
CreateTrafficMirrorFilterRules-创建流量镜像入方向...
accept SourceCidrBlock string 否 入方向规则网络流量的源地址网段。10.0.0.0/24 Protocol string 是 入方向需要镜像的网络流量使用的协议类型，取值：ALL：所有协议。ICMP：网络控制报文协议。TCP：传输控制协议。UDP：用户数据报协议。...
CreateTrafficMirrorFilter-创建流量镜像筛选条件
accept SourceCidrBlock string 否 入方向规则网络流量的源地址网段。10.0.0.0/24 Protocol string 是 入方向需要镜像的网络流量使用的协议类型。取值：ALL：所有协议。ICMP：网络控制报文协议。TCP：传输控制协议。UDP：用户数据报协议。...
创建和管理流量镜像
通过流量镜像功能，您可以将符合筛选条件的经过弹性网卡ENI的网络流量复制并发送到指定目的实例，从而实现对网络流量的监控和分析需求。关于流量镜像功能的简介、使用限制等信息，请参见 流量镜像概述。前提条件 初次使用时，请登录 流量...
使用阿里云其他网络实例（VBR、CCN、VPN网关）
步骤二：配置回源VPC 当您已经通过 SAG、IPsecVPN 和 专线 将本地网络与阿里云云上网络连通时，SASE 可以通过已经与本地网络打通的VPC去回源访问本地网络，因此将这种VPC称为回源VPC。当连接器类型为 IPsecVPN（即VPN网关）时，有且仅有...
通用参考：添加路由
如果添加路由后，仍然存在网络连通问题，请根据如下因素进行排查：如果独享资源组访问的是本地IDC数据源，或者跨账号访问数据源，请先参考 配置资源组与网络连通 进行网络连通，再为独享资源组绑定与数据库网络连通的VPC。如果您的数据源已...
Ubuntu系统APT更新提示404错误
问题描述 系统为Ubuntu 16.04的ECS实例中执行 apt update 命令提示404错误，不能正常从镜像源获取更新。apt update&apt full-upgrade-y Err:1 http://mirrors.cloud.aliyuncs.com/ubuntu xenial-security/main amd64 libtiff5 amd64 4.0.6-...
资源规划和配置
在调用API时会消耗一定的资源组，为了防止资源组不能正常访问数据源，或资源（CPU、内存）不足导致API调用异常、高频调用请求被限流等问题，您需要确保资源组的网络连通性和充足的性能。本文为您介绍资源组规划时的注意项及不同资源组类型...
数据源概述
数据源功能概述 配置数据源时，您需要了解如下内容：能力 说明 数据源支持情况与配置 在配置数据集成同步任务前，您需要提前在DataWorks数据源管理页面配置好需要同步的数据源。数据集成目前支持几十种数据源，目前支持的数据源及其配置...
新增和使用独享调度资源组
说明 DataWorks工作空间和数据源不在同一地域或不在同一个阿里云主账号下，您还需通过 VPN网关 或 高速通道 等方式，将独享资源组绑定的VPC与数据源所在VPC网络打通，并手动添加路由指向目标数据库IP，保障两个网络间可达。详情请参见 配置...
- 产品推荐
- 这些文档可能帮助您