独享数据集成资源组

网络连通方案 独享数据集成资源组与其他独享资源组类似,本质为一组阿里ECS实例,在数据集成任务运行时,需保障资源组与数据源之间的网络是连通的,且不会因为白名单等特殊安全访问设置阻断资源组与数据源之间的网络连通性。独享数据...

DataWorks资源组概述

推荐指数★选择指引 时效性要求:在数据集成任务高并发执行且无法错峰运行的情况下,企业需要独享的计算资源来保障数据快速、稳定地传输,此时您可选择使用独享数据集成资源组。访问内网环境的需求:独享数据集成资源组拥有公网访问能力,...

采集数据

本教程以MySQL中的用户基本信息(ods_user_info_d)表及OSS中的网站访问日志数据(user_log.txt)文件,通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例,为您介绍如何通过DataWorks数据集成实现异构...

什么是DataWorks

阿里云上发展历程 2015年DataWorks正式上云,将多年沉淀的大数据建设方法论产品化输出,服务阿里云上客户,通过不断迭代的产品能力,DataWorks正在与各行各业的客户与合作伙伴一起,通过全链路数据治理,管得好数据、用得好数据,让数据从...

采集数据

本教程以MySQL中的用户基本信息(ods_user_info_d)表及OSS中的网站访问日志数据(user_log.txt)文件,通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例,为您介绍如何通过DataWorks数据集成实现异构...

数据导入概览

使用DataWorks数据集成同步数据到GDB DataWorks 是阿里云上的一站式大数据智能云研发平台,其中数据集成服务支持导出数据到GDB,您也可以使用平台完成数据计算、筛选、转换等处理再同步到GDB。DataWorks的GDB数据源底层由GdbWriter插件提供...

计费逻辑说明

计费项 计费方式 计费项说明 购买场景 使用说明 独享数据集成资源组 包年包月 独享数据集成资源组属于平台托管类型的资源组,购买后您将拥有该资源组的独立使用权,此类资源组仅用于运行数据集成任务。资源组详情请参见 独享数据集成资源组...

什么是数据库网关

DMS提供全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能,致力于帮助企业高效、安全地挖掘数据价值,助力企业数字化转型。数据库网关与数据管理DMS搭配可为您提供高稳定性、低成本、统一的非阿里数据库...

ETL工具支持概览

支持的ETL工具见下,可以同时参见更详细的同步方案列表 数据迁移及同步方案综述:数据传输服务(DTS):阿里提供的实时数据同步服务,可以将其他数据源(RDS MySQL,ECS自建MySQL,PolarDB等)实时同步数据到 AnalyticDB PostgreSQL版,...

文档修订记录

使用MaxCompute独享Tunnel进行数据同步 2023.4.19 新增功能 数据集成 以阿里EMR Hive离线同步写入MaxCompute场景为例,为您介绍如何一次性把EMR Hive整个数据库的数据离线同步至MaxCompute。EMR Hive数据整库离线同步至MaxCompute 2023.4...

DataWorks On MaxCompute使用说明

开始使用数据集成 DataWorks数据集成提供MaxCompute数据读取与写入的能力,并提供离线同步、实时同步、全增量同步任务等多种数据同步场景。开始使用:数据建模与开发 DataWorks提供数据建模服务,将无序、杂乱、繁琐、庞大且难以管理的...

基于Hadoop集群支持Delta Lake或Hudi存储机制

使用限制 基于Hadoop集群支持Delta Lake或Hudi存储机制湖仓一体方案使用限制如下:仅华东1(杭州)、华东2(上海)、华北2(北京)、华南1(深圳)、中国香港、新加坡和德国(法兰克福)地域支持构建湖仓一体能力。操作流程 本文以阿里...

CDT服务条款

提示条款 欢迎您与阿里计算有限公司(以下简称“阿里”)共同签署本《阿里产品服务协议》(下称“本协议”)并使用阿里云服务!协议中条款前所列索引关键词仅为帮助您理解该条款表达的主旨之用,不影响或限制本协议条款的含义或解释...

2023年

MaxCompute停止服务规格转换操作指引 2023-07-19 新增使用命令行(odpscmd)连接 新说明 MaxCompute基于阿里云云命令行,为您提供云上客户端环境,您无需手动安装即可通过云命令行工具使用客户端(odpscmd)。本文为您介绍MaxCompute的云...

入门概述

快速入门介绍购买并使用 云数据库 SelectDB 版 的完整过程,旨在帮助新用户快速使用 云数据库 SelectDB 版。使用流程 在本教程中,您将进行以下操作。创建实例:介绍如何创建 云数据库 SelectDB 版 实例。重置实例admin密码:介绍如何重置 ...

什么是消息队列 RocketMQ 版?

流式处理 消息队列 RocketMQ 版 具备海量吞吐的流式存储能力,可以有效对接日志收集、数据集成和数据分析等系统。通过 消息队列 RocketMQ 版 可以将上游数据分发到下游的实时计算、离线存储等系统。事件驱动 消息队列 RocketMQ 版 ...

低代码音视频工厂迁移方案

迁移方案 接入新方案 目前阿里提供2种迁移方案,您可以结合实际业务场景按需选用:低代码(含UI)集成:对标低代码1.0的 样板间集成方案,针对电商直播、秀场直播和互动课堂等场景提供完整的业务组件供集成方快速接入,搭建自有音视频...

基于DLF、RDS或Flink、OSS支持Delta Lake或Hudi存储...

Delta Lake和Hudi是数据方案中常用的存储机制,为数据湖提供流处理、批处理能力。MaxCompute基于阿里DLF、RDS或Flink、OSS产品提供了支持Delta或Hudi存储机制的湖仓一体架构。您可以通过MaxCompute查询到实时数据,即时洞察业务数据...

搭建与管理(基于Hadoop)

通过MaxCompute与Hadoop构建湖仓一体方案旨在实现对海量数据的统一管理、存储和分析,提供了一个既能处理结构化、半结构化数据,又能满足高并发分析需求的一体化数据平台。本文为您介绍如何通过MaxCompute与Hadoop构建湖仓一体,以及管理湖...

通过操作审计查询行为事件日志

DIBatchDeleteAlarmRule 运维中心数据集成批量删除告警规则 DIUpdateAlarmRule 运维中心数据集成修改告警规则 DISaveSolution 数据集成主站新建或修改保存解决方案 DIDeleteSolution 数据集成主站删除解决方案 DIStartSolution 数据集成主...

总体流程

快速入门介绍购买并使用 云数据库ClickHouse 集群的完整过程,旨在帮助新用户快速使用 云数据库ClickHouse。在本教程中,您将进行以下操作。准备权限:RAM用户按照本教程使用 云数据库ClickHouse 前,需要具备AliyunClickHouseFullAccess和...

准备权限

RAM用户按照快速入门教程在 云数据库ClickHouse 控制台新建集群、创建账号等,需要具备AliyunClickHouseFullAccess和AliyunHBaseFullAccess权限。本文介绍如何使用阿里账号为RAM用户授权。如果您使用主账号登录使用 云数据库ClickHouse,...

限制说明

使用场景 当数据访问分布比较均匀,数据没有明显的冷热分别时,大量的访问请求在云数据库 Memcache 版无法命中,使用云数据库 Memcache 版作为数据库缓存的效果不明显。在选择缓存时,需要充分考虑到业务模式对数据访问的要求。数据删除...

设置白名单

为保障 云数据库ClickHouse 数据库的安全稳定,系统默认禁止所有IP地址访问 云数据库ClickHouse 集群。在开始使用 云数据库ClickHouse 集群前,您需要将客户端的IP地址或IP地址段添加到 云数据库ClickHouse 的白名单中。本文介绍如何设置白...

数据库服务协议

使用云数据库ClickHouse产品的用户与阿里计算有限公司(简称“阿里”)共同遵守《云数据库服务协议》,详细协议内容请参见 云数据库ClickHouse服务等级协议。

设置白名单

在开始使用 云数据库 SelectDB 版 实例前,您需要将客户端的IP地址或IP地址段添加到 云数据库 SelectDB 版 实例的白名单中。前提条件 已创建 云数据库 SelectDB 版 实例。具体操作,请参见 创建实例。注意事项 设置白名单可以让 云数据库 ...

设置白名单

在开始使用 云数据库 SelectDB 版 实例前,您需要将客户端的IP地址或IP地址段添加到 云数据库 SelectDB 版 实例的白名单中。前提条件 已创建 云数据库 SelectDB 版 实例。具体操作,请参见 创建实例。注意事项 设置白名单可以让 云数据库 ...

服务条款

使用 云数据库 SelectDB 版 产品的用户与阿里计算有限公司(简称“阿里”)共同遵守《云数据库服务协议》,详细协议内容请参见 云数据库服务协议。

设置白名单

为保障 云数据库ClickHouse 数据库的安全稳定,系统默认禁止所有IP地址访问 云数据库ClickHouse 集群。在开始使用 云数据库ClickHouse 集群前,您需要将客户端的IP地址或IP地址段添加到 云数据库ClickHouse 的白名单中。本文介绍如何设置白...

概述

本章主要介绍如何在数据库控制台购买云数据库HBase 增强版集群,并通过网络连接集群,使您能够使用和管理集群。使用场景 首次使用云数据库HBase 增强版。流程简介 云数据库HBase 增强版的初始化操作流程如上图所示。购买集群:根据业务需求...

产品集成KMS加密概述

KMS对云产品使用过程中的云内数据(例如数据库引擎产生的文件等)进行全链路加密,从而为您提供云上数据更安全的加密方案,增加数据整体的安全性和隐私性。降低自研数据加密带来的研发成本 在自研数据加密时通常需要解决如下问题,云产品...

使用公共资源组

网络连通方案 DataWorks资源组本质为一组阿里ECS实例,在运行数据集成、数据开发等任务时,需保障资源组与数据源之间的网络是连通的,且不会因为白名单等特殊安全访问设置阻断资源组与数据源之间的网络连通性。网络连通 公共资源组支持...

常见问题

数据湖后端存储使用OSS,用户使用数据湖构建面向大数据分析和机器学习场景可以获得集中式权限管理和统一的元数据视图,更容易对接云上数据和分析产品。什么情况下我需要使用数据湖构建?在云上数据分析和机器学习需求,希望构建云上的...

数据加密

您可以使用云数据库MongoDB提供的服务器端根证书来验证目标地址和端口的数据库服务是不是云数据库MongoDB提供的,以有效避免被其他人攻击。除此之外,云数据库MongoDB还提供了服务器端SSL证书的启用和更新能力,方便您按需更新SSL证书以...

配置资源组与网络连通

在数据同步任务配置前,您需要确保用于执行同步任务的独享数据集成资源组与您将要同步的数据来源端与目的端数据库的网络连通性,您可以根据数据库所在网络环境,选择合适的网络解决方案来实现网络连通。本文为您介绍数据库在不同网络环境中...

资源组操作及网络连通

如果您需要使用独享数据集成资源组通过内网同步ECS自建的数据库,您需要为独享数据集成资源组做相关的网络配置,详情可参见 新增和使用独享数据集成资源组,连通方案核心点为:独享数据集成资源组绑定ECS所在VPC,会自动添加一个路由指向...

OCS服务公告

如果您仍在使用OCS产品,强烈建议使用 云数据库Memcache版 取代OCS,从而获得更强大的功能和持续的售后服务。常见问题 OCS还可以继续使用吗?答:运行中的OCS实例暂时可以正常服务。请注意,阿里计划在未来终止对OCS的售后支持,将售后...

什么是虚拟主机

云服务器ECS是一种弹性计算服务,支持各种应用软件灵活扩展,既可以作为Web服务器或者应用服务器单独使用,又可以与其他阿里云服务集成提供丰富的解决方案。适合有技术能力、懂得服务器配置及维护的用户及开发者。具体对比项如下所示:对比...

最佳实践

云存储网关结合Active Directory服务搭建Windows文件共享服务器 云存储网关使用Windows权限控制管理数据访问权限 使用Windows权限控制功能实现基于访问权限的枚举 解决方案 云存储网关跨境数据传输最佳实践 云存储网关:将云上文件同步至线...

服务关联角色

应用场景 在使用 云数据库 MongoDB 版 的审计日志功能时,云数据库 MongoDB 版 会自动创建服务关联角色 AliyunServiceRoleForMongoDB,用于允许 云数据库 MongoDB 版 访问 日志服务 资源。RAM用户使用服务关联角色需要的权限 如果使用RAM...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 数据库备份 DBS 阿里邮箱 云服务器 ECS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用