实时消费Kafka数据
当您需要将Kafka数据写入 云原生数据仓库AnalyticDB PostgreSQL版，且不希望使用其他数据集成工具时，可以通过实时数据消费功能直接消费Kafka数据，减少实时处理组件依赖，提升写入吞吐。Apache Kafka是一个容错、低延迟、分布式的发布-...
PolarDB-X间的数据实时同步
云原生分布式数据库 PolarDB-X 是阿里巴巴致力于解决单机数据库服务瓶颈而自主研发的分布式数据库产品，高度兼容MySQL协议和语法，支持自动化水平拆分、在线平滑扩缩容、弹性扩展、透明读写分离，具备数据库全生命周期运维管控能力。...
从ECS上的Codis集群同步至Redis实例
阿里云数据库Redis版是兼容开源Redis协议标准、提供内存加硬盘混合存储的数据库服务，基于高可靠双机热备架构及可平滑扩展的集群架构，可充分满足高吞吐、低延迟及弹性变配的业务需求。通过数据传输服务DTS（Data Transmission Service），...
从ECS上的Codis集群同步至Redis实例
阿里云数据库Redis版是兼容开源Redis协议标准、提供内存加硬盘混合存储的数据库服务，基于高可靠双机热备架构及可平滑扩展的集群架构，可充分满足高吞吐、低延迟及弹性变配的业务需求。通过数据传输服务DTS（Data Transmission Service），...
使用MaxCompute控制台（离线）
MaxCompute控制台提供数据上传功能，支持您将本地文件或阿里云对象存储服务OSS中的文件数据离线（非实时）上传至MaxCompute进行分析处理及相关管理操作。使用限制 仅支持基于 本地文件 或 阿里云对象存储OSS 上传数据，具体如下。本地文件...
产品概述
在开发过程中，您可以快速完成各类不同数据源的接入，并通过蓝图编辑器完成组件间、跨页面的交互联动编排，最终产出可视化效果丰富、人机交互灵活的可视化应用，并在各类媒介终端上进行演示播放，如个人电脑、会议室大屏、指挥中心大屏。...
政务云等保现状及安全资质
阿里云电子政务云平台价格与华北2公共云同等配置价格相同 风险识别 基于大数据、流式计算、机器学习算法，为客户提供决策引擎平台、风险识别API、专家定制建模等多维风控服务，一站式解决企业在用户注册、运营活动、交易、信贷审核等关键...
Hive统一元数据
EMR上可以支持将数据存放在阿里云OSS中，在大数据量的情况下将数据存储在OSS上会大大降低使用的成本，EMR集群主要用来作为计算资源，在计算完成之后可以随时释放，数据在OSS上，同时也不用再考虑元数据迁移的问题。数据共享。使用统一的...
数据权限概述
重要 为了打通阿里云RAM用户与开源大数据用户体系，数据湖权限定义了当RAM用户与Linux或LDAP用户具有相同用户名时，两者作为Owner是等价的，例如Owner=acs:ram:<阿里云账号uid>:user/user_a与Owner=user_a等价。阿里云主账户作为资源Owner...
原理优势
本文介绍专属集群 MyBase 的...更加强大的企业级数据库服务 阿里自研的 AliSQL、Tair 内核和平台提供了企业级数据库能力，具有高稳定、高性能、高可用的特性，同时具有完备的备份恢复、审计等功能，使得提供的数据库服务更快、更稳、更安全。
从自建Redis迁移至阿里云Redis
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将自建Redis迁移至阿里云Redis实例。DTS支持全量数据迁移以及增量数据迁移，同时使用这两种迁移类型可以实现在自建应用不停服的情况下，平滑地完成自建Redis数据库的迁移...
通过临时实例恢复SQL Server数据
如果源或目标数据库是阿里云数据库实例（例如 RDS MySQL、云数据库MongoDB版 等），DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单；如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到...
Web攻击防御方案
方案说明 一般情况下，只需要使用最低配的Web应用防火墙即可防御大部分的低级攻击，但如果是政府部门则有可能会成为黑客的重点目标，所以在采用Web应用防火墙时，我们需要注意利用这个产品的几个特性和优势：防数据泄密，避免因黑客的注入...
新建完整性能评估任务
完成数据迁移后，在数据库切换为 OceanBase 数据库前，您可以进行性能评估。本文为您介绍如何新建性能评估任务。背景信息 性能评估任务包括 完整性能评估、SQL 文件解析 和 SQL 文件回放 三种类型。完整性能评估任务中，包含了 SQL 文件...
客户案例
解决方案 玩物得志基于阿里云DataWorks+MaxCompute框架搭建大数据平台，使用其核心存储、计算等组件、上层可视化及业务查询能力，在开源方案的基础上进行了二次开发。解决方案架构如下。详细案例信息，请参见 玩物得志案例。互联网社交案例...
上海新能源汽车车辆基础数据
客户感言 2019年开始上海市新能源汽车大数据平台从自建Hadoop集群迁移至阿里云Lindorm+DLA Spark产品，有效解决了我们平台存储和计算的横向动态扩容瓶颈，同时借助其产品中间件LTS实现了我们平台数据的冷热分离，有效降低了数据存储成本，...
客户案例
大数据处理能力：随着阿里巴巴集团业务的高速发展，推广营销在商业引流上的重要性越发明显，报表作为营销产品的闭环，其诉求也越发的多样化、个性化，报表数据在近几年的发展中在量级上已经增长到TB甚至数十 TB 的规模。这个时候存储系统的...
EMR Workbench
阿里云EMR Workbench是一个综合性的大数据分析和开发环境，作为阿里云E-MapReduce的一部分，它提供了EMR Notebook和EMR Workflow两个核心功能。通过EMR Workbench，您可以轻松进行数据开发，以及交互式数据分析，并设计复杂的数据处理工作...
什么是数据库备份DBS
DBS支持备份恢复MySQL、SQL Server、PostgreSQL、Oracle等近10种数据源，同时支持阿里云云数据库、阿里云ECS数据库、本地数据中心、其他云厂商等环境，允许通过数据库网关DG私网、专线、VPN网关等网络进行接入，帮助您有效解决备份耗时耗...
数据导入概览
使用DataWorks数据集成同步数据到GDB DataWorks 是阿里云上的一站式大数据智能云研发平台，其中数据集成服务支持导出数据到GDB，您也可以使用平台完成数据计算、筛选、转换等处理再同步到GDB。DataWorks的GDB数据源底层由GdbWriter插件提供...
接入数据库实例
功能说明 DAS支持接入阿里云数据库、阿里云ECS自建数据库、其他自建或其他云厂商数据库（包括本地IDC的自建数据库、其他云上的自建数据库、其他云上的云数据库等）。对于阿里云数据库，创建实例后会自动接入DAS，无需手动接入。功能限制 ...
自建SQL Server通过物理网关迁移上云
如果源或目标数据库是阿里云数据库实例（例如 RDS MySQL、云数据库MongoDB版 等），DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单；如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到...
自建SQL Server通过物理网关迁移上云
如果源或目标数据库是阿里云数据库实例（例如 RDS MySQL、云数据库MongoDB版 等），DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单；如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到...
Github实时数据同步与分析
操作难度 易 所需时间 55分钟 使用的阿里云产品 实时数仓Hologres 云原生大数据计算服务 MaxCompute 专有网络VPC 大数据开发治理平台 DataWorks DataV数据可视化 所需费用 0元 阿里云提供一定额度的资源包供您免费体验，开通后会使用计算...
什么是RDS SQL Server
RDS SQL Server 阿里云关系型数据库RDS（Relational Database Service）支持SQL Server引擎，RDS SQL Server拥有 微软正版的License授权，同时还拥有高可用架构和任意时间点的数据恢复功能，强力支撑各种企业应用。说明 RDS SQL Server的...
接入阿里云数据库实例
本文介绍如何在数据库自治服务DAS中接入阿里云数据库实例。前提条件 目标数据库实例为：RDS MySQL、PolarDB MySQL版、MyBase MySQL RDS PostgreSQL、PolarDB PostgreSQL版 RDS SQL Server、MyBase SQL Server Redis、MyBase Redis PolarDB ...
从自建Redis迁移至MyBase Redis
如果数据库业务量较大或服务器规格较低，可能会加重数据库压力，甚至导致数据库服务不可用。建议您在执行数据迁移前谨慎评估，在业务低峰期执行数据迁移。若目标数据库内存不足，触发数据逐出时，由于 云数据库Redis版 的默认数据逐出策略...
DataWorks On EMR使用说明
背景信息 开源大数据开发平台E-MapReduce（简称EMR），是运行在阿里云平台上的一种大数据处理的系统解决方案。EMR基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理数据。阿里云...
从Oracle迁移应用至阿里云PolarDB全流程指南
数据传输DTS：数据传输服务（Data Transmission Service）DTS支持关系型数据库、NoSQL、大数据（OLAP）等数据源间的数据传输。它是一种集数据迁移、数据订阅及数据实时同步于一体的数据传输服务。数据传输致力于在公共云、混合云场景下，...
创建集群
通过阿里云E-MapReduce（简称EMR），您可以轻松构建和运行Hadoop、Spark、Hive、Presto等开源大数据框架，以进行大规模数据处理和分析等操作。本文为您介绍在EMR on ECS上创建集群的操作步骤和相关配置，帮助您快速搭建和管理大数据集群。...
政务云迁移实践
此外，数据迁移需要考虑数据量，如果到PB级数据量，在线迁移耗时比较长，此时离线迁移就比较合适，闪电立方产品就可以进行大数据量的离线迁移。应用迁移 如果用户的业务比较依赖某个软件，而且这些软件栈比较简单，对平台依赖小，这个时候...
跨阿里云账号迁移RDS实例
如果源或目标数据库是阿里云数据库实例（例如 RDS MySQL、云数据库MongoDB版 等），DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单；如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到...
技术架构
数据传输服务（Data Transmission Service，简称DTS），支持关系型数据库、NoSQL、大数据等数据源，集数据迁移、订阅及实时同步功能于一体，能够解决公共云、混合云场景下，远距离、毫秒级异步数据传输难题。其底层基础设施采用阿里双11...
功能概览
确保客户本地机房出现故障、虚拟机宕机、生产系统数据发生误删、勒索病毒等事故时可以从云上的备份库将虚拟机整机恢复到本地VMware环境、阿里云VMware服务或阿里云ECS，实现业务系统的容灾，保障数据安全性和业务连续性。重要 该功能使用...
从自建Redis迁移至阿里云Redis
如果数据库业务量较大或服务器规格较低，可能会加重数据库压力，甚至导致数据库服务不可用。建议您在执行数据迁移前谨慎评估，在业务低峰期执行数据迁移。若目标数据库内存不足，触发数据逐出时，由于 云数据库Redis版 的默认数据逐出策略...
步骤一：搭建云上专有网络
阿里云加密的数据上行通道可以确保数据安全，同时压缩后的数据流可以确保公网承载较大的数据流。VPN（阿里云VPN网关）：针对每日数据变化量不大，主数据中心需要随时连接阿里云VPC内的业务场景，例如主数据中心与阿里云上部署主从的域...
如何选用安全类产品
入侵检测：大数据驱动，规则引擎结合机器学习算法、关联安全检测模型保障威胁检测能力。必备 5 数据库审计（数据库业务必备）支持5个数据库实例。计策略的要素：where：IP地址、用户名、端口号、数据库类型。who：实例、schema。what：表、...
新建 Kafka 数据源
基于 Kafka 服务提供的安全体系，数据传输在数据加密和用户认证上均有一定的支持，以满足绝大部分安全需求。数据传输支持的 Kafka 认证方式包括：GSSAPI GSSAPI（Generic Security Services Application Program Interface）是通用安全服务...
产品优势
同时数据库网关可以与其他阿里云产品（例如数据传输服务DTS，数据库备份DBS，数据管理DMS）集成使用。安全可靠 无需暴露数据库公网地址，确保用户数据资产的安全和稳定。本地网关启动时，需要在控制台生成一个临时令牌，该令牌会在网关启动...
从自建Redis迁移至Tair实例
如果数据库业务量较大或服务器规格较低，可能会加重数据库压力，甚至导致数据库服务不可用。建议您在执行数据迁移前谨慎评估，在业务低峰期执行数据迁移。如果目标数据库内存不足，触发数据逐出时，由于 云原生内存数据库Tair 的默认数据...
- 产品推荐
- 这些文档可能帮助您