产品简介
适用场景 如果您在大数据业务场景中遇到如下问题，可以通过阿里云大数据专家获取专属服务：受限于传统数据工作开展方式及组织管理模式，数字化转型中遇难到大数据各方面瓶颈；根据业务发展，难以从全局构建稳定的、变化的、集成的大数据...
最佳实践概览
场景 文档链接 Elasticsearch迁移 迁移方案选取指南 阿里云Elasticsearch间数据迁移 通过reindex迁移数据 基于reindex实现低版本多type数据迁移 自建Elasticsearch数据迁移 通过OSS将自建Elasticsearch数据迁移至阿里云 通过阿里云Logstash...
集群管理概述
类别 相关文档 功能描述 冷热分离与生命周期管理 通过索引生命周期管理Heartbeat数据 对于时间序列数据，会随着时间的积累越来越大，您可以通过索引生命周期管理ILM（Index Lifecycle Management）定期将数据滚动到新索引，防止因数据过大...
通过阿里云Milvus与PAI搭建高效的检索增强生成（RAG）...
然而，在广泛应用大语言模型（LLM）的过程中，一些固有局限性逐渐显现：领域知识局限：大语言模型通常基于大规模通用数据集训练而成，这意味着它们在处理专业垂直领域的具体应用时可能缺乏针对性和深度。信息更新滞后：由于模型训练所依赖...
数据类云产品专家服务
包括但不限于如下场景：1、通过阿里云数据同步工具进行的不同环境的数据迁移。2、数据库多活方案、异地容灾方案的支持。分布式数据库架构改造 分析客户数据库的现状、架构、配置、使用以及运行指标，评估数据库的运行效率、健壮性、稳定性...
DataWorks交流钉钉群
DataWorks作为阿里云大数据平台操作系统，对接各种大数据计算引擎，以all in one box的方式提供专业高效、安全可靠的全域智能大数据平台，高效率完成数据全链路研发流程，建设企业数据治理体系，同时提供优质高效的交流服务，本文为您介绍...
技术架构选型
本教程中使用阿里云大数据产品Dataphin配合MaxCompute，完成整体的数据建模和研发流程。完整的技术架构如下图所示。其中，Dataphin的数据集成及同步负责完成源业务系统数据引入。MaxCompute作为整个大数据开发过程中的离线计算引擎。...
功能概览
1.4 生态融合 系出飞天，与阿里云大数据系统深度整合，无缝对接MaxCompute、实时计算、交互式分析等产品，打通整个大数据体系。2.产品功能 2.1 数据接入 提供多种SDK、API和Flume、Logstash等第三方插件，让您高效便捷的把数据接入到数据...
同步数据
分析型数据库MySQL版支持多种数据加载方式，包括但不限于：通过阿里云数据传输服务DTS将MySQL/DRDS中的数据导入分析型数据库MySQL版，其中MySQL可为RDS for MySQL、其他云厂商或线上IDC的自建MySQL以及ECS自建MySQL。详细操作步骤请参见 ...
客户案例
解决方案 通过阿里云数据传输服务DTS和数据库网关DG帮助百姓网实现私网数据库的跨云迁移。数据库无需开通公网地址，只需安装DG agent，通过DG agent反向访问能力，借助压缩、多并发等能力，实现长距离数据迁移。客户价值 百姓网通过数据库...
客户案例
解决方案 通过阿里云数据传输服务DTS和数据库网关DG帮助百姓网实现私网数据库的跨云迁移。数据库无需开通公网地址，只需安装DG agent，通过DG agent反向访问能力，借助压缩、多并发等能力，实现长距离数据迁移。客户价值 百姓网通过数据库...
数据源配置常见问题
如果您的API使用了DataV暂不支持的数据源或接口，例如调用函数计算等，此类API也可以通过阿里云API网关中的数据源来获取数据。数据库数据源配置时报timeout，该如何处理？确认您是否已经完成 数据库白名单的配置。如果您的数据源为阿里云...
数据源配置常见问题
如果您的API使用了DataV暂不支持的数据源或接口，例如调用函数计算等，此类API也可以通过阿里云API网关中的数据源来获取数据。数据库数据源配置时报timeout，该如何处理？确认您是否已经完成 数据库白名单的配置。如果您的数据源为阿里云...
友盟数据分析
您可以通过阿里云数据湖分析DLA的数据订阅功能对原始明细log数据进行查询和分析。开通友盟+DLA的组合方案 登录 友盟+数据银行控制台，在 未开通服务 页面的 Data Lake Analytics 区域，单击 立即开通。输入需要订阅数据的友盟账号和密码，...
使用日志服务收集Presto作业日志
本文为您介绍如何通过阿里云日志服务SLS收集Presto作业的日志。背景信息 由于EMR on ACK使用虚拟容器运行作业，作业运行完成后，相关的容器会被销毁以释放集群资源。对于弹性伸缩或分时调度，相关的容器资源也会被销毁。因此，当EMR on ACK...
常见问题
1.售前咨询渠道 尊敬的“准”大数据专家服务用户您好：如果您准备购买阿里云大数据专家服务，但是遇到如服务范围、规格、服务选择等售前方面的问题，您可以通过钉钉与我们联系，您将“当面”获得阿里云大数据专家咨询专家的建议。...
使用日志服务收集Flink作业日志
本文为您介绍如何通过阿里云日志服务收集结束运行的Flink作业的日志。前提条件 已在E-MapReduce on ACK控制台创建Flink集群，详情请参见 快速入门。已开通阿里云日志服务SLS，详情请参见 快速入门。操作步骤 启用日志服务组件Logtail，详情...
数据迁移方案概览
通过使用阿里云 数据传输服务（DTS），您可以实现PolarDB的结构迁移、全量迁移等。数据迁移 使用场景 文档链接 从RDS迁移至PolarDB 从RDS PostgreSQL迁移至PolarDB PostgreSQL版 从自建数据库迁移至PolarDB 从自建PostgreSQL迁移至PolarDB ...
什么是DataWorks
阿里云上发展历程 2015年DataWorks正式上云，将多年沉淀的大数据建设方法论产品化输出，服务阿里云上客户，通过不断迭代的产品能力，DataWorks正在与各行各业的客户与合作伙伴一起，通过全链路数据治理，管得好数据、用得好数据，让数据从...
数据迁移方案概览
通过使用阿里云 数据传输服务（DTS），您可以实现SQL Server数据库的结构迁移和全量迁移。下表列出了RDS支持的上云、迁云、数据导出场景以及相关的操作链接：使用场景 相关操作 将本地数据库迁移到云数据库 SQL Server实例级别迁移上云 自...
跨阿里云账号迁移RDS实例
通过公网将数据迁移出阿里云时将收费，详情请参见 计费概述。增量数据迁移 收费，详情请参见 计费概述。迁移账号权限要求 RDS MySQL间的迁移 数据库 库表结构迁移 全量迁移 增量迁移 源 RDS MySQL 实例 SELECT权限 SELECT权限 读写权限 ...
PolarDB MySQL版迁移至Kafka
通过公网将数据迁移出阿里云时将收费，详情请参见 计费概述。增量数据迁移 收费，详情请参见 计费概述。迁移类型说明 库表结构迁移 DTS将源库中迁移对象的结构定义迁移到目标库。全量迁移 DTS将源库中迁移对象的存量数据，全部迁移到目标库...
计算设置概述
设置Dataphin实例的计算引擎为TDH或ArgoDB 星环TDH 6.x Transwarp Data Hub（TDH)是星环大数据平台 实时计算引擎 阿里云实时计算Flink 阿里云新一代计算引擎Flink，支持实时计算，具有高吞吐低延迟等优势，同时也支持离线计算与调度。...
多账号统一管理
通过使用阿里云 数据安全中心DSC（Data Security Center）多账号统一管理功能，企业能够将其管理的多个阿里云账号中的数据资产、数据对象和审计日志进行集中管理。便于企业有效地执行数据安全管理任务，如自动发现敏感数据、数据分类分级、...
跨账号读取OSS数据
前提条件 通过阿里云B账号开通OSS服务，并上传测试数据，详情请参见 开通OSS服务。本示例在OSS Bucket的 customer 目录中上传测试数据 customer.tbl。通过阿里云账号A完成开通DLA服务等准备工作。步骤一：新建RAM角色 使用阿里云账号B登录 ...
聚合支付方案
阿里云从业务扩展性、数据流动性、服务高可用三方面入手，通过多款云数据库产品为利楚扫呗制定聚合支付方案，解决利楚扫呗在业务扩展期遇到的数据存储空间不足、读写性能下降以及大数据分析空缺等问题。业务痛点 武汉利楚商务服务有限公司...
支持的云服务
基于MaxCompute的数据仓库能力，您可以与阿里云其他产品集成，实现可视化开发、数据存储、数据迁移、机器学习、业务决策等能力，构建满足实际业务需求的解决方案。本文为您介绍支持与MaxCompute集成的各阿里云产品信息。MaxCompute支持集成...
什么是阿里云Cloudera CDP
企业数据云平台Cloudera Data Platform（简称阿里云CDP），是阿里云和Cloudera联合打造的阿里云上的大数据平台。Cloudera CDP企业数据云平台 Cloudera企业数据云是社区版CDH的全新商业化升级产品，是阿里云和Cloudera联合打造阿里云上的大...
教程概述
本文档通过一个案例，演示了如何基于阿里云产品和服务实现设备数据在大屏上展示。本案例的原理如下：在设备端模拟两个字段，通过MQTT协议向阿里云物联网平台设备（高级版）发送数据。物联网平台接收到数据后通过规则引擎转发至DataHub。在...
快速入门
阿里云数据库RDS MySQL基于阿里巴巴的MySQL源码分支，经过双11高并发、大数据量的考验，拥有优良的性能和吞吐量。此外，阿里云数据库MySQL版还拥有经过优化的 读写分离、数据库代理、智能调优 等高级功能。当前RDS MySQL支持5.5、5.6、5.7...
跨阿里云账号实现数据传输
数据库实例 阿里云数据库 自建数据库 源库 RDS MySQL、RDS MariaDB、RDS PostgreSQL、PolarDB-X 1.0、PolarDB-X 2.0、PolarDB PostgreSQL版、PolarDB PostgreSQL版（兼容Oracle）、PolarDB MySQL版、云数据库Redis、云原生内存数据库Tair、...
云数据库录入
本文介绍如何通过数据管理DMS录入阿里云数据库。前提条件 支持录入的云数据库类型，请参见 支持的云数据库。系统角色为DBA或管理员。查看系统角色的操作，请参见 查看我的系统角色。已在云数据库的白名单中添加DMS的服务器访问地址。详细...
教程概述
本案例使用阿里云DTS将您的增量数据同步到DataHub上，再通过阿里云实时计算Flink订阅DataHub的数据进行实时计算，并将结果插入到RDS数据库中，最终通过DataV大屏进行展示。说明 本案例仅提供具体的操作指导，业务场景和数据与实际情况会有...
迁移方案选取指南
通过阿里云Logstash将自建Elasticsearch数据迁移至阿里云 基于reindex实现低版本多type数据迁移 reindex 源数据量较小，且对迁移速度要求不高的场景。仅对查询结果（使用查询语句在Kibana中查询出来的结果）进行迁移的场景。低版本自建ES...
计费项
入云流量：不收费，例如将本地数据库，通过公网迁移至ECS上的自建数据库或阿里云数据库。阿里云间流量：当目标数据库实例的 接入方式 为 公网IP 时收费，其余情况不收费。数据同步实例 链路配置费用 按量付费（含Serverless）在 增量数据...
大数据AI公共数据集分析
本教程通过DataWorks，联合云原生大数据计算服务MaxCompute，使用大数据AI公共数据集（淘宝、飞猪、阿里音乐、Github、TPC等公共数据），指导您如何快速进行大数据分析，快速熟悉DataWorks的操作界面与最基础的数据分析能力。DataWorks的更...
创建MaxCompute数据源
进行数据同步：DataWorks的数据集成模块为您提供读取和写入数据至MaxCompute的能力，您可将其他数据源的数据同步至当前MaxCompute数据源，或将当前MaxCompute数据源的数据同步至其他数据源。同时，可根据需要选择离线同步、实时同步、同步...
便宜易用
云数据库RDS便宜易用，具有灵活计费、按需变配、即开即用等优点。灵活计费 RDS提供灵活的...您也可以通过阿里云控制台或者API自行完成数据库的增加、删除、重启、备份、恢复等管理操作。开始使用RDS 快速入门 学习路径图 相关文档 RDS产品选型
通过DMS连接StarRocks实例
您只需在DMS控制台录入StarRocks实例的相关信息，即可轻松实现通过图形化的Web界面对StarRocks实例的高效管控与深度运维，极大提升数据管理体验及操作效率。本文为您介绍如何通过DMS连接StarRocks实例。背景信息 DMS是由阿里云提供的数据库...
发展历程
深度参与和推动全球大数据领域标准化建设 MaxCompute代表阿里巴巴计算平台，成为国际TPC（Transaction Processing Performance Council）委员会大数据评测标准BigBench的委员会委员，是中国担任此国际性能标准化测试组织委员的唯一企业。...
- 产品推荐
- 这些文档可能帮助您