什么是DataWorks
从2009年起，DataWorks不断沉淀阿里巴巴大数据建设方法论，支撑数据中台建设，同时与数万名政务、央国企、金融、零售、互联网、能源、制造、工业等行业的客户携手，不断提升数据应用效率，助力产业数字化升级。产品架构 DataWorks十多年...
数据服务
背景信息 数据服务提供了数据中台建设过程中的数据服务化能力，面向数据开发者提供覆盖各个加工阶段统一体验的、便捷的数据查询转服务、服务管理、服务运维能力；面向数据资产管理者提供服务的统计分析、服务用量统计分析，实现数据中台...
功能简介
在数据中台建设过程中，搭建核心处理平台，并根据相关标准要求，将源数据或治理后的数据，按照“全面、高效、统筹”的共享原则，“低延时”、“精准化”地传递给用户，方便更多应用消费数据，实现数据价值。协同管控各种组织机构，为智慧化...
空间数据（邀测中）
入库任务 支持将Shapefile、GeoJSON和CSV文件类矢量数据添加到系统默认的空间数据库或者指定的PostGIS、Ganos数据库，方便对空间数据库进行空间检索、数据质检、血缘记录，打通数据...，使得空间数据被用于数仓建设、标签管理等数据中台任务...
功能简介
入库任务 支持将Shapefile、GeoJSON和CSV文件类矢量数据添加到系统默认的空间数据库或者指定的PostGIS、Ganos数据库，方便对空间数据库进行空间检索、数据质检、血缘记录，打通数据...，使得空间数据被用于数仓建设、标签管理等数据中台任务...
统一服务
在数据中台建设过程中，搭建核心处理平台，并根据相关标准要求，将源数据或治理后的数据，按照“全面、高效、统筹”的共享原则，“低延时”、“精准化”的传递给用户，方便更多应用消费数据，实现数据价值。协同管控各种组织机构，为智慧化...
功能简介
在数据中台建设过程中，搭建核心处理平台，并根据相关标准要求，将源数据或治理后的数据，按照“全面、高效、统筹”的共享原则，“低延时”、“精准化”地传递给用户，方便更多应用消费数据，实现数据价值。协同管控各种组织机构，为智慧化...
准备工作
开通企业数据智能平台 企业数据智能平台默认为关闭状态，使用前需要前往 AnalyticDB PostgreSQL版 控制台开通。登录 云原生数据仓库AnalyticDB PostgreSQL版控制台。在控制台左上角，选择实例所在地域。...单击 开通数据中台。
大数据上云及巡检服务内容说明
迁移实施基础服务之数据迁移服务范围 基于迁移规划产出的方案，为客户大基于迁移规划产出的方案，为客户大数据平台数据迁移过程中提供工具部署使用培训以及技术支持，问题解决，保障实施过程顺利进行，并配合完成数据迁移的割接。...
客户案例
基于飞天大数据平台产品DataWorks+MaxCompute大大提高了数据业务的开发效率，构建大润发的数据中台体系。新金融行业：某互联网金融公司湖仓一体案例 客户架构如下。客户简介 公司的第一代数据湖是基于Hadoop+OSS搭建的，同时引入的数据中台...
在注册集群中配置容器安全策略（新版）
近7天策略实施记录，当前页面表格中会默认展示7天内最近100条的拦截或告警日志，如果您想查看更多审计日志，可以单击 近7天策略实施记录 后的 图标，并单击悬浮窗口中的日志服务链接在SLS日志服务控制台指定的Logstore中查看全部日志。...
规格及选型
案例七：大型互联网企业 用户为大型互联网企业，各业务线具有各自独立的业务中台，企业存在统一的数据中台，希望可以快速部署独立资源支持不同的业务负载，且未来不会产生数据孤岛。建议：使用 AnalyticDB PostgreSQL版 Serverless版本，...
基于SLS+OSS+DLA构建海量、低成本日志分析方案
实施步骤 假设您的应用服务部署在ECS集群上，该集群每台机器上的应用服务都会产生日志数据，并通过SLS投递日志数据到OSS。通过DLA的元信息发现功能，自动发现SLS投递到OSS的日志数据，然后进行数据查询和分析。本文档将以此为例，为您介绍...
保险行业解决方案与案例
也是信创工作中的重点和难点，因此该公司以数据库替代作为信创工作的切入点和突破口，计划用一年时间完成所有系统的数据库信创替代，根据实际情况逐步分步实施，利用 PolarDB PostgreSQL版（兼容Oracle）充分发挥高度兼容原生产数据库的...
迁云服务内容说明
协助进行应用部署与安装调试工作，解决过程中的问题 协助进行同构或异构数据库迁移（不含Oracle、DB2等商业数据库）、存储数据迁移工作，解决迁移过程中的问题 协助进行应用割接方案设计，帮助客户实现应用平滑、快速上云 整体业务规模，...
混合云应用双活容灾最佳实践
步骤五：切换数据库进行恢复 在北京单元的数据库故障的情况下，可以通过MSHA数据库切换功能，将应用访问的Redis或MySQL的连接切换至杭州单元的数据库（切换过程中会等待数据同步追平，期间会短暂禁写）。预期效果：应用连接的数据库切换到...
产品优势
部署时间成本低：云盒在工厂完成了预安装，由阿里云运送到您的机房进行安装部署，只需要通电、通网，并做简单调试，您就能在公共云控制台上使用云盒内的计算和存储资源，可以大幅缩短现场实施时间和应用上线时间。易用性 提供与公共云一致...
灾备规划
如果您的AD服务器是集中部署在一个数据中心，可能发生同一时间离线的情况，建议您：用混合云灾备一体机保护AD服务器，在云下发生故障时首先恢复这台AD服务器。在云上VPC里部署一个从AD服务器，与云下的主AD服务器保持连接。云下发生故障时...
部署及微调Llama-3系列模型
验证数据集的OSS或是本地路径>"#}#)#使用默认数据提交训练任务 est.fit(inputs=training_inputs)#查看训练产出模型的OSS路径 print(est.model_data())如果需要将微调训练完的模型部署为在线服务，可以在同一页面的 模型部署 卡片中选择...
企业版和标准版功能对比
本文将为您介绍如何实施多可用区部署以及如何更换主可用区。支持 支持 热备切换 PolarDB 提供了热备切换功能，您可事先为集群中的只读节点开启热备功能，从而在主备切换的过程中实现快速切换和事务保持。支持 不支持 高安全 账号管理 支持...
智能边缘一体机产品介绍
一、产品概要 边缘应用是指部署在用户现场的应用，常见于一些用户对数据处理实时性、安全性和运行可靠性要求比较高的场景下。如门禁系统、楼宇自动化BA系统、视频算法应用等。EdgeBox是一种现场应用部署模式的变革，通过Kubernetes技术，将...
使用ossimport迁移数据
ossimport支持将任意地域的本地存储数据、第三方存储数据、对象存储OSS数据迁移至任意地域的OSS中。本文介绍如何使用ossimport将数据从第三方存储迁移到OSS。背景信息 某用户的数据存储于腾讯云COS广州（华南）区域，数据大小约500TB。现...
多可用区部署
多可用区架构 云原生多模数据库 Lindorm 支持多可用区部署，Lindorm实例宽表的Partition会在每个可用区中存在一个独立的副本，同时日志WAL会存储至底层的可用区C云原生分布式存储Lindorm DFS中。如果可用区A完全不可用，可用区B通过可用区C...
Hadoop集群迁移至DataLake集群
背景信息 E-MapReduce（简称EMR）新版控制台是EMR发布的下一代云原生开源大数据平台，为用户提供全新平台体验、全新开发平台、全新资源形态和全新分析场景。新版控制台的功能特点，详情请参见 EMR新版控制台上线公告。EMR on ECS作为EMR...
应用上云方案设计
SAP HANA 同可用区高可用部署指南 SAP HANA Scale-Out 部署指南 ECS Metrics Collector for SAP部署指南 SAP系统云盘扩容指南 SAP系统高可用环境维护指南 数据上云方案 数据上云架构设计 数据在同一业务库中采用多租户隔离机制；...
创建主实例
图数据库GDB是一种用于处理高度互连数据集场景（例如社交网络、实施图谱）的在线数据库服务。本文介绍创建GDB实例的方法。前提条件 已注册阿里云账号。注册流程请参见 注册阿里云账号。如果您使用RAM账号购买GDB实例，您需要确保已拥有阿里...
SAP HANA 部署指南
单节点架构 本文档示例的单节点体系架构的 SAP HANA 部署中，您将使用到以下的组件：SAP HANA 数据库主节点的 ECS 实例 ecs.r5.16xlarge，包括：64个 vCPU，512GB 内存，数据卷为数据量大于1.5 TB 的 ESSD 云盘，日志卷和 HANA 共享卷均为...
安装Agent
如果您的应用和数据库部署在同一台服务器中，您必须将 loopback 的值修改为 1。按 Esc 键，输入:wq 保存并退出。执行./install.sh 命令，安装并启用Agent。完成授权验证。返回数据库审计系统，在 系统管理>Agent管理>Agent安装 页签的 下载...
产品优势
产品功能全 功能涵盖数据传输、开发、生产、治理、安全全领域，每个领域深度覆盖大数据全生命周期，轻松帮助企业应对在搭建数仓、搭建数据中台、数字化转型项目中遇到的难题。支持复杂网络环境、常见数据源的数据同步上云以及实时、历史...
DataWorks数据服务对接DataV最佳实践
DataV通过与DataWorks数据服务的对接，通过交互式分析Hologres连接DataWorks数据服务开发并生成API，快速在DataV中调用API并展现MaxCompute的数据分析结果。数据服务对接DataV产生背景 MaxCompute是阿里巴巴集团自主研究的快速、完全托管的...
选型配置说明
一个集群中，至少部署3台Core节点，节点的选型主要取决于集群的数据量：当HDFS的数据量大于60TB，建议选择本地盘机型（ecs.d1族系机型）。HDFS的数据量小于60TB，可以考虑高效云盘和SSD云盘。Data-Service节点的选型 Data-Service节点主要...
EMR Studio概述
EMR Studio是E-MapReduce提供的开源大数据开发套件，包含Apache Zeppelin、Jupyter Notebook和Apache Airflow等开源组件。能够无缝关联EMR集群（EMR on ECS和EMR on ACK）的计算引擎提交任务，并提供了交互式开发、任务调度和任务监控等...
发展历程
关键性里程碑 2009年9月，ODPS（即现在的MaxCompute）大数据平台飞天项目正式启动。2010年10月，阿里巴巴集团自主研发的第一代云计算平台稳定运行。2013年8月，平台的单集群规模已达到5000台。2014年7月，平台开始对外提供服务，完全替换...
手动添加数据源
您可以通过 数据库备份DBS 的手动添加数据源功能，将不同环境的数据库添加至 数据库备份DBS 中，便于后续对数据源进行管理与备份。费用说明 添加数据源操作不会产生费用，只有在添加数据源后开启备份才会产生费用。如何开启备份，请参见 ...
重新部署本地盘实例
本文介绍了如何通过ECS管理控制台重新部署一台大数据型或本地SSD型ECS实例（不包含i4p、d3c），通过重新部署，ECS实例会迁移到其他宿主机。前提条件 本文步骤仅适用于收到了本地盘实例系统事件的ECS实例。在重新部署本地盘实例前，请提前...
清除数据
您可以在控制台清除 云原生内存数据库Tair 实例中的所有过期数据或所有数据。操作步骤 说明 在 参数设置 中禁用 FLUSHALL 命令不会影响控制台中 清除数据 功能。访问 Tair实例列表，在上方选择地域，然后单击目标实例ID。在 实例信息 页面...
清除数据
您可以在控制台清除 云数据库 Redis 版 实例中的所有过期数据或所有数据。操作步骤 说明 在 参数设置 中禁用 FLUSHALL 命令不会影响控制台中 清除数据 功能。访问 Redis实例列表，在上方选择地域，然后单击目标实例ID。在 实例信息 页面，...
备份与恢复
克隆实例 通过克隆实例的功能，您可以根据备份文件克隆出一个新的包年包月或者按量付费实例，复杂的数据库开发部署操作采用一键式的图形化界面搞定，极大的提高了工作效率。登录 Memcache 管理控制台，定位目标实例。单击实例 ID 或者管理...
功能简介
AnalyticDB PostgreSQL版 的企业数据智能平台是数据资产定义、加工、管理、服务的全流程平台，提供数据同步、数据查询、数据建模、数据开发、质量评估、资产管理等功能，为智能数据应用持续稳定供给全量、标准、干净、智能的数据资源。...
产品概述
什么是E-MapReduce 开源大数据开发平台E-MapReduce（简称EMR），是运行在阿里云平台上的一种大数据处理的系统解决方案。EMR基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理...
- 产品推荐
- 这些文档可能帮助您