构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
什么是Dataphin
资产安全 数据服务 数据服务为您提供高效、便捷的主题式查询功能及有效的全链路企业内API生命周期托管，真正实现低门槛API开发，帮助您更好地进行数据资产应用以实现价值化。数据服务 告警中心 告警中心是基于Dataphin构建的监控告警平台，...
对象存储OSS
对象存储OSS（Object Storage Service）是阿里云提供的海量、安全、低成本、高持久的云存储服务。其数据设计持久性不低于99.9999999999%（12个9），服务设计可用性不低于99.995%。OSS具有与平台无关的RESTful API接口，您可以在任何应用、...
运营
数据资产下线，根据数据的实际情况不再共享数据资产。资产注册 资产注册功能是数据资源平台资产管理的基础，可快速锁定待管理数据资产的范围。针对支持管理的数据表类型，实现资产信息注册自动化。在工作组中注册存储计算资源后，系统自动...
什么是数据资源平台
阿里云数据资源平台是数据资产定义、加工、管理、服务的全流程平台，提供数据同步、数据查询、数据标准、数据建模、数据加工、质量评估、业务模型构建、资产管理、数据服务等功能，为智能数据应用持续稳定供给全量、标准、干净、智能的数据...
冷热分层存储
为避免配置错误导致冷热分层无法正常工作，OSS会自动创建同时包含以下三种策略的生命周期规则：指定OSS-HDFS的数据存储目录.dlsdata/下携带Key为 transition-storage-class、Value为 IA 标签的数据在1天后转为低频访问存储。指定OSS-HDFS的...
产品系列
通过底层存储的一份全量数据，来支持离线和在线两种场景，避免因数据同步产生的数据一致性和时效性等问题。计算层支持标准接口的多语言可编程计算引擎Spark。同时 湖仓版（3.0）提供离线业务与在线业务的计算资源物理隔离的能力，能实现...
什么是云存储网关CSG
云存储网关（Cloud Storage Gateway：简称CSG）是一...在多个数据中心，通过文件存储服务的方式访问共享文件夹。块网关 通过备份软件备份数据到云上且备份软件支持iSCSI高效传输。将视频流数据通过iSCSI访问方式导入存储卷上，实现云上存储。
成本
共享存储形态 数据库文件存储（DBFS）是阿里云的一款针对数据库场景的云原生共享文件存储服务，目前 AnalyticDB PostgreSQL版 已经和DBFS深度融合、提供了基于DBFS存储介质的产品形态。相对于基于本地存储的产品形态，基于DBFS的版本通过...
常见问题
阿里云是否会将自己的数据存储在日志服务上？如果数据量突然激增，日志服务如何保证服务不受影响？日志服务中的数据如何实现低成本存储？日志服务中的数据可以保存多久？如何开始使用日志服务？如果有需求，如何联系？什么是日志服务？日志...
客户案例
庞大的运营计数会产生海量数据，需做好数据分析，为游戏运营提供更好的数据服务。客户需求 希望优化数据体系结构，解决如下难点、痛点问题：业务团队对全域数据资产无感知，且数据需求响应时间长。组件繁多，运维、开发成本高。昼夜资源...
什么是数据传输服务DTS
数据传输服务DTS（Data Transmission Service）是阿里云提供的实时数据流服务，支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助您构建...
ECS自建数据库的灾备与安全
数据库备份DBS支持MySQL、SQL Server、PostgreSQL等阿里云数据库，以及ECS上的自建数据库、线下数据库、其他云数据库进行备份恢复操作。本文以ECS MySQL为例，介绍如何通过DBS实现ECS数据库的灾备与安全，满足实时备份、快速恢复、异地灾备...
PolarDB-X 1.0同步至DataHub
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将 PolarDB-X 1.0 同步至 阿里云流式数据服务DataHub。前提条件 已开通 DataHub 服务，并且已创建用作接收同步数据的Project。具体的操作请参见 快速入门、Project操作。...
概述
随着业务的快速发展，企业数据呈几何倍增长，数据量庞大、复杂、各类数据间标准不一致，往往会出现数据难以管理的现象。DataWorks智能数据建模服务，将无序、杂乱、繁琐、庞大且难以管理的数据，进行结构化有序的管理。使企业中的数据产生...
自建Oracle迁移至DataHub
阿里云流式数据服务DataHub 是流式数据（Streaming Data）的处理平台，提供对流式数据的发布、订阅和分发功能，让您可以轻松构建基于流式数据的分析和应用。本文介绍如何使用数据传输服务DTS（Data Transmission Service）将自建Oracle迁移...
RDS SQL Server迁移至DataHub
数据传输服务DTS（Data Transmission Service）支持将 RDS SQL Server 迁移至 阿里云流式数据服务DataHub。前提条件 确认DTS是否支持该版本的 RDS SQL Server 实例。支持的版本，请参见 迁移方案概览。已开通 DataHub 服务，并且已创建用作...
数据归档概述
当线上数据库中的历史数据（访问率很低的数据）越来越多，占用的存储越来越大，以至于会影响数据库的查询性能与业务运转，此时您可以使用 数据管理DMS 的数据归档功能，周期性地将指定表的数据归档至其他数据库或存储服务中。同时，该功能...
新功能发布记录
专属存储中的数据转存至阿里云对象存储OSS 退订服务 新增 DMS 支持手动退订 数据管理-新版 包年包月的服务，您可通过DMS的订单释放入口，或直接在用户中心进行退订。退款说明 07月 功能名称 变更类型 功能描述 相关文档 设置审批流程 新增 ...
集成与开发概览
功能简介 数据集成与开发功能模块支持多种计算、存储引擎，支持结构化、半结构化、非结构化数据的实时集成、离线集成、开发、服务，能够满足企业各类数据加工、集成、开发、服务需求。您可以通过流批一体的数据集成对在线数据进行入仓、...
RDS SQL Server同步至DataHub
数据传输服务DTS（Data Transmission Service）支持将 RDS SQL Server 同步至 阿里云流式数据服务DataHub。前提条件 已创建源 RDS SQL Server 实例，创建方式请参见 快速创建RDS SQL Server实例。重要 目前源RDS SQL Server支持的版本，请...
基本概念
栅格数据（Raster Data）是将地理空间分割成有规律的网格，每一个网格称为一个单元（像元或像素），并在各单元上赋予相应的属性值来表示实体的一种数据形式。栅格数据通常有两种类型的栅格数据：专题数据和影像数据。专题数据：每个栅格像...
从RDS MySQL同步至DataHub
阿里云流式数据服务DataHub是流式数据（Streaming Data）的处理平台，提供对流式数据的发布、订阅和分发功能，让您可以轻松构建基于流式数据的分析和应用。通过数据传输服务DTS（Data Transmission Service），您可以将 RDS MySQL 或RDS ...
规划工作空间
数据服务 各工作空间之间的数据服务是 部分隔离 的。各工作空间会共享服务分组的定义，但是注册或发布的服务API仅在当前工作空间可见。数据保护伞 各工作空间之间的数据保护伞是 全局共享 的。所有工作空间共享一套数据安全策略和敏感数据...
使用SDK示例代码消费订阅数据
完成数据订阅通道的配置后，您可以使用DTS提供的SDK示例代码来订阅数据变更信息，本文介绍该示例代码的使用说明。操作步骤 重要 若数据源是PolarDB-X 1.0或DMS LogicDB，消费订阅数据的操作步骤请参见 使用SDK示例代码消费PolarDB-X 1.0...
什么是文件存储NAS
阿里云文件存储NAS（Apsara File Storage NAS）是面向阿里云ECS实例、E-HPC、容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。产品概述 NAS基于POSIX文件接口，天然适配原生操作系统...
公共规范
中间层CDM需要积极了解应用层数据的建设需求，将公用的数据沉淀到公共层，为其他层提供数据服务。应用层需要积极配合中间层CDM持续改造公共层。必须避免出现过度的引用ODS层、不合理的数据复制以及子集合冗余。ODS层数据不能被应用层任务...
通过日志服务迁移日志数据至MaxCompute
说明 日志服务数据的一个字段最多允许映射到一个MaxCompute表的列（数据列或分区列），不支持字段冗余，同一个字段名第二次使用时其投递的值为null，如果null出现在分区列会导致数据无法被投递。MaxCompute分区列 按顺序左边填写与...
基本概念
ClickHouse集群 ClickHouse集群包含若干单位计算资源和存储资源，能够提供ClickHouse引擎数据存储和分析服务的PAAS服务。Worker节点 Worker节点是ClickHouse集群内部的副本节点，参与引擎计算的实际资源。CCU CCU（ClickHouse Compute Unit...
挂载与卸载
本文主要说明阿里云数据库文件存储服务DBFS的挂载与卸载功能。DBFS服务挂载步骤如下：进入“数据库文件存储控制台”->“数据库文件系统列表”。单击“挂载”按钮，弹出信息输入框。填写DBFS服务挂载信息，单击“确定”。挂载成功后，执行...
规格及选型
用户为互联网SaaS客户，需要建立数据中台，涉及多数据源包括RDS、Flink、OSS等，期待在平台上完成数据的ETL流程，实现多源处理以及分析侧不同场景的混合负载支持，需要高稳定性保证，同时平台对接数据应用支持报表和企业级数据服务。...
发展历程
MaxCompute登上Forrester《2018年一季度云端数据仓库》大数据服务榜单。Gartner发布了《2017年分析型数据管理解决方案（DMSA）魔力象限》报告，阿里云作为云服务商成功冲进Gartner魔力象限。Forrester：CloudData Warehouse Q4 进入第三...
数据膨胀诊断
AnalyticDB PostgreSQL版 提供的智能诊断数据膨胀功能，可以定期自动诊断数据库内的所有表，并生成诊断信息表。您可以通过诊断信息表，查看表的膨胀情况并获得相应的处理建议（如执行VACUUM或VACUUM FULL操作）。注意事项 智能诊断数据膨胀...
按量付费
本文为您介绍阿里云数据库文件存储服务DBFS按量付费的计算详情。结算周期 数据库文件存储每一个小时整点结算一次费用，并从账户余额中扣除实际消费金额，结算完毕后进入新的结算周期。例如，当前时间是 10:30:00，结算的是 9:00:00～10:00:...
产品架构
云原生数据库PolarDB 基于Cloud Native设计理念，既融合了商业数据库稳定可靠、高性能、可扩展的特征，又具有开源云数据库简单开放、快速迭代的优势。本文将介绍 PolarDB 的产品架构及特点。图 1.产品架构图 一写多读 PolarDB 采用分布式...
同步时源库为PolarDB MySQL版的注意事项及限制
X 1.0 PolarDB MySQL版同步至云原生数据仓库 AnalyticDB MySQL 版 2.0 PolarDB MySQL版同步至云原生数据仓库 AnalyticDB MySQL 版 3.0 PolarDB MySQL版同步至阿里云流式数据服务DataHub PolarDB MySQL版同步至Elasticsearch PolarDB ...
产品架构
云原生数据库PolarDB 基于Cloud Native设计理念，既融合了商业数据库稳定可靠、高性能、可扩展的特征，又具有开源云数据库简单开放、快速迭代的优势。本文将介绍 PolarDB 的产品架构及特点。图 1.产品架构图 一写多读 PolarDB 采用分布式...
通过日志服务导入至数仓版
创建投递任务 您可以通过日志服务数据处理模块中的导出功能，将Logstore中采集到的日志投递到 AnalyticDB MySQL 数仓版（3.0）。登录 日志服务控制台。在Project列表区域，单击目标Project。在 日志存储>日志库 页签中，依次展开目标...
环境准备
适用于海量账单、IM 消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。更多信息，请参见 什么是表格存储。表格存储通道服务（Tunnel Service）是...
什么是PolarDB MySQL企业版
PolarDB MySQL版 的企业版基于云原生架构、计算存储分离、软硬件一体化设计，为用户提供具备超高弹性和性能、高可用和高可靠保障、高性价比的数据库服务。产品架构 云原生数据库PolarDB 基于Cloud Native设计理念，既融合了商业数据库稳定...
- 产品推荐
- 这些文档可能帮助您