产品概述
产品描述 Dataphin是集产品、技术、方法论于一体的智能大数据平台建设引擎，为您提供数据引入、规范定义、建模研发、资产管理、数据服务等全链路智能数据建设及治理服务。功能 描述 Dataphin全托管 全托管又称公共云多租户模式，只需购买...
产品概述
在 PolarDB PostgreSQL版 集群中开启并使用该功能，您可以对数据库表中的敏感数据列进行加密，这些列中的敏感数据将以密文进行传输、计算和存储。背景信息 随着国家对数据安全和个人敏感信息的加强监管，原子化的数据安全能力已无法满足...
功能特性
基础版：适用于中小型企业用户的更专业运维体验需求（50~500混合资产），提供更细粒度的运维管控能力，例如客户端运维、细粒度运维用户访问及行为授权、风险命令自动拦截、高危命令运维审批、实时运维监控阻断，用户支持RAM、AD或LDAP自建...
什么是云数据库ClickHouse
节点和节点完全对等，每一个节点都可以承载查询请求和写入请求，以及后台数据的计算和操作。每个 云数据库ClickHouse 社区兼容版集群包含1个或多个分片（Shard），每个分片内部包含1个或多个副本（Replica）。所有节点都部署在阿里云弹性...
产品概述
在RDS PostgreSQL实例中开启并使用该功能，您可以对数据库表中的敏感数据列进行加密，这些列中的敏感数据将以密文进行传输、计算和存储。背景 随着国家对数据安全和个人敏感信息的加强监管，原子化的数据安全能力无法满足监管要求，国家...
功能特性
BSP支持计算数据落盘，适用于计算量大，吞吐高的复杂场景。XIHE BSP SQL开发 Spark引擎 Spark开发 完全兼容开源Spark，且AnalyticDB for MySQL Spark提供了更好的性能和更低的资源成本。Spark计算引擎 Spark运维 完全兼容开源Spark，...
产品概述
低成本 计算存储分离架构下，每增加一个只读节点只收取计算资源的费用，而传统的备节点或只读节点同时包含计算和存储资源，每增加一个节点都需要支付相应的存储费用。分钟级扩缩容 计算存储分离的架构配合容器虚拟化和共享存储技术，使得...
Iceberg概述
您可以借助Iceberg快速地在HDFS或者阿里云OSS上构建自己的数据湖存储服务，并借助开源大数据生态的Spark、Flink、Hive和Presto等计算引擎来实现数据湖的分析。核心能力 Apache Iceberg设计初衷是为了解决Hive数仓上云的问题，经过多年迭代...
图扑案例
业务要求与挑战 5G、云计算、边缘计算等智能、互联技术的快速发展，推动了工业物联网IIoT场景下各种软件、硬件传感器数量激增，与之对应的采集数据量和数据类型快速增长，导致数据存储、检索难度更大。现有解决方案中，通常依赖自建单...
受众与核心能力
DataWorks赋予用户仅通过单一平台，即可实现数据传输、数据计算、数据治理、数据分享的各类复杂组合场景的能力。同时，DataWorks持续打造符合企业级数仓、数据中台构建要求的功能模块，为企业业务的数字化转型提供支持。产品受众 从事数据...
Napatech案例
基于Lindorm的解决方案，用户在采用到100Gbps+流量产生的大量数据包元数据直接通过Lindorm存储，在数据的存储和索引性能方面得到极大的提升，同时也极大地降低整个系统的运维成本。客户价值 支持多个100G数据流量采集点的数据包元数据存储...
功能特性
支持对MySQL、SQL Server、PostgreSQL、Oracle类型的RDS和自建数据库进行运维管控和审计。支持批量导入三方资产。支持一键导入阿里云资产。支持阿里云数据库专属集群、云上服务器、IDC机房线下服务器等应用场景。支持多区域的短信动态口令...
产品架构
PolarDB-X 1.0 承担着OLTP在线核心数据库的职责与定位，可与数据集成、数据传输，缓存、大数据生态配合使用。产品架构图 内核架构 PolarDB-X 1.0 由计算层实例与存储层私有定制RDS实例组成，通过挂载多个MySQL进行分库分表水平拆分。如同...
JindoFS介绍和使用
JindoFS提供兼容对象存储的纯客户端模式（SDK）和缓存模式（Cache），以支持与优化Hadoop和Spark生态大数据计算对OSS的访问；提供块存储模式（Block），以充分利用OSS的海量存储能力和优化文件系统元数据的操作。JindoFS纯客户端模式（SDK...
功能优势
当您的数据库中有数据需要被保护时，可以使用RDS MySQL全密态数据库功能，该功能提供的加密解决方案能够在遵守数据保护法规的前提下保障您的数据安全，使被保护数据免受未授权访问。本文将详细介绍RDS MySQL全密态数据库功能的优势，帮助您...
实验介绍
实操该实验后，可在DataWorks独立完成数据采集、数据开发和任务运维等数据岗位常见任务。实验时长 采用在线学习的方式，预计耗时1小时。实验费用 本案例运行可能会产生一定的费用。为避免产生过多费用，本案例在创建相关表时，生命周期 已...
DataWorks On Hologres使用说明
DataWorks为Hologres提供离线任务调度、元数据管理、数据治理、数据安全管控等能力，但任务计算、数据存储仍在Hologres中。标准模式工作空间下，DataWorks为不同环境绑定不同的Hologres实例，实现DataWorks开发环境与生产环境存储、资源等...
世纪联华
与传统方案临时增设服务器相比较，通过函数计算、表格存储及API网关云服务极大地简化了运维。函数计算：具有弹性扩容的优势，根据请求量动态分配执行环境，部署上线简单。表格存储：具有访问更快，吞吐量更强，不需要额外增加机器的优势。...
ETL工作流快速体验
GitHub十大热门编程语言 DataWorks MaxCompute 函数计算 OSS 数据集成 数据开发 基础版 基于GitHub Archive公开数据集，通过DataWorks 数据集成 模块获取过去1小时GitHub中提交次数最多的代码语言数据，在DataStudio 数据开发 模块通过函数...
世纪联华
与传统方案临时增设服务器相比较，通过函数计算、表格存储及API网关云服务极大地简化了运维。函数计算：具有弹性扩容的优势，根据请求量动态分配执行环境，部署上线简单。表格存储：具有访问更快，吞吐量更强，不需要额外增加机器的优势。...
RDS迁移至MaxCompute实现动态分区
本文为您介绍如何使用DataWorks数据集成同步功能自动创建分区，动态地将RDS中的数据迁移至MaxCompute大数据计算服务。前提条件 准备DataWorks环境 开通MaxCompute。在DataWorks上完成创建业务流程，本例使用DataWorks简单模式。详情请参见 ...
挂载磁盘
1.背景 您在创建批量计算节点时，因系统盘大小限制，若有较大本地数据需求，建议挂载数据盘。挂载数据盘后，对挂载目录里数据的读写行为将和读写本地数据完全相同。2.说明 数据盘挂载主要包含以下四点限制：类型限制：只支持 cloud_...
DataWorks On MaxCompute使用说明
DataWorks为MaxCompute提供任务调度、元数据管理、数据治理、数据安全管控等能力，但任务计算、数据存储仍在MaxCompute中。标准模式工作空间下，DataWorks为不同环境绑定不同的MaxCompute项目，实现DataWorks开发环境与生产环境存储、资源...
迁移方案
数据正确性验证 数据质量是实时计算数据产出对业务的重要保障，和实时计算任务日常变更一样，迁移工作也需要对新任务产出的数据质量进行验证。通常，建议您采用迁移新任务和原有任务并行双跑的方式，在新运行一段时间，满足数据对比条件后...
文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
选择付费方式
按量计费：存储、计算和下载资源都是按实际使用量计费。按时计费：基于包年包月商品计算资源基础上，对计算资源按小时灵活扩容或缩容，最终按扩容的量和使用时长计费。详细的计费策略请参见 计费项与计费方式概述。MaxCompute提供了TCO工具...
功能特性
计算 MaxCompute向用户提供了多种经典的分布式计算模型，提供TB、PB、EB级数据计算能力，能够更快速的解决用户海量数据计算问题，有效降低企业成本。功能集 功能 功能描述 参考文档 SQL开发 DDL语句 DDL语句 DDL DML操作 DML操作 DML操作 ...
产品优势
与传统依赖人力的应用交付和运维方式相比，计算巢提供了智能高效、安全可靠的服务交付和运维体验，有助于提升服务商的服务能力、降低运营成本、提升用户的部署效率和降低用户管理软件和资源的成本。智能高效 计算巢集成了阿里云一系列底层...
2023年
2023-04-23 全部地域 物化视图 新人特惠规格 MaxCompute在阿里云免费试用中心推出新人特惠规格，提供一定的计算和存储免费额度方便新客进行产品核心能力体验。2023-04-11 全部地域 新用户免费试用额度 新版作业运维 新版作业运维将提供全量...
云数据库Redis开发运维规范
云数据库Redis拥有极强的性能，阿里云结合多年的运维经验，从业务部署、Key的设计、SDK、命令、运维管理等维度展示云数据库Redis开发运维规范，为您设计高效的业务系统提供参考，帮助您充分发挥Redis的能力。了解Redis性能边界 图 1.Redis...
Tair开发运维规范
云原生内存数据库Tair 拥有极强的性能，阿里云结合多年的运维经验，从业务部署、Key的设计、SDK、命令、运维管理等维度展示 Tair 开发运维规范，为您设计高效的业务系统提供参考，帮助您充分发挥Tair的能力。了解 Tair 性能边界 图 1.Tair ...
技术架构
PolarFS作为一款与PolarDB深度协同的存储基础设施，其最核心的竞争力不仅体现在性能和扩展性方面，更深层次的则是在面临有许多挑战性的PolarDB客户业务需求和规模化的公有云研发运维过程中而长期积累形成的一系列高可靠、高可用、与数据库...
快速体验
实操该实验后，可在DataWorks独立完成数据采集、数据开发和任务运维等数据岗位常见任务。实验时长 采用在线学习的方式，预计耗时1小时。实验费用 本案例运行可能会产生一定的费用。为避免产生过多费用，本案例在创建相关表时，生命周期 已...
升级
资源治理 支持您进行数据使用消耗分析，从全局视角把控计算和存储成本，提升资源使用效率，构建可管控的数据资产健康体系。资产安全 支持定义数据的业务分类和安全等级，并构建敏感数据识别规则，同时支持设置敏感数据脱敏规则，以保障数据...
DataWorks On CDP/CDH使用说明
一、数据集成 DataWorks的数据集成模块为您提供读取和写入数据至CDP/CDH Hive、CDP/CDH HBase的能力，您需要将Hive或HBase组件创建为 DataWorks的 Hive或HBase数据源，实现将其他数据源的数据同步至Hive或HBase数据源，或将Hive或HBase数据...
什么是Dataphin
超级管理员需要通过管理中心来进行成员管理和计算设置，同时您也可以通过智能引擎来配置计算和存储规则，以提高数据构建的效率。管理中心 全局规划 基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层设计中至关重要的一步。在您...
亿海蓝-航运大数据的可视化案例
——亿海蓝CTO 客户简介 亿海蓝是中国的航运大数据公司，做为中国最大的AIS数据服务运营商，发展目标是通过大数据技术推动全球航运物流与互联网的融合，加速航运产业转型升级。亿海蓝目前已为全球上百万行业用户提供数据服务，客户涵盖港口...
DataWorks On EMR使用说明
计算和存储费用 运行计算引擎任务时，可能会产生计算引擎的计算和存储费用。网络服务费用 连通DataWorks和其他相关产品的网络环境时，可能会产生网络服务费用。例如，使用高速通道、共享带宽、EIP等产品连通网络时，会产生相应产品的服务...
文档更新动态（2022年之前）
通用功能 管理函数权限 2020-04-09 告警中心 新增功能 为您展示资产质量、实时计算、数据服务模块的告警事件、推送记录及值班表，帮助您及时查看并处理告警。通用功能 告警中心 2020-04-09 数据集成 新增功能 数据集成是基于Dataphin构建的...
操作手册
ii.OSS数据映射 OSS 数据映射（或者称 OSS 数据挂载），可以将 OSS 上的数据映射到计算节点的本地路径（windows 是盘符），一个作业中的所有计算节点可以共享访问到相同的数据。OSS 数据挂载有如下功能或限制：映射的目的路径必须根据计算...
- 产品推荐
- 这些文档可能帮助您