数据标准概述
通过规范约束标准代码、度量单位、字段标准、命名词典，来保障后续建模与应用过程中数据处理的一致性，从源头上保障数据的标准化生产，节约后续数据应用和处理的成本。应用场景 DataWorks的数据标准包含 字段标准、标准代码、度量单位、...
关于我们
阿里云隐私计算产品是源于阿里集团内部数据安全流通的最新解决方案和实践，所以她的提出是基于解决实际的数据安全问题和大数据场景需要，这就决定了她的基因里面就是贴身于实际产业应用。目前团队中拥有全职博士4名，研究型密码学博士实习...
StarRocks概述
本文为您介绍什么是StarRocks，以及StarRocks的特性和应用场景。StarRocks介绍 StarRocks是新一代极速全场景MPP（Massively Parallel Processing）数据库，致力于构建极速和统一分析体验。StarRocks兼容MySQL协议，可使用MySQL客户端和常用...
数据资产等级定义
未知性质：无法明确数据的应用场景。标记为Ax。这些性质的重要性依次降低，即重要程度为A1>A2>A3>A4>Ax。如果一份数据出现在多个应用场景汇总，则根据其最重要程度进行标记。分析数据链路 定义数据资产等级后，您可以从数据流转链路开始...
数据资产定级
未知性质：无法明确数据的应用场景。标记为Ax。资产等级标记包含毁灭性质为A1、全局性质为A2、局部性质为A3、一般性质为A4、未知性质为Ax。重要程度为A1>A2>A3>A4>Ax。在数据流转链路上，您需要整理消费各个表的应用业务。通过给这些应用...
数据资产定级
未知性质：无法明确数据的应用场景。标记为Ax。资产等级标记包含毁灭性质为A1、全局性质为A2、局部性质为A3、一般性质为A4、未知性质为Ax。重要程度为A1>A2>A3>A4>Ax。在数据流转链路上，您需要整理消费各个表的应用业务。通过给这些应用...
建模空间
本文为您介绍DataWorks建模空间的应用场景及配置步骤。背景信息 DataWorks智能数据建模在进行跨多个工作空间数据的统一建模情况下，为您提供了 数据模型设计空间 与 数据研发工作空间 的概念，通过建模空间功能实现模型跨工作空间应用。...
大数据用户画像解决方案
方案总览 作为面向大数据场景的半结构化、结构化存储系统，Lindorm可以很好的满足用户画像：没有强事务要求，大数据量、高并发读写场景这样的业务特征。其架构如下图所示：方案优势 1.低成本：集群内单表冷热分离能力、独有的压缩优化能力...
应用场景
背景 HBase的设计之初是为了满足互联网的大数据场景，几乎所有非强事务的结构化、半结构化的存储需求都可以使用HBase来满足。ApsaraDB for HBase是NoSQL（Not only SQL），也支持SQL及二级索引。大数据场景 云数据库HBase支持海量全量数据...
时序引擎应用开发简介
使用OpenTSDB或时间序列数据库TSDB的应用开发步骤 Lindorm时序引擎兼容相关接口，对于已有使用OpenTSDB或者时间序列数据库TSDB的应用程序，您可以按照以下步骤进行应用迁移：应用适配 修改应用程序中的连接字符串，连接的目标从原有的...
使用场景
ACM 为大数据实时计算场景的应用带来以下好处：应用计算参数动态配置，动态生效，生效时间快，性能影响低。企业级互联网架构下的异地多活场景 异地多活是企业级互联网架构中的一种高级容灾架构。相对于传统容灾架构，有业务恢复时间短、...
东软案例
在运维过程中，用户通过实时监控仪表盘、统计分析报表或风险定位、检测工具对接Lindorm多模引擎海量数据检索、分析能力，来满足不同应用场景的运维大数据信息提取需要。图 3.东软新型IT智能运维系统部署方案 适用场景 实时状态大屏展现。...
应用场景
本文介绍StarRocks的应用场景及其解决方案。适用场景 OLAP多维分析 用户行为分析 用户画像、标签分析、圈人 高维业务指标报表 自助式报表平台 业务问题探查分析 跨主题业务分析 财务报表 系统监控分析 实时数仓 电商大促数据分析 教育行业...
阶段二：数据安全防护措施及策略增强建设
场景一：新人入职自动化授权 当企业规模变大，使用数仓的人员就会变多，同时，企业入职、离职、转岗的人员也会越来越多。当数据分析师或数据开发人员新人入职时，如果仅通过人工授权，则工作量巨大，且可能出现错漏。此时，管理员可通过...
高级应用：实现复杂作业逻辑
您也可以灵活使用DataWorks已有的通用节点，例如虚拟节点、分支和归并节点、循环类节点等，与MaxCompute的其他节点联合使用可实现更复杂的业务效果，本文为您概要介绍常用的通用节点和典型应用场景。实现有循环或遍历逻辑的作业 DataWorks...
阶段三：数据安全持续运营
具体应用场景请参见下文。场景一：数据违规下载实时阻断及审批 数据下载是企业风险治理的重中之重。通常，企业数据开发人员、分析人员只允许在数据平台上浏览及使用数据，不允许将明细数据下载至本地进行分析。数据导出到本地后将无法审计...
附录：DataWorks开放平台示例代码库
为方便您更好的理解和使用开放平台的各项功能，如开放API（OpenAPI）、开放事件（OpenEvent）、扩展程序（Extensions），DataWorks开放平台将您提供了相关应用场景的示例代码。本文将为您介绍如何在本地运行从GitHub获取的示例代码，以此来...
功能介绍
解决Prometheus local stroge无法存储大量历史数据的场景，且无法扩展的问题 TSDB for Prometheus的应用场景主要包括但不限于以下几个场景：基于Prometheus的K8s容器监控。基于Prometheus的数据库监控。基于Prometheus服务监控。基于...
数据上云场景
MaxCompute平台提供了丰富的数据上传下载工具，可以广泛应用于各种数据上云的应用场景，本文为您介绍三种经典数据上云场景。Hadoop数据迁移 您可使用MMA、Sqoop和DataWorks进行Hadoop数据迁移。使用DataWorks结合DataX进行Hadoop数据迁移的...
新建及管理动态脱敏规则
应用场景 选择数据脱敏的应用场景。支持选择 写开发表、数据查询 应用场景。写开发表：对来源表敏感数据的查询结果进行脱敏后再写入开发表中，防止生产环境的敏感数据泄露，特殊情况下，个人账号写Basic表则视为写开发表。数据查询：针对不...
新建及管理动态脱敏规则
应用场景 选择数据脱敏的应用场景。支持选择 写开发表、数据查询 应用场景。写开发表：对来源表敏感数据的查询结果进行脱敏后再写入开发表中，防止生产环境的敏感数据泄露，特殊情况下，个人账号写Basic表则视为写开发表。数据查询：针对不...
什么是云数据库HBase
使用场景 云数据库HBase全面提供海量半结构/非结构化数据下的实时存储、高并发吞吐、轻SQL分析（参见 云原生多模数据库Lindorm）、全文检索（参见Lindorm产品）等能力，结合完备的工具服务，丰富的生态融合，一站式高效满足企业在大数据量...
数据服务概述
应用场景 数据服务的典型应用场景如下：建立企业的API生态，例如开放API给合作伙伴、开发者等，帮助企业实现数据的资产化和价值化。Dataphin数据源可以作为 Quick BI 的数据源，对业务数据进行展示、分析、探查和制作报表等 场景及使用流程...
概述
针对不同业务场景所面临的不同数据安全问题，以下列举了一些全密态云数据库适用的典型场景：应用服务面向数据库服务的数据加密 在一般的应用场景中，数据的拥有者即为应用服务方。他们希望防止数据库服务及其运维人员接触到任何应用数据，...
云数据库Cassandra版应用场景
Cassandra能够支持大并发低延时的访问需求，具备高可用和弹性扩容能力，适合消息、feed流、订单查询、网站等各种大数据量的互联网在线应用场景。在线应用场景 方案优势 高可用：单点故障不影响业务。低延时：延迟在毫秒级别。弹性：可随着...
全景视角
背景信息 为提高不同使用场景下的数据治理效率和质量，DataWorks为您提供以下视角：数据管理视角：在数据资产管理、数据安全加固、数据权限管理等数据管理场景下，建议您使用数据管理视角，关注查看数据管理过程中，表的统计数据、安全权限...
OSS Foreign Table功能概览
与OSS External Table的对比 OSS Foreign Table在性能、功能以及稳定性上都优于OSS External Table，具体信息如下：功能 OSS Foreign Table OSS External Table 导入OSS数据或导出数据到OSS 支持 支持 OSS数据分析（大数据量场景）大数据量...
什么是数据传输服务DTS
DTS有如下多种优势：DTS的更多特点，请参见 产品优势 和 应用场景。功能特性 功能 介绍 相关文档 数据同步 实现数据源之间的数据实时同步，适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、查询与报表分流、云BI及实时数据...
概述
以下是常见的应用场景：数据存储与计算安全场景：在不可信环境中（如第三方平台），Spark全密态计算引擎 可以为关键的数据分析应用（如投资和财务分析）提供数据保护，保证用户数据在存储与计算过程中的安全，降低明文数据泄露风险。...
应用场景
互联网类应用 Cassandra能够支持大并发低延时的访问需求，具备高可用和弹性扩容能力，适合日志、消息、feed流、订单、账单、网站等各种大数据量的互联网在线应用场景。多活 Cassandra原生支持多DC部署方式，实现更好的可用性和容灾能力。云...
阶段一：基础防护建设
场景四：开源身份隔离 企业通常会使用DataWorks联合各类大数据引擎（例如，MaxCompute、E-MapReduce）进行数据开发。使用DataWorks及MaxCompute进行数据开发时，在标准模式工作空间下默认支持身份权限隔离。使用DataWorks及E-MapReduce时，...
迁移方案选取指南
手动备份与恢复（迁移手动快照备份的数据）通过reindex迁移数据 迁移场景：将Elasticsearch数据迁移至Openstore存储中 迁移方案 适用场景 使用限制 场景示例 OSS快照 将自建或阿里云商业版Elasticsearch集群中的数据迁移到Openstore自定义...
JindoFS外部客户端
本文主要介绍JindoFS的外部客户端，以及一些典型的应用场景。概述 JindoFS外部客户端，主要是为E-MapReduce集群外部访问JindoFS集群提供一种可行的方法。现在JindoFS外部客户端只能访问块存储模式下的JindoFS，不支持访问缓存模式下的...
虚拟节点
本文为您介绍虚拟节点的应用场景及创建使用。应用场景 虚拟节点通常用于如下场景：复杂依赖场景下的业务管理 当您的实际业务包含多个业务流程时，为了业务流程与业务流程之间便于管理，建议每个业务流程都使用虚拟节点设置一个空跑的统筹...
基于混合负载的查询优化
完备数据仓库，首要解决的问题包括：如何更好的支持数据库场景下的交互式分析以及大数据场景下的复杂批计算场景；如何一站式的解决混合负载下的服务能力。新一代云原生数据仓库AnalyticDB MySQL版提供一站式的数仓服务。混合计算引擎 提供...
创建ClickHouse数据源
您需要根据数据源的应用场景提前准备好对应的资源组并完成资源组配置，在创建ClickHouse数据源时确保与对应资源组间网络连通。各资源组的介绍与配置引导请参见 DataWorks资源组概述。已创建或加入目标工作空间。您需在目标工作空间中，将...
概述
Flink（VVR）完全兼容开源Flink，相关内容请参见如下文档：DataStream API Table API&SQL Python API 使用场景 Flink广泛应用于大数据实时化的场景，本文从技术领域和企业应用场景进行介绍。技术领域 从技术领域的角度，Flink主要用于以下...
创建Hologres数据源
您需要根据数据源的应用场景提前准备好对应的资源组并完成资源组配置，在创建Hologres数据源时确保与对应资源组间网络连通。各资源组的介绍与配置引导请参见 DataWorks资源组概述。已创建或加入目标工作空间。您需在目标工作空间中，将...
目标库选型建议
ADAM根据数据库画像，智能分析源数据库的使用场景，结合兼容性情况，为您推荐最适合的目标库。注意 数据库预估类型受采集数据影响，仅供选型时参考。数据库预估类型 类型说明 SAMPLE 小型或测试数据库。OLTP 在线交易型数据库。OLAP 在线...
通配符列
例如车联网场景，数据通常有几百甚至上千个列，且这些列多数情况下并不是固定的。如果此时想要写入新的列，则需要执行ALTER TABLE语句，这样的操作非常影响写入效率。Lindorm支持动态列，可以动态写入数据并执行查询。但动态列支持的数据...
- 产品推荐
- 这些文档可能帮助您