创建逻辑模型：应用表
默认选择 应用层 分层归属的 应用数据层。您也可以根据业务需求，选择将应用表挂载至其他数据层。创建数据分层，详情请参见 创建数仓分层。集市/主题 选择已创建的数据集市或主题域，详情请参见 数据集市、主题域。粒度 选择已创建的维度。...
StarRocks概述
应用场景 StarRocks可以满足企业级用户的多种分析需求，具体的业务场景如下所示：OLAP多维分析 用户行为分析 用户画像、标签分析、圈人 高维业务指标报表 自助式报表平台 业务问题探查分析 跨主题业务分析 财务报表 系统监控分析 实时数仓 ...
JindoFS外部客户端
本文主要介绍JindoFS的外部客户端，以及一些典型的应用场景。概述 JindoFS外部客户端，主要是为E-MapReduce集群外部访问JindoFS集群提供一种可行的方法。现在JindoFS外部客户端只能访问块存储模式下的JindoFS，不支持访问缓存模式下的...
使用场景
ACM 为大数据实时计算场景的应用带来以下好处：应用计算参数动态配置，动态生效，生效时间快，性能影响低。企业级互联网架构下的异地多活场景 异地多活是企业级互联网架构中的一种高级容灾架构。相对于传统容灾架构，有业务恢复时间短、...
附录：DataWorks开放平台示例代码库
开放平台提供了开放API（OpenAPI）、开放事件（OpenEvent）、扩展程序（Extensions）等能力，帮助您快速实现各类应用系统对接DataWorks，以便进行数据流程管控、数据治理和数据运维，并及时响应各类应用系统的业务状态变化。更多开放平台的...
设置NAS存储
将NAS挂载至 SAE 应用实例，可以有效解决应用数据的持久化存储需求，并实现应用实例之间的数据共享。前提条件 开通NAS服务 通过控制台创建通用型NAS文件系统 添加挂载点 操作步骤 在创建应用过程中配置NAS存储 登录 SAE控制台。在左侧导航...
虚拟节点
本文为您介绍虚拟节点的应用场景及创建使用。应用场景 虚拟节点通常用于如下场景：复杂依赖场景下的业务管理 当您的实际业务包含多个业务流程时，为了业务流程与业务流程之间便于管理，建议每个业务流程都使用虚拟节点设置一个空跑的统筹...
概述
Flink（VVR）完全兼容开源Flink，相关内容请参见如下文档：DataStream API Table API&SQL Python API 使用场景 Flink广泛应用于大数据实时化的场景，本文从技术领域和企业应用场景进行介绍。技术领域 从技术领域的角度，Flink主要用于以下...
概述
存储格式 数据来源及特点 数据量增大或减少 详细数据量 JSON 大量应用产生JSON类型的数据，冗余数据量大。增大151.7%3.02GB AVRO Hadoop生态格式的数据，数据由大部分遗留系统产生。增大8.3%1.3GB RCFile Hadoop生态格式的数据，数据由大...
混合存储型（已停售）
使用混合存储型，将所有课程信息存储到磁盘，访问量大的课程和题库数据存储到内存并常驻内存，保证高频访问数据的读写性能，实现高性能与高性价比的有机结合。典型业务场景的示例如下：场景1：使用开源Redis集群存储了100 GB的数据，但高峰...
建模空间
本文为您介绍DataWorks建模空间的应用场景及配置步骤。背景信息 DataWorks智能数据建模在进行跨多个工作空间数据的统一建模情况下，为您提供了 数据模型设计空间 与 数据研发工作空间 的概念，通过建模空间功能实现模型跨工作空间应用。...
动态过滤器（Dynamic Filter）
应用场景 动态过滤器功能是利用等值JOIN的特性，基于运行时动态生成过滤器，以便在Shuffle或JOIN之前提前过滤数据，实现加速查询运行。该功能适用于维度表和事实表执行JOIN的场景。动态范围过滤器或布隆过滤器（Dynamic Range|Bloom Filter...
互联网、电商行业离线大数据分析
概述 电商网站的销售数据通过大数据进行分析后，可以在大屏幕展示销售指标、客户指标、销售排名和订单地区分布等业务指标数据。DataV大屏支持可视化动态展示销售数据，触控大屏支持您自助查询数据，极大地提高数据的可读性。应用场景 电商...
ECS应用角色（EMR 3.32及之前版本和EMR 4.5及之前版本...
在EMR集群之上运行的应用程序通过该角色来获得与其他云服务交互的权限，实现以免AccessKey的方式访问阿里云资源，避免了在配置文件中暴露AccessKey的风险。前提条件 已授权该角色，详情请参见 阿里云账号角色授权。背景信息 当前...
索引优化
在大部分传统的TP型数据库中，索引可以极大的提高数据的访问效率。但是在类似与 AnalyticDB PostgreSQL版 这样的分布式数据库中，应该谨慎的选择索引的使用。在大部分场景下，AnalyticDB PostgreSQL版 更适合快速的顺序扫描，或者结合稀疏...
概述
事实上，鉴于数据库研究在数据发现、数据管理、版本控制、数据清理和数据集成方面积累的专业知识，PolarDB for AI 可以为数据驱动的智能应用提供一站式的数据（包括：数据、特征和模型）服务来解决这种割裂状态，大大减少数据驱动的智能...
计费相关配置问题
如果您负责的是核心应用，数据流量大，稳定性要求高，需要尽最大可能保证系统可用。建议开通专家版，获取更丰富的监控诊断能力和海量额度的数据处理和存储。收到账单，如何查看应用监控的用量情况？如果想了解用量情况，您可以在 ARMS控制...
JindoFS实战演示
描述 Fluid+JindoFS对OSS上的数据进行训练加速 Fluid+JindoFS对OSS上的数据进行训练加速 2021-07-06 Fluid是一个开源的Kubernetes原生的分布式数据集编排和加速引擎，主要服务于云原生场景下的数据密集型应用，例如大数据应用、AI应用等。...
使用自定义镜像创建服务器
如果您的业务需要更大的存储设备，可以选择自定义大小的数据盘。说明 如果自定义镜像包含数据盘数据，则 数据盘 配置项的默认值大于等于自定义镜像中的数据盘数据的大小。购买时长 选择购买服务器的时长。您可以选择是否开启自动续费，选中...
资产质量概述
背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求，Dataphin应用场景的多样性及复杂性随之增加。因业务系统的原始数据的规范性无法得以保障，所以Dataphin需要定义数据分析的质量，以满足资产质量的时效性、准确性、完整性、...
挂载数据盘
如果在创建轻量应用服务器时未挂载数据盘，则服务器创建完成后，您也可以挂载数据盘。本文主要介绍如何在已创建的服务器中挂载数据盘。使用前须知 挂载数据盘前，您需要了解以下事项：一台轻量应用服务器实例只能挂载一块数据盘，如果创建...
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
准备工作概述
您可以将Java、Go、Python、JS、.NET、C++等语言的应用数据上报至 可观测链路 OpenTelemetry 版 控制台。支持的上报数据客户端包括OpenTelemetry、Jaeger、Zipkin和Skywalking。语言 文档 Java语言 通过OpenTelemetry上报Java应用数据 通过...
支持的云服务
AnalyticDB for MySQL 云原生数据仓库 AnalyticDB MySQL 版（AnalyticDB for MySQL）是海量数据实时高并发在线分析（Realtime OLAP）云计算服务，与MaxCompute结合应用于大数据驱动业务系统的场景。通过MaxCompute离线计算挖掘，产出高质量...
阶段三：数据安全持续运营
场景二：数据违规流转准实时告警 开发者在开发环境中使用数仓数据构建应用时，可能存在 将ODS层数据同步至分析层项目空间、将分析层数据同步至数据仓库之外的存储介质（业务数据库或对象存储）等情况，此类行为极易造成数仓分析层数据可用...
配置任务调度
说明 从业务维度看，节点依赖关系设置就是下游节点等待上游节点产出表数据后，下游节点再对该表数据进行下一步操作，比如对上游产出的表数据进行进一步清洗，或者将上游清洗的结果表数据回流至其他数据库，但这些都需要等待上游节点执行...
通过Prometheus监控获取ARMS应用监控数据
阿里云 可观测监控 Prometheus 版 默认集成了ARMS应用监控数据源，您可以直接在 可观测监控 Prometheus 版 下获取应用监控相关数据、查看应用监控预置大盘，并根据需求进行二次开发。前提条件 已为应用安装探针，具体操作，请参见 应用监控...
概述
只读实例：在对数据库有少量写请求，但有大量读请求的应用场景下，单个实例可能无法承受读取压力，甚至对业务产生影响。为了实现读取能力的弹性扩展，分担数据库压力，您可以创建一个或多个只读实例，利用只读实例满足大量的数据库读取需求...
高级应用：实现复杂作业逻辑
您也可以灵活使用DataWorks已有的通用节点，例如虚拟节点、分支和归并节点、循环类节点等，与MaxCompute的其他节点联合使用可实现更复杂的业务效果，本文为您概要介绍常用的通用节点和典型应用场景。实现有循环或遍历逻辑的作业 DataWorks...
什么是RDS MySQL
只读实例：在对数据库有少量写请求，但有大量读请求的应用场景下，单个实例可能无法承受读取压力，甚至对业务产生影响。为了实现读取能力的弹性扩展，分担数据库压力，您可以创建一个或多个只读实例，利用只读实例满足大量的数据库读取需求...
ModifyProtectionModuleMode
调用ModifyProtectionModuleMode接口修改指定WAF防护功能模块（包括正则防护引擎、大数据深度学习引擎、CC安全防护、数据风控、主动防御等模块）中的防护模式。您可以通过设置 DefenseType参数值指定防护功能模块。具体参数值的含义，请...
阶段一：基础防护建设
例如：《金融数据安全分级指南 JR/T 0197-2020》《网络安全标准实践指南——网络数据分类分级指引》《信息安全技术个人信息安全规范 GB/T 35273—2020》《信息技术大数据数据分类指南 GB/T 38667-2020》《基础电信企业数据分类分级方法 YD/...
什么是RDS PostgreSQL
只读实例：在对数据库有少量写请求，但有大量读请求的应用场景下，单个实例可能无法承受读取压力，甚至对业务产生影响。为了实现读取能力的弹性扩展，分担数据库压力，您可以创建一个或多个只读实例，利用只读实例满足大量的数据库读取需求...
版本功能对比
监控数据保存策略 指标数据保存时长用于统计查询的应用调用时序统计数据（如TPS、响应时间等）的保存时长。3天 90天 链路数据保存时长用于搜索诊断的应用调用明细数据（如分布式调用堆栈等）的保存时长。1天 30天 开通链接 立即开通 立即...
什么是RDS SQL Server
只读实例：在对数据库有少量写请求，但有大量读请求的应用场景下，单个实例可能无法承受读取压力，甚至对业务产生影响。为了实现读取能力的弹性扩展，分担数据库压力，您可以创建一个或多个只读实例，利用只读实例满足大量的数据库读取需求...
上游应用
对于某个应用而言，上游应用是指向该应用发送数据的应用。本文说明如何查看上游应用情况，包括响应时间、请求数、错误数等信息。前提条件 接入应用监控 功能入口 登录 ARMS控制台，在左侧导航栏选择 应用监控>应用列表。在 应用列表 页面...
开发运维建议
PostgreSQL13在分区表、HashAggregate(group by)、并行查询等有较大的优化，建议升级PostgreSQL大版本。具体请参见 RDS PostgreSQL升级数据库大版本。游标使用后及时关闭。使用 TRUNCATE 代替 DELETE 全表，提升性能。PostgreSQL支持DDL...
数据服务
面向数据资产管理者提供服务的统计分析、服务用量统计分析，实现数据中台建设后半场“数据应用”的有效落地，支撑数据智能应用的高效开发。前提条件 已根据快速入门教程完成加载样例数据操作，具体信息请参见 样例数据。已根据快速入门教程...
启停应用监控
停止应用监控：单击 更多>停止应用监控，在弹出的 提示 对话框中单击 确定，关闭已开启的应用监控。查看应用监控指标 应用成功部署后，您可以在 应用监控 模块中查看应用的关键性能指标。登录 SAE控制台。在左侧导航栏，选择 应用管理>应用...
阶段二：数据安全防护措施及策略增强建设
在该阶段，DataWorks为您提供了新人入职自动化授权、按需申请数据权限&多级审批、数据可用而不可见、数据完整性与可用性专项治理等多个场景的最佳实践，帮助企业做好数据安全防护措施并建设更加完善的安全治理策略。场景一：新人入职自动化...
- 产品推荐
- 这些文档可能帮助您