索引优化
大数据集场景下优先考虑稀疏索引：如果您的数据量非常地大，并且您的查询限定条件为<、、=、>=、>，需要从大数据量的表中取出少于50%的数据，那么使用稀疏索引（BRIN Index或者AOCS表的metascan）可以极大地减少无效数据的加载。...
实例规格说明
本章节主要说明阿里云产品DBFS的实例规格，资源消耗以及使用场景。以下为DBFS实例规格说明表：实例规格 资源消耗 使用场景 dbfs.small CPU：单个DBFS最多占用0.25 vCPU。内存：单个DBFS最多占用0.5 GiB。业务场景：高密度挂载场景，可用于...
概述
以下是常见的应用场景：数据存储与计算安全场景：在不可信环境中（如第三方平台），Spark全密态计算引擎 可以为关键的数据分析应用（如投资和财务分析）提供数据保护，保证用户数据在存储与计算过程中的安全，降低明文数据泄露风险。...
水体
数据 重新选择数据：在数据面板内可以单击下方 重新选择数据，打开 选择范围 对话框，重新选择仅针对水体图层的数据范围，详情请参见 使用官方基底数据方式创建 中的选择场景范围区域的操作步骤。蓝图编辑器交互配置 在当前场景编辑器页面...
水体
数据 重新选择数据：在数据面板内可以单击下方 重新选择数据，打开 选择范围 对话框，重新选择仅针对水体图层的数据范围，详情请参见 使用官方基底数据方式创建 中的选择场景范围区域的操作步骤。蓝图编辑器交互配置 在当前场景编辑器页面...
Iceberg概述
例如，在日志场景中，启动 Iceberg 或 Spark 流作业，实时地将日志数据导入Iceberg表中，然后可以使用Hive、Spark、Iceberg 或Presto进行实时查询。同时，由于Iceberg支持ACID，保证了数据的流入和查询的隔离性，不会产生脏数据。删除或...
场景管理器
图表样式 场景管理器是3D地球的子组件，支持独立的样式、数据和交互配置，能够使用数据定义镜头位置，通过移动和缩放的动效展示球体的不同位置。配置面板 搜索配置：单击 配置 面板右上角的 搜索配置，可在 搜索配置 面板中输入您需要搜索...
场景管理器
图表样式 场景管理器是3D地球的子组件，支持独立的样式、数据和交互配置，能够使用数据定义镜头位置，通过移动和缩放的动效展示球体的不同位置。样式面板 搜索配置：单击 样式 面板右上角的搜索配置项图标，可在搜索配置面板中输入您需要...
多账号统一管理
便于企业有效地执行数据安全管理任务，如自动发现敏感数据、数据分类分级、以及对潜在安全威胁的监测和报警。本文介绍如何使用多账号统一管理功能。使用须知 使用多账号统一管理功能的阿里云账号和被管理的阿里云账号必须同属于一个资源...
近实时增量导入
实际业务数据处理场景中，涉及的数据源丰富多样，可能存在数据库、日志系统或者其他消息队列等系统，为了方便用户将数据写入MaxCompute的Transactional Table 2.0，MaxCompute深度定制开发了开源 Flink Connector工具，联合DataWorks数据...
案例集合
HBase典型场景 HBase八大应用场景请参见 再谈全局网HBase八大应用场景。存储场景 具体请参见 云Hbase数据库在亿方云实践之路。车联网场景 车纷享请参见 基于阿里云HBase构建车联网平台实践。HBase在新能源汽车监控系统中的应用场景请参见 ...
按线上API关联
手动选中目标服务后，系统自动选中API的归属应用、和API关联的物理表、和API关联物理表有产出关系的场景、场景下包含的所有场景节点、场景下输出的物理表，以及场景节点包含的所有逻辑表，以及场景节点包含的所有逻辑表以及数据标准、数据...
数据上云场景
MaxCompute平台提供了丰富的数据上传下载工具，可以广泛应用于各种数据上云的应用场景，本文为您介绍三种经典数据上云场景。Hadoop数据迁移 您可使用MMA、Sqoop和DataWorks进行Hadoop数据迁移。使用DataWorks结合DataX进行Hadoop数据迁移的...
Delta Lake概述
实时机器学习：在机器学习场景中，通常需要花费大量的时间用于处理数据，例如数据清洗、转换、提取特征等等。同时，您还需要对历史和实时数据分别处理。而Delta简化了工作流程，整条数据处理过程是一条完整的、可靠的实时流，其数据的清洗...
数据模型
上述场景中三个设备产生的数据如下图所示。时序数据库除了支持高并发的写入吞吐以及高压缩率，还能高效的满足如下类型的查询请求：查询某条时间线一段时间内的数据点。例如：查询 ID=7AD45EC 的设备，在 2020-10-24T00:00:00Z~2020-10-24T...
应用场景
相比较云数据库Redis版，云原生内存数据库Tair 提供了更加丰富的数据结构，不仅适用于云数据库Redis版支持的应用场景，更适用于高并发且带有一定计算需求的场景，已广泛应用于多个行业。自动驾驶 云原生内存数据库Tair 提供了时序数据结构 ...
我的看板
本文介绍可视化应用中心下我的看板模块的数据来源和使用步骤。说明 可视化应用中心功能为7.0版本产品新增功能，请根据 可视化应用中心 环境进行操作。数据来源 在工作台中创建并发布的数据看板内容，会同步在此处展示，若数据看板仅编辑...
流程控制
使用场景：例如，当您需要切换不同场景的数据面板时，每个场景有很多数据面板，先把场景A相关的数据面板切出，再把场景B相关的数据面板切进。可使用 序列执行 节点，对不同场景的数据面板进行分组，再按照先A后B的顺序执行。添加 序列执行 ...
集成与开发概览
应用场景 数据集成 运维：数据容灾、异地多活、数据归档、数据迁移、测试数据生成、运维指标监控、业务指标监控等。开发：实时报表、日志分析、离线宽表、T+1数据快照、数据聚合、数据清洗、数据脱敏等。数据开发 数据库开发：跨库开发、...
视觉映射使用场景
本文介绍视觉映射在DataV产品中的使用场景。当您使用支持视觉映射功能的新版组件时，DataV画布编辑器加载全新的组件配置样式，支持样式与数据的视觉映射关联。您可以使用便捷、灵活的方式定制组件样式。示例组件场景如下图样式：基础平面...
视觉映射使用场景
本文介绍视觉映射在DataV产品中的使用场景。视觉效果示例 当您使用支持视觉映射功能的新版组件时，DataV画布编辑器加载全新的组件配置样式，支持样式与数据的视觉映射关联。您可以使用便捷、灵活的方式定制组件样式。基础平面地图 3.0 子...
申请与创建
使用场景 使用数据库文件存储的应用场景。性能等级 容量越大，可供选择的性能级别越高（460 GB 以上可选 PL2，1260 GB 以上可选 PL3），性能级别越高相应的费用也越高。存储加密 开启存储加密能够最大限度保护您的数据安全，您的业务和应用...
应用场景
应用场景 1.实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线，您可以实时接入APP、WEB、IoT和数据库等产生的异构数据，统一管理，并投递到下游的分析、归档等系统，构建清晰的数据流，让您更好的释放数据的价值...
DevOps概述
应用场景 帮助企业将数据变更流程化，实现在一个研发流程中协作、管理多个变更工单。例如，企业需要提交多个数据变更工单进行数据变更，则可以使用 DMS 的DevOps，将不同的工单整合到一个连续的流程中。DevOps使用流程 新建迭代模板。迭代...
概述
使用场景 典型的应用场景如下：近实时计算场景 时间序列数据的场景 预测建模 与存量数据共存 通常生产环境中会有大量的存量数据，数据可能存储在HDFS、RDBMS或Kudu中。如果您只是想访问和查询这些存量数据，可以使用Impala访问和查询，而...
数据服务系统配置
应用内存：缓存数据量较大时不建议使用，占用内存会影响系统的响应速率。适用于个别API需要开启缓存且数据量很少的场景 说明 数据缓存时间将统一获取Dataphin应用部署时设置的内存数据缓存时间，创建API时定义的缓存时间将不生效。指定...
应用场景
数据库网关（DatabaseGateway，简称DG）具有广泛的应用场景，用户可以使用云服务访问并管理本地IDC或其他云厂商的数据库，同时也可以与其他阿里云服务集成提供丰富的解决方案。多云数据库统一管理 数据管理 DMS 是一种集数据管理、结构管理...
应用场景
数据库网关（DatabaseGateway，简称DG）具有广泛的应用场景，用户可以使用云服务访问并管理本地IDC或其他云厂商的数据库，同时也可以与其他阿里云服务集成提供丰富的解决方案。多云数据库统一管理 数据管理 DMS 是一种集数据管理、结构管理...
搜索索引介绍
宽表引擎、LTS和搜索引擎可以针对不同的使用场景选择不同的机型，独立的部署形态大幅提升了系统的稳定性。数据写入的流程如下：数据写入至Lindorm宽表引擎，原始数据记录在宽表WAL中，写入结果返回客户端。数据同步服务LTS实时监听宽表WAL...
常见问题
业务场景中以MySQL数据源为基准，会额外冗余到ES存储数据用于业务使用，ES数据是如何做同步？异地应用双活架构是否需要业务改造？管控面常见问题 MSFE创建集群错误怎么办？确保VPC互通的场景？关于HTTP/HTTPS的注意事项？关于SLB的注意事项...
应用场景
建立数据平台 得益于其开放式架构设计，EMR Serverless Spark极大地简化并提升了在数据湖环境中对结构化和非结构化数据进行高效分析处理的能力。EMR Serverless Spark不仅集成了任务调度系统，使得您能够便捷地构建与管理数据ETL流程，轻松...
列存索引（IMCI）发布说明
但是，基于行存的查询性能并不能满足所有应用场景的需求。通常情况下，为了实现复杂分析型查询，需要将数据从 PolarDB MySQL版 导出，然后导入到外部专用的OLAP系统中再进行分析查询。这样一来，需要使用两套数据库系统，架构复杂性、运维...
数据处理
使用场景：并行数据处理 节点在数据分发场景中使用较多。例如一个组件接口返回的数据为 {name:'蓝图编辑器',version:'v1.0' }，分发到2个通用标题组件中，一个取的是name字段，另一个取的是version字段。可以使用该节点新增两个处理方法，...
数据脱敏
123.456 123 置空 default-缺省规则 abcd1234 abc*234 使用场景 添加的敏感列在导出、数据库变更和 SQL 窗口执行均生效。场景一：导出数据时开启数据脱敏 示例：导出数据库 odc_test 中的表 student 时，会自动开启数据脱敏。在 SQL 开发...
ECS实例说明
大数据型 使用本地SATA盘作存储数据，存储性价比高，是大数据量（TB级别的数据量）场景下的推荐机型。说明 Hadoop、Data Science、Dataflow和Druid类型的集群支持Core节点；Zookeeper和Kafka类型的集群不支持Core节点。本地SSD型 使用本地...
全景视角
背景信息 为提高不同使用场景下的数据治理效率和质量，DataWorks为您提供以下视角：数据管理视角：在数据资产管理、数据安全加固、数据权限管理等数据管理场景下，建议您使用数据管理视角，关注查看数据管理过程中，表的统计数据、安全权限...
应用场景
数据库自治服务DAS支持统一管理、批量管理、智能诊断、安全审计等功能，帮助您实现多种典型应用场景。双11使用场景 每年一度的双11购物狂欢节，数据库自治服务DAS以持续的创新为之保驾护航，同时也在延续它一次次华美的蜕变。从最初面向DBA...
基于MaxCompute进行大数据BI分析
应用场景 互联网行业、电商、游戏行业等网站、App、小程序应用内的BI分析场景。各类网站的BI分析场景。方案介绍 基于MaxCompute进行大数据BI分析的流程如下：通过数据集成同步业务数据和日志数据至MaxCompute。通过MaxCompute、DataWorks对...
架构信息查询导航
警告 单副本架构不能保障数据可用性和服务连续性，选用前请务必确认风险，不建议您在生产环境中使用该架构的实例。云数据库Redis版服务等级协议不适用于单副本架构的实例。实例架构 支持的系列 简介 适用场景 标准版-双副本 企业版 社区版 ...
应用场景
通过结合其他云产品，云数据库RDS可以适用于更多典型的应用场景。自建库搭配RDS实现异地容灾 RDS搭配异构数据库实现数据多样化存储 RDS结合开放搜索服务实现复杂搜索 开启读写分离扩展RDS处理能力 RDS搭配大数据计算服务实现大规模数据计算
- 产品推荐
- 这些文档可能帮助您