大数据中的4个v-大数据中的4个v文档介绍内容-阿里云

创建元数据

在基于HBase、Elasticsearch或MongoDB数据源创建服务单元之前，需要先创建对应数据源中数据表的元数据，以实现通过元数据确定数据源中数据表的结构。后续您可以通过该元数据读取到对应数据源的数据。本文为您介绍如何创建HBase、...

备份恢复性能说明

测试环境配置项配置内容数据库类型 RDS MySQL（通用型）数据库内存 2,400M 数据库CPU 8核数据库IOPS 1,200 测试数据测试数据说明数据示例数据库大小测试数据库的总大小，单位为GB。102 GB 总记录数测试数据库中所有表的总记录...

入门实践

本文以实现构建数据标准来设计数据模型，并通过规范化的流程，下发模型至计算引擎为例，为您介绍DataWorks数据建模的流程。前提条件如果您使用的是阿里云主账号，请下载建模工具。如果您使用的是RAM用户，请完成授权并下载建模工具。详情...

敏感数据保护

敏感数据的数据集成加解密如果在数据上云、数据交换等场景，需要对传输中的数据进行加解密保护，则可以使用Dataphin的集成加解密能力，对集成的数据进行加解密保护。加密后的数据只有拥有密钥权限的用户才能够进行查看，从而更好地保护...

敏感数据保护

敏感数据的数据集成加解密如果在数据上云、数据交换等场景，需要对传输中的数据进行加解密保护，则可以使用Dataphin的集成加解密能力，对集成的数据进行加解密保护。加密后的数据只有拥有密钥权限的用户才能够进行查看，从而更好地保护...

导入数据

本文为您介绍如何通过MaxCompute客户端，使用Tunnel Upload将本地数据文件中的数据导入创建好的表中。前提条件请确认您已满足如下条件：已创建表。更多创建表操作，请参见创建表。已将CSV或TXT数据文件下载至本地。本文提供的数据文件样...

透明数据加密概述

加密解密流程所有加密解密操作均在内存中进行，内存中的数据是明文，磁盘中的数据是密文，这可以避免因磁盘被盗而产生的数据泄露问题，同时数据库的使用方式保持不变，没有适配成本。数据库启动时会从KMS获取KEK，从而解密DEK，解密后的...

迁移方案概览

数据迁移功能帮助您实现同构或异构数据源之间的数据迁移，适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景。本文将介绍数据迁移功能支持的数据库、版本和迁移类型，以及具体的配置文档。说明数据迁移在某些场景...

概述

背景信息数据传输服务（Data Transmission Service，简称DTS）支持将云数据库PolarDB 中的数据同步至分析型数据库MySQL版（AnalyticDB for MySQL）。通过DTS提供的数据同步功能，可以轻松实现数据的流转，将企业数据集中分析。本文以...

技术架构选型

在数据模型设计之前，您需要首先完成技术架构的选型。本教程中使用阿里云大数据产品MaxCompute配合...MaxCompute作为整个大数据开发过程中的离线计算引擎。DataWorks则包括数据开发、数据质量、数据安全、数据管理等在内的一系列功能。

应用场景

实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统通过数据总线，您可以实时接入APP、WEB、IoT和数据库等产生的异构数据，统一管理，并投递到下游的分析、归档等系统，构建清晰的数据流，让您更好的释放数据的价值。...

数据库分组

若您需要在SQL变更或结构设计中快速载入多个数据库，可以创建一个数据库分组，将多个数据库环境、引擎类型相同的数据库绑定成为一个分组。本文介绍如何创建数据库分组。背景信息当您的业务部署在多个地域，且存在多个数据库时，您每次做...

同步数据

分析型数据库MySQL版支持多种数据加载方式，包括但不限于：通过阿里云数据传输服务DTS将MySQL/DRDS中的数据导入分析型数据库MySQL版，其中MySQL可为RDS for MySQL、其他云厂商或线上IDC的自建MySQL以及ECS自建MySQL。详细操作步骤请参见 ...

添加数据集

DataV数据集支持多种数据源的接入，如数据库、excel表格文件等，通过对数据的结构化存储和元数据的汇集整理，提供高效实用的数据建模能力，可用的算子包括常见的数据聚合函数、按不同时间粒度划分、地理信息处理等。本文为您介绍如何在...

图层配置项说明

重新选择数据：单击数据面板内的重新选择数据，打开选择范围对话框，即可重新选择仅针对当前图层对应的数据范围，详情请参见创建三维城市中的官方基底数据中选择场景范围区域步骤或空间构建数据中选择空间数据项目步骤。刷新数据...

图层配置项说明

基底道路图层示例数据面板样式重新选择数据：单击数据面板内的重新选择数据，打开选择范围对话框，即可重新选择仅针对当前图层对应的数据范围，详情请参见创建三维城市场景项目中的官方基底数据中选择场景范围区域步骤或空间构建...

图层配置项说明

基底道路图层示例数据面板样式重新选择数据：单击数据面板内的重新选择数据，打开选择范围对话框，即可重新选择仅针对当前图层对应的数据范围，详情请参见创建三维城市场景项目中的官方基底数据中选择场景范围区域步骤或空间构建...

热力线层

最大宽度：热力线的最大宽度，通过数据中的 value 值来调整线的宽度。渐变速度：热力线层渐隐渐显的速度，值越大则速度越快。最小值颜色：数据中 value 值最小的线的颜色。最大值颜色：数据中 value 值最大的线的颜色，请参见颜色选择器...

图层配置项说明

基底组件：在基底组件数据面板中，您可以单击面板内的重新选择数据，打开选择范围对话框，重新选择仅针对当前图层对应的数据范围，详情请参见使用官方基底数据方式创建中的选择场景范围区域步骤。图 1.基底道路图层示例数据面板样式 ...

热力线层

无需修改数据源中的字段，就可以实现数据的实时匹配。也可以单击图标对字段分别样式配置。过滤器打开过滤器，选择已创建的数据过滤器或新建数据过滤器，并配置数据过滤器脚本，实现数据的筛选功能。详情请参见管理数据过滤器。数据响应...

添加宜搭数据源

在宜搭应用的应用设置中的应用数据页签获取应用编码，如下图所示。应用密钥（必填）宜搭应用平台中已创建表单的应用密钥。在宜搭应用的应用设置中的应用数据页签获取应用密钥，如下图所示。表单ID（非必填）宜搭应用平台中已创建...

添加宜搭数据源

在宜搭应用的应用设置中的应用数据页签获取应用编码，如下图所示。应用密钥（必填）宜搭应用平台中已创建表单的应用密钥。在宜搭应用的应用设置中的应用数据页签获取应用密钥，如下图所示。表单ID（非必填）宜搭应用平台中已创建...

数据地图概述

数据地图是在元数据基础上提供的企业数据目录管理模块，涵盖全局数据检索、元数据详情查看、数据预览、数据血缘和数据类目管理等功能。数据地图可以帮助您更好地查找、理解和使用数据。元数据采集与接入 MaxCompute数据如果您使用了...

概述

AnalyticDB PostgreSQL版向量分析可以通过AI算法提取非结构化数据的特征，并利用特征向量作为非结构化数据的唯一标识，帮您快速且低成本地实现对非结构化数据检索和对结构化数据关联分析。向量数据库简介在现实世界中，绝大多数的数据都...

X-Engine简介

X-Engine为了进一步提升事务处理的吞吐，使用流水线技术，把提交阶段分为4个独立的更精细的阶段：拷贝日志到缓冲区（Log Buffer）日志落盘（Log Flush）写内存表（Write memory table）提交返回（Commit）事务到了提交阶段，可以自由选择...

生成数据API

数据服务解决从数仓到应用的“最后一公里”，将数据源中的数据表快速生成数据API，在API网关进行统一管理和发布。实现低成本、易上手、安全稳定的数据共享与开放。背景信息为了将最终分析的结果加速查询后开放出API接口对接三方服务，本次...

敏感数据溯源

您可以将DataWorks中的数据文件导出或下载至本地，再上传至溯源任务中进行溯源，也可以将外部系统的数据保存至CSV文件，再上传至溯源任务中进行溯源。目标文件上传成功后，您还可以选择替换或下载该文件。单击开始溯源，启动目标溯源...

导入概述

Broker Load Broker导入，即通过部署的Broker程序读取外部数据源（例如HDFS）中的数据，并导入到StarRocks。Broker进程利用自身的计算资源对数据进行预处理导入。Spark Load Spark导入，即通过外部资源（例如Spark）对数据进行预处理生成...