什么是数据管理DMS
DMS提供全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，致力于帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。视频介绍 功能特性 详情信息，请参见 功能概览。为什么选择数据管理DMS 全域数据...
互联网、电商行业离线大数据分析
概述 电商网站的销售数据通过大数据进行分析后，可以在大屏幕展示销售指标、客户指标、销售排名和订单地区分布等业务指标数据。DataV大屏支持可视化动态展示销售数据，触控大屏支持您自助查询数据，极大地提高数据的可读性。应用场景 电商...
Tair（Redis企业版）简介
高兼容性：兼容Redis社区版6.0大部分的数据结构和命令。购买指引 Redis企业版产品类型 购买链接 操作说明 内存型 立即购买（推荐）创建Tair实例 立即购买 创建Tair实例 持久内存型 立即购买 创建Tair实例 磁盘型 阿里云Tair的诞生与发展 ...
Schema约束
Schema约束策略决定了数据写入时是否校验表是否存在、表结构是否一致、字段的数据类型是否一致。不同的数据写入方式，支持的Schema约束策略不同。本文介绍Lindorm时序引擎Schema约束的概念和使用。Lindorm时序模型的Schema Lindorm时序引擎...
名词解释
INDEX 〇 ✖️ Index（索引）是一种数据结构，用于加快数据库中数据的检索速度，提高查询性能。索引可以看作是表中一个或多个列的快速访问入口，可以根据某个特定的列值快速定位到想要访问的数据。宽表引擎支持多种索引，例如二级索引、...
API概览
DescribeDBInstanceDataSources 查询DB或者Table的数据结构 调用DescribeDBInstanceDataSources接口查询DB或者Table的数据结构。网络管理 API 标题 API概述 CreateEndpoint 申请外网地址 调用CreateEndpoint接口申请外网地址。...
新建过滤器
数据过滤器功能 在DataV中可以使用数据过滤器，可以通过自定义JavaScript代码，实现数据结构转换、数据筛选展示和一些简单的计算。前提条件 已进入画布编辑器页面。新建过滤器 您可以通过以下两种方法新建过滤器。通过 数据过滤器 新建。在...
应用场景
实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线，您可以实时接入APP、WEB、IoT和数据库等产生的异构数据，统一管理，并投递到下游的分析、归档等系统，构建清晰的数据流，让您更好的释放数据的价值。...
大数据安全治理的难点
存储 众所周知，大数据系统以数据类型多（结构化、非结构化、半结构化）、数据量大（动辄PB级别）著称，某些巨头组织一天就能新增数十万甚至数百万张表，如此体量给数据分级分类带来了极大挑战，通过人工进行数据分级分类显然是不现实的，...
输入节点
当选择*（任意结构）时，代表数据结构为任意结构，适用于未创建数据模型的场景。说明 模型名称支持复制，将鼠标移动至已选择模型时，单击 图标，即可复制模型名称。开发配置 开发计算资源 开发场景中的计算资源，用于在开发环境中运行该...
输入节点
当选择*（任意结构）时，代表数据结构为任意结构，适用于未创建数据模型的场景。说明 模型名称支持复制，将鼠标移动至已选择模型时，单击 图标，即可复制模型名称。开发配置 开发计算资源 开发场景中的计算资源，用于在开发环境中运行该...
持久内存型性能白皮书
command_group 测试的数据结构，本案例中，依次测试下述数据结构：String Hash List Set Zset fieldcount 字段或元素个数，本案例中，String数据结构配置为1，其他数据结构配置为10。fieldlength 值长度，根据测试需求配置。threads YCSB...
持久内存型性能白皮书
command_group 测试的数据结构，本案例中，依次测试下述数据结构：String Hash List Set Zset fieldcount 字段或元素个数，本案例中，String数据结构配置为1，其他数据结构配置为10。fieldlength 值长度，根据测试需求配置。threads YCSB...
TS
TairTS是基于Redis Module开发的时序数据结构，提供低时延、高并发的内存读写访问，及快速地过滤、聚合查询功能，集存储与计算为一体，在简化了处理时序数据流程的同时，大幅度提高了性能。TairTS简介 相比 RedisTimeSeries，TairTS提供了...
Btree-GIST
这意味着开发者不仅能够为常规数据类型比如整数和字符串创建索引，还可以为地理空间数据、全文搜索、数组和其他更复杂的数据结构创建索引。Btree-GIST便是基于此特性扩展而来。支持多种查询：GIST索引可以支持不同的查询操作，包括等于、不...
技术发展趋势
生产处理智能化 企业视之为有价值的数据，不再仅仅限于结构化数据，大量半结构化数据（如日志）、非结构化（音视频）等等比例在持续增加。IDC在《Data Age 2025》的报告中预测到2025年非结构化数据占企业数据的80%以上，并且以每年55%的...
分析MaxCompute外部表数据
大数据计算服务（MaxCompute，原名ODPS）是一种快速、完全托管的TB/PB级数据仓库解决方案。MaxCompute的非结构化框架支持通过INSERT方式将MaxCompute的数据直接输出到OSS。MaxCompute也支持通过外部表关联OSS，进行数据输出。由于...
配置资产数据
数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器，可在 设置数据源 页面配置数据过滤器脚本，详情请参见 数据过滤器使用说明 章节。数据响应结果 实时展示了资产所使用的数据。当资产数据源发生变化时...
功能简介
支持在离线数据同步、实时数据同步任务中引用已添加的数据模板，根据数据模板定义的数据结构执行数据同步任务。离线数据同步 支持单表离线任务、批量离线任务的新建。支持自定义选择已经注册的数据源端数据和目标端，支持多种常见离线同步...
产品优势
无论是数据湖中的非结构化或半结构化数据，还是数据库中的结构化数据，您都可使用 AnalyticDB MySQL 构建企业的数据分析平台，同时完成高吞吐离线处理和高性能在线分析，实现降本增效。弹性能力和扩展性 AnalyticDB MySQL版 采用云原生技术...
数据同步
支持在离线数据同步、实时数据同步任务中引用已添加的数据模板，根据数据模板定义的数据结构执行数据同步任务。离线数据同步 支持单表离线任务、批量离线任务的新建。支持自定义选择已经注册的数据源端数据和目标端，支持多种常见离线同步...
功能简介
支持在离线数据同步、实时数据同步任务中引用已添加的数据模板，根据数据模板定义的数据结构执行数据同步任务。离线数据同步 支持单表离线任务、批量离线任务的新建。支持自定义选择已经注册的数据源端数据和目标端，支持多种常见离线同步...
E-MapReduce弹性低成本离线大数据分析
离线大数据分析概述 主流的三大分布式计算框架系统分别为Hadoop、Spark和Storm：Hadoop可以运用在很多商业应用系统，可以轻松集成结构化、半结构化以及非结构化数据集。Spark采用了内存计算，允许数据载入内存作反复查询，融合数据仓库、流...
缓存分析
只支持分析Redis数据结构和以下Tair自研数据结构：TairString、TairHash、TairGIS、TairBloom、TairDoc、TairCpc、TairZset，暂不支持分析其他Tair自研数据结构。如果目标Redis实例规格已发生变更，则不支持分析实例变更前的备份文件。暂不...
基本介绍
核心特性 云数据库HBase增强版的内核来自于云原生多模数据库Lindorm宽表引擎，作为面向大数据领域的NoSQL服务，专注于低成本、高扩展、智能化的半结构化和非结构化存储场景，完全兼容HBase协议。目前，云原生多模数据库Lindorm是阿里集团最...
外部表概述
外部表示例 您可以通过以下示例，深入了解通过MaxCompute外部表功能处理各种非结构化数据的方法：访问OSS和TableStore（OTS）非结构化数据，请参见 访问OSS非结构化数据 和 访问OTS非结构化数据。外部表访问OSS的账号，在RAM中自定义授权...
受众与核心能力
产品定位 DataWorks致力于为数据开发者、数据分析师、数据资产管理者，打造一个具备开放自主开发与全栈数据研发能力的一站式、标准化、可视化、透明化的智能大数据全生命周期云研发平台。DataWorks赋予用户仅通过单一平台，即可实现数据...
产品架构
结构迁移：在迁移数据之前，DTS需要在目标数据库中重新创建数据结构。对于异构数据库之间的迁移，DTS会解析源数据库的DDL代码，将代码转换成目标数据库的语法，然后在目标数据库中重新创建结构对象。全量数据迁移：在全量数据迁移阶段，DTS...
常见问题
Tair 内存型（兼容Redis 6.0）：完全兼容Redis社区6.2版本及以下版本接口，额外支持Tair扩展数据结构。Tair 内存型（兼容Redis 5.0）：完全兼容Redis社区5.0版本及以下版本接口，额外支持Tair扩展数据结构。Tair 持久内存型：兼容Redis社区...
数据源中心
EMR Workflow的数据源中心支持配置数据源，以满足不同的数据存储和访问需求。本文为您介绍如何创建、编辑和删除数据源。使用限制 数据源所在的集群和运行工作流时选择的集群需要在同一VPC下。创建数据源 进入数据源中心页面。使用阿里云...
导出结构和数据
导出任务生成后会自动弹出 工单 面板，在 导出 列表中可以查看任务审批状态、任务信息并下载导出的数据结构文件。导出 任务列表中包含如下信息：信息项 说明 编号 导出任务编号。类型 显示新建任务时指定的任务类型。工单描述 显示发起任务...
什么是云原生内存数据库Tair
更丰富的数据结构 提供TairString，TairHash，TairGIS，TairCpc，TairBloom等多种扩展数据结构，极大降低用户的开发成本，更有利于业务创新。说明 更多信息，请参见 产品优势 和 应用场景。实例存储介质 随着互联网的高速发展，业务场景变...
应用场景
互联网类应用 Cassandra能够支持大并发低延时的访问需求，具备高可用和弹性扩容能力，适合日志、消息、feed流、订单、账单、网站等各种大数据量的互联网在线应用场景。多活 Cassandra原生支持多DC部署方式，实现更好的可用性和容灾能力。云...
自建Oracle间迁移
DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以平滑地完成Oracle数据库的数据迁移。前提条件 自建Oracle数据库的版本为9i、10g、11g、12c、18c或19c版本。自建Oracle数据库已开启ARCHIVELOG（归档模式），...
基本概念
数据结构多样时，可以选择将结构化数据存储在Lindorm，将非结构化数据存储在MongoDB，满足业务的多样化存储需求。更多信息，请参见 什么是云数据库MongoDB版。O OSS 对象存储服务（Object Storage Service，简称OSS）是阿里云提供的海量、...
自建Oracle迁移至RDS MySQL
DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在本地应用不停服的情况下，平滑地完成Oracle数据库的数据迁移。前提条件 已创建源数据库自建Oracle和目标实例 RDS MySQL。说明 目标实例 RDS MySQL 的创建...
2023年
使用do-while节点实现复杂的数据分析 2023-09-20 新增通过跨项目数据访问实现不同地域MaxCompute项目数据迁移 新说明 本文为您介绍如何通过跨项目数据访问实现不同Region的MaxCompute项目数据迁移，包括两种使用场景：同云账号内不同Region...
大数据用户画像解决方案
方案总览 作为面向大数据场景的半结构化、结构化存储系统，Lindorm可以很好的满足用户画像：没有强事务要求，大数据量、高并发读写场景这样的业务特征。其架构如下图所示：方案优势 1.低成本：集群内单表冷热分离能力、独有的压缩优化能力...
自建Oracle迁移至云原生数据仓库 AnalyticDB ...
警告 此场景属于异构数据库间的数据迁移，DTS在执行结构迁移时数据类型无法完全对应，请谨慎评估数据类型的映射关系对业务的影响，详情请参见 异构数据库间的数据类型映射关系。不兼容触发器。建议您删除源库的触发器，以避免因触发器而...
自建Oracle迁移至RDS PostgreSQL
DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在本地应用不停服的情况下，平滑地完成Oracle数据库的数据迁移。前提条件 自建Oracle数据库的版本为9i、10g、11g、12c、18c或19c版本。自建Oracle数据库已...
- 产品推荐
- 这些文档可能帮助您