核心能力
自定义表属性、自定义数据元属性等元模型设计。全面、准确的数据质量评估报告 多种类型数据源自定义表及字段质量规则配置。支持自定义SQL质量规则。多维度数据质量评估，可视化质量评估报告。数据资产的管理、服务与敏捷交付，使用数据资产...
交叉透视表
单击 图标，即可复制当前选中数据元信息配置内容并新增一个同样配置的数据元信息。单元格 单元格尺寸：设置单元格的宽度和高度。您可单击 打开或关闭 单元格尺寸 设置功能。单击右侧的 或 图标，添加或删除一个宽度或高度信息。单击 或 ...
构建数据仓库
用户的应用场景复杂，对非结构化的语音、自然语言文本进行语音识别、语义分析、情感分析等，同时融合结构化数据搭建企业级的数据管理平台，并且计算和存储成本最低。平台支撑多种形式的应用，包括使用机器学习算法进行复杂数据分析、使用BI...
功能简介
字段设计需要在数据标准的约束下，通过模型设计过程中引用标准数据元定义，设置逻辑表相关标准质量规则，保证不同的逻辑表设计人员按照统一口径进行操作。数据开发 提供一站式计算节点开发能力，一体化管理数据加工流程的开发、部署、调试...
基本概念
数据元：表示一个数据的最小信息项，包含基本的描述、值域范围和约束规则。生命周期：指的是表的生命周期，指表（分区）数据从最后一次更新的时间算起，在经过指定的时间后没有变动，则此表（分区）将被数据库（例如：MaxCompute）自动回收...
交叉透视表
数据元信息：设置表格中每一行或每一列表头的显示名。单击右侧的 或 图标，添加或删除一个数据元信息。单击 或 图标配置多个数据元信息的排列样式。单元格 单元格尺寸：设置单元格的宽度和高度。您可单击 打开或关闭 单元格尺寸 设置功能。...
开通DataV服务
本文为您介绍开通DataV服务的方法。操作步骤 登录 DataV控制台。阅读相关协议，并选中 同意使用协议，单击 立即开通。...后续步骤 购买成功后，可进入DataV数据可视化控制台，使用 模板搭建数据看板 或者 空白画布搭建数据看板。
可视分析创作间和传统BI软件差异比较
预定义的报告 需要行业数据经验专家，搭建数据报表 分析过程需要理解：维度、度量、数据类型等统计知识 可视化数据的图表配置也需要专业数据分析人员支持 支持二次分析 不支持二次分析 数据分析结果 数据集产生的所有见解，提炼在数据...
数据膨胀诊断
每个Page包含Header（数据头）、Item pointer array（指向内部数据的指针数组）、Unused space（未使用空间量）和Tuples（数据元组）。INSERT数据时，会从Page的未使用空间中分配新的Tuple。如果当前Page的未使用空间不足时，会分配新的...
从这里开始
DataV旨在让更多的人看到数据可视化的魅力，帮助非专业的工程师通过图形化的界面轻松搭建专业水准的数据看板，满足您会议展览、业务监控、风险预警和地理信息分析等多种业务的展示需求...开通DataV服务 模板搭建数据看板 空白画布搭建数据看板
DLA Lakehouse实时入湖
源头数据元信息不确定或变化大，需要⾃动识别和管理；简单的元信息发现功能时效性不够。全量建仓或直连数据库进行分析对源库造成的压⼒较大，需要卸载线上压⼒规避故障。建仓延迟较⻓（T+1天），需要T+10m的低延迟入湖。更新频繁致小文件多...
准备工作
本文为您介绍在使用空白画布搭建数据看板前，需要完成的准备工作。准备内容 已开通DataV服务。已确定最终效果图样式。已根据效果图计算出需要添加的组件名称和数量。开通DataV服务 请参见 开通DataV服务。数据看板-最终效果图 数据看板-...
产品优势
产品功能全 功能涵盖数据传输、开发、生产、治理、安全全领域，每个领域深度覆盖大数据全生命周期，轻松帮助企业应对在搭建数仓、搭建数据中台、数字化转型项目中遇到的难题。支持复杂网络环境、常见数据源的数据同步上云以及实时、历史...
数据建模：智能数据建模
智能数据建模是阿里云DataWorks自主研发的智能数据建模产品，沉淀了阿里巴巴十多年来数仓建模方法论的最佳实践，包含数仓规划、数据标准、维度建模及数据指标四大模块，帮助企业在搭建数据中台、数据集市建设过程中提升建模及逆向建模的...
自建数据库与RDS性能对比的注意事项
您可以自行搭建数据库，或者购买阿里云RDS实例。推荐您购买RDS实例，因为它完全由阿里云托管，而且有完备的安全、备份、恢复、扩容、性能优化等机制，您无需执行各种安全措施（如搭建备库）和维护工作，只需专注于业务的发展和创新。关于自...
自建数据库与RDS性能对比的注意事项
您可以自行搭建数据库，或者购买阿里云RDS实例。推荐您购买RDS实例，因为它完全由阿里云托管，而且有完备的安全、备份、恢复、扩容、性能优化等机制，您无需执行各种安全措施（如搭建备库）和维护工作，只需专注于业务的发展和创新。关于自...
自建数据库与RDS性能对比的注意事项
您可以自行搭建数据库，或者购买阿里云RDS实例。推荐您购买RDS实例，因为它完全由阿里云托管，而且有完备的安全、备份、恢复、扩容、性能优化等机制，您无需执行各种安全措施（如搭建备库）和维护工作，只需专注于业务的发展和创新。关于自...
操作流程
通过Excel导入 将Excel表里的逻辑表表名、字段信息、所属层级、关联信息导入数据模型管理，便于客户快速搭建数据仓库。具体操作，请参见 通过Excel导入逻辑表。配置逻辑表关联标准字段 通过关联数据标准中的标准字段，实现字段值的统一和...
操作流程
通过Excel导入 将Excel表里的逻辑表表名、字段信息、所属层级、关联信息导入数据模型管理，便于客户快速搭建数据仓库。具体操作，请参见 通过Excel导入逻辑表。配置逻辑表关联标准字段 通过关联数据标准中的标准字段，实现字段值的统一和...
方案背景
本文以车联网场景中车辆元数据为例介绍基于设备接入平台与表格存储Tablestore搭建车辆元数据管理平台的场景需求以及方案架构。场景需求 车辆在行驶的过程中会定时上报大量的状态数据，例如车辆识别代码、行驶速度、发动机转速、车内温度等...
方案背景
本文主要为您介绍搭建海量智能元数据管理系统的技术点以及使用表格存储搭建智能元数据管理系统的方案。用户存储海量的文档、媒体文件等数据的同时，对文件元数据（Meta）的管理不可或缺。元数据拥有多维度的字段信息，基本信息包含文件大小...
图扑案例
现有解决方案中，通常依赖自建单ElasticSearch检索引擎或OpenTSDB、Prometheus等时序引擎搭建数据存储，而采集数据类型多样化使得单模引擎存储方案技术复杂且运维成本高，市场需要新一代云原生且具备多模检索能力的存储系统。某著名IT咨询...
产品优势
特性 Lindorm时序引擎 OpenTSDB 运维管控 服务可用性 99.9%需自行保障，自行搭建集群，自建组件依赖 数据可靠性 99.9999%需自行保障，自行搭建集群，自建组件依赖 软硬件投入 无软硬件投入，按需付费 数据库服务器成本相对较高 维护成本 ...
方案实现
本文主要介绍如何使用表格存储搭建海量智能元数据管理系统。前提条件 已完成 准备工作。步骤一：创建数据表 通过以下两种方式创建一张店铺信息表：通过控制台创建和管理数据表。具体操作，请参见 创建数据表。通过SDK直接创建和管理数据表...
准备工作
本章节主要为您介绍使用表格存储搭建海量智能元数据管理系统前的准备工作。开通表格存储 已开通表格存储服务。具体操作，请参见 开通表格存储服务。创建表格存储实例 实例 是您使用和管理表格存储服务的实体，每个实例相当于一个数据库。...
概述
但RDS、PolarDB for MySQL、MongoDB或者ECS自建数据库的计算能力有限，如果直接使用RDS、PolarDB for MySQL、MongoDB或者ECS自建数据库搭建数据仓库，会占用线上业务的计算资源从而会影响业务的运行。如果使用自建开源大数据生态体系，例如...
应用场景
3.实时数据仓库 3.1 数据总线替换传统数据库，构建实时数仓 从Lambda架构到Kappa架构，通过数据总线搭建原始数据层，实时明细层和实时汇总层，打造实时数据仓库。3.2 收益 统一的Kappa架构 传统Lambda架构的两条链路缩减为一条，大大降低...
备份集查询功能概览
搭建离线数据仓库：您可以将DBS备份数据作为数据湖存储，搭建离线数据仓库，实现湖仓一体，挖掘数据价值。应对审计需求：全量备份数据保存在DBS中，若有临时审计需求，可以快速过滤出需要的数据进行审计分析。快速定位数据：库-表-分区的新...
通过Push模式创建数据订阅
本文介绍通过创建Lindorm Streams实现数据订阅功能，数据订阅功能的Push模式是将 云原生多模数据库 Lindorm 表格的增量数据推送至下游消息队列Kafka，您可以根据自身业务需求自由消费增量数据，搭建或实现多种业务场景。推送流程 数据订阅...
开通数据订阅
您可以在Lindorm管理控制台开通数据订阅功能，并根据自身业务需求消费增量数据，搭建多种业务场景。本文介绍在控制台开通数据订阅功能的方法。前提条件 已开通宽表引擎。操作步骤 数据订阅功能需要在控制台完成两次开通操作，分别购买流...
实时数据订阅概述
云原生多模数据库 Lindorm 支持实时数据订阅功能，实时数据订阅功能帮助您获取Lindorm的实时增量数据，您可以根据自身业务需求自由消费增量数据，搭建或实现多种业务场景。背景信息 云原生多模数据库 Lindorm 数据订阅功能支持任何一个表的...
功能介绍
本文介绍通过Lindorm Streams实现数据订阅功能，数据订阅功能将云数据库HBase增强版（云原生多模数据库Lindorm）表格的增量数据推送至下游消息队列Kafka，您可以根据自身业务需求自由消费增量数据，搭建或实现多种业务场景。推送流程 数据...
恢复SQL Server物理备份
支持恢复的数据库类型 目标数据库类型 说明 ECS自建数据库 需手动搭建目标数据库环境。可通过阿里云专有网络（VPC）实现快速恢复，VPC支持更安全稳定的网络连接。更多详情，请参见 什么是专有网络。本地自建数据库 需手动搭建目标数据库...
同步 OceanBase 数据库的数据至 Kafka
背景信息 Kafka 是目前广泛应用的高性能分布式流计算平台，数据传输支持 OceanBase 数据库两种租户与自建 Kafka 数据源之间的数据实时同步，扩展消息处理能力，广泛应用于实时数据仓库搭建、数据查询和报表分流等业务场景。前提条件 数据...
功能简介
添加数据的同时支持各类型空间数据的元信息自动解析，支持按空间对平台所有空间数据进行统一检索、统计和管理。数据管理 支持添加单文件、多文件、数据库等多种形态，矢量、栅格、倾斜摄影等多种类型数据，同时可通过上传文件和基于OSS共享...
空间数据（邀测中）
添加数据的同时支持各类型空间数据的元信息自动解析，支持按空间对平台所有空间数据进行统一检索、统计和管理。数据管理 支持添加单文件、多文件、数据库等多种形态，矢量、栅格、倾斜摄影等多种类型数据，同时可通过上传文件和基于OSS共享...
调试实时任务
附录：自动抽样的调试数据 通过本地调试的自动抽样调试任务时，读取的调试数据根据元表的配置决定。详细说明如下：元表属性的 任务调试时默认读取 参数选中 开发表。若任务中使用的是 Project_Name_dev.元表名，则自动抽取开发元表。如果...
调试实时任务
附录：自动抽样的调试数据 通过本地调试的自动抽样调试任务时，读取的调试数据根据元表的配置决定。详细说明如下：元表属性的 任务调试时默认读取 参数选中 开发表。若任务中使用的是 Project_Name_dev.元表名，则自动抽取开发元表。如果...
计费方式
000元/月 60,000元/月 旗舰版80实例 支持审计的数据库个数：80个 吞吐量峰值：45,000条SQL/秒 850 Mbps数据库流量峰值 20亿条在线SQL语句存储 默认6 TB存储空间，支持弹性扩容存储空间 60,000元/月 85,000元/月 日志存储空间支持扩容，扩容...
文档更新动态（2022年之前）
更新说明 逻辑表实例 2021年08月24日 离线整库迁移 为了丰富元表的数据来源，支持基于Hologres数据源新建元表为了满足更丰富的场景，Dataphin支持将本地数据中心或在ECS上自建的数据库同步至Hive、MaxCompute、Oracle和AnalyticDB for ...
- 产品推荐
- 这些文档可能帮助您