应用场景
互联网类应用 Cassandra能够支持大并发低延时的访问需求，具备高...在一些需要应用大量数据对用户行为进行分析的场景中，可以通过整合多种数据来源，存储用户行为数据，构建用户画像，实时存储在Cassandra中，提供大数据风控、推荐等服务。
MaxFrame概述
背景信息 基于Python语言的易读性、高效开发及开放生态等优势，Python已经成为科学计算、机器学习以及AI开发领域的事实标准和主流编程语言，其整合了数据分析、机器学习等各类第三方包，如Pandas（数据处理与分析）、NumPy（数值计算）、...
DataWorks On CDP/CDH使用说明
CDP是跨平台收集和整合客户数据的公共数据平台，可帮助您收集实时数据，并将其构建为单独的用户数据使用。您可在DataWorks中注册CDH及CDP集群，基于业务需求进行相关任务开发、调度、数据地图（元数据管理）和数据质量等一系列的数据开发和...
缓存数据持久化
当您使用云数据库RDS MySQL并需要提升数据处理速率和降低访问延迟时，阿里云为您提供了缓存数据持久化的高效方案，该解决方案通过整合云数据库Redis与RDS、云数据库Memcache与RDS协同工作，确保数据的高速访问和持久化存储，具备高吞吐、低...
数据标准
数据是由特定的环境产生的，这些环境因素包括生产者、时间、系统等，从而造成了同一个语义的数据，有多种不同的定义方法，给后期进行数据汇集和整合带来障碍。因此，数据处理的前奏就是数据标准化，数据标准作为一个统一的数据共识，在标准...
功能概览
1.4 生态融合 系出飞天，与阿里云大数据系统深度整合，无缝对接MaxCompute、实时计算、交互式分析等产品，打通整个大数据体系。2.产品功能 2.1 数据接入 提供多种SDK、API和Flume、Logstash等第三方插件，让您高效便捷的把数据接入到数据...
新用户必读
数据可视化：您可以通过 AnalyticDB MySQL 兼容的BI工具，对 AnalyticDB MySQL 中的数据进行有效整合，快速准确地提供报表并提出决策依据。通过元数据发现导入至湖仓版：元数据发现功能可以自动发现与 云原生数据仓库AnalyticDB MySQL版 湖...
开启多表归并
该功能支持将源库中结构相同的多个表进行整合，一键合并到目标库的单个数据表之中，实现更高效、便捷的数据迁移和整合操作。前提条件 已创建目标库为 云原生数据仓库AnalyticDB MySQL版 3.0、云原生数据仓库AnalyticDB PostgreSQL版 或表格...
Smartbi
Smartbi可以将您现有的数据进行有效整合，快速准确地提供报表并提出决策依据，帮助做出明智的业务经营决策。本文介绍如何通过Smartbi连接 云原生数据仓库AnalyticDB MySQL版 集群。前提条件 已下载并安装Smartbi V8.5及以上版本。已创建 ...
数仓分层
主要完成数据加工与整合，建立一致性的维度，构建可复用的面向分析和统计的明细事实表，以及汇总公共粒度的指标。公共维度层（DIM）：基于维度建模理念思想，建立整个企业的一致性维度。降低数据计算口径和算法不统一风险。公共维度层的表...
创建概念模型：维度
应用层基于实际应用需求，获取公共层加工整合后的数据，面向具体业务建立业务层面的维度，进行持续的个性化数据建设及改造。您可根据需求选择创建公共层或应用层维度，不同数仓分层创建维度的准备工作如下表。数仓分层 准备事项 参考链接 ...
数仓分层
主要完成数据加工与整合，建立一致性的维度，构建可复用的面向分析和统计的明细事实表，以及汇总公共粒度的指标。公共维度层（DIM）：基于维度建模理念思想，建立整个企业的一致性维度。降低数据计算口径和算法不统一风险。公共维度层的表...
创建数仓分层
应用层：基于实际应用需求，获取公共层加工整合后的数据，进行持续的个性化数据建设及改造。该层级可挂载 应用表、维度表、维度，以及 维度表、维度（即维度表和维度的组合）。其他：用于存放存量创建的系统默认层级及用户自定义的层级。...
数据模型架构规范
它的主要作用是完成数据加工与整合、建立一致性的维度、构建可复用的面向分析和统计的明细事实表以及汇总公共粒度的指标。DWD：Data Warehouse Detail，明细数据层。DWS：Data Warehouse Summary，汇总数据层。ADS：Application Data ...
处理接口
使用glob模块对数据进行一次整合。将如下示例程序保存为js脚本文件，并在Node.js环境中运行。以下方式不适用大批量的数据。将文件名也就是日期作为key，对应的内容作为值，得到一个all.json整合文件。var fs=require('fs');var csv=require...
创建逻辑模型：维度表
应用层基于实际应用需求，获取公共层加工整合后的数据，面向具体业务建立业务层面的维度表，进行持续的个性化数据建设及改造。您可根据需求选择创建公共层或应用层维度表，不同数仓分层创建维度表的准备工作如下表。数仓分层 准备事项 参考...
ApsaraDB For OceanBase数据源
实时读 OceanBase为分布式关系型数据库，可以使物理分布不同的多个数据库上的数据，被整合为一个完整的逻辑数据库。但实时同步OceanBase的数据至 AnalyticDB for MySQL，目前仅支持同步单个物理库的数据，不支持同步逻辑库数据。说明 在整...
维度建模概述
公共层：用于加工、整合贴源层输入的公共数据，建立统一的指标维度，构建可复用面向分析和统计的明细事实数据和汇总数据。该层级支持使用 数据域 或 业务分类 视角管理模型表。应用层：基于实际应用需求，获取公共层加工整合后的数据，面向...
使用ETL分析实时订单
应用场景 为满足企业处理实时数据的需求，ETL提供了流式数据抽取、加工和加载功能，能够高效整合海量实时数据，支持拖拽式操作和低代码开发方式，帮助企业轻松完成商业决策分析、报表提速、实时数据计算等。企业在数字化转型过程中，涉及...
备份恢复概览
基线数据代表了已整合并持久化到硬盘的全部数据总和，它被智能地分割为多个分片，并制作成多个副本，均衡且分散地储存在各 OBServer 的数据文件中，这一过程即我们所称的“数据备份”。增量数据则涵盖了自最新合并时间点以来的所有实时更新...
资产全景
流动模式：展示数据的流入、整合与输出过程，更直观的体现数据加工流向。结构化模式：以不同形状的组件表示业务实体，以不同样式的连线表示实体之间的关联关系。为您清晰展示同一业务板块下的数据结构。全局模式 在Dataphin首页，单击顶部...
资产全景
流动模式：展示数据的流入、整合与输出过程，更直观的体现数据加工流向。结构化模式：以不同形状的组件表示业务实体，以不同样式的连线表示实体之间的关联关系。为您清晰展示同一业务板块下的数据结构。全局模式 在Dataphin首页，单击顶部...
湖仓一体
Catalog功能扩展了SelectDB的能力，使其不仅限于管理内部数据，还能高效整合和查询外部数据源。通过使用Catalog，您可以快速访问和分析存储在不同数据仓库和存储系统中的数据，从而实现更加灵活和全面的数据管理和分析。基础概念与操作 ...
表设计最佳实践
在写入数据前进行数据的采集和整合，整合好后，一次性提交数据（通常是每64 MB提交1次）。日志数据很少会对原来分区执行更新操作，可以用INSERT操作进行少量数据的插入，但通常需要限制插入次数。如果有大量的更新操作，需要采用INSERT ...
创建逻辑模型：汇总表
销售类 数据域 选择汇总表所挂载的数据域，用于确定汇总表需要整合呈现的统计数据主题。创建数据域，详情请参见 数据域。说明 每个汇总表只能挂载至一个数据域中。交易域 粒度 选择已创建的维度。创建维度，详情请参见 创建概念模型：维度...
新零售：杭州数云信息技术有限公司
数云致力于为消费品牌和零售品牌商提供整合软件产品、数据模型和专业服务的一站式数据化营销解决方案。数云以软件产品为主线，以营销效果为导向，帮助企业深度挖掘大数据价值，持续构建自身的核心竞争优势。实现了以全渠道客户数据管理平台...
基本概念
预案 预案即数据看板的序列化整体展示，通过对数据看板进行序列化整合，再加上轮播设置和安全设置后，就变成了演示预案。通过投屏预案可以快速实现数据处理，为工作汇报增光添彩。投屏 投屏即将演示预案以幻灯片的形式展示在大屏幕上，此时...
查询概述
云数据库 SelectDB 版 高度兼容MySQL相关生态，支持湖仓一体化，并确保了上游与下游数据生态系统的无缝整合。本文介绍SelectDB在查询方面的能力概述。基础能力 云数据库 SelectDB 版 支持标准SQL语法，在SQL方言方面向MySQL兼容。采用MySQL...
保险行业解决方案与案例
推动技术架构和技术标准的统一，实现系统间整合和内通外联，同时，基于大后台+小前端移动互联布局，联合信创合作方，攻克多项技术难题，在业内率先建设信创混合云，其中数据库是整体分层架构中的关键组成部分，也是信创工作中的重点和难点...
规划工作空间
标签数据层（TDM）：整合为一个统一的工作空间，或按照业务对象划分。任务节点：只有多输入、单一产出的SQL任务。数据表：标签表。空间成员：数据公共层专职开发人员。资源倾斜：中晚期（例如5点~7点）的调度资源组、引擎计算资源、存储...
概述
实时数据分析 实时数据分析指的是根据业务目标，从原始数据中抽取对应信息并整合的过程。例如，查看每天销量前10的商品、仓库平均周转时间、文档平均单击率和推送打开率等。实时数据分析则是上述过程的实时化，通常在终端体现为实时报表或...
混合存储型（已停售）
云原生内存数据库Tair 混合存储型整合了内存和磁盘二者的优势，在提供高速数据读写能力的同时满足了数据持久化的需求。说明 混合存储型已停止售卖，更多信息，请参见【通知】混合存储型实例停止售卖，推荐选择 持久内存型 实例。简介 图 1....
客户案例
客户简介 快狗打车则一直坚持通过“连接网络化”、“运力共享化”、“过程数据化”、“匹配智能化”等数字信息化解决方案，将闲散运力统一整合到平台上，通过大数据将运力精准匹配市场需求，实现运力的节能减排，降低空驶率，有效提升行业...
数据加工过程卡点校验
数据在数据仓库中进行清洗、加工、整合、算法和建模等一系列运算后，再通过同步工具输出到数据产品中进行消费。整个流程中，先有数据加工，才有数据仓库模型和数据仓库代码的建设。因此，保障数据加工过程中的质量是保障离线数据仓库整体...
数据资产等级定义
MaxCompute进行数据加工基本流程为从业务系统上产生数据，通过同步工具（DataWorks的数据集成或阿里云DTS）进入数据数仓系统（MaxCompute），数据在数仓中进行清洗、加工、整合、算法、模型等一系列运算后，再通过同步工具输出到数据产品中...
混合存储型（已停售）
与 Redis社区版 不同，Tair 混合存储型整合了内存和磁盘二者的优势，在提供高速数据读写能力的同时满足了数据持久化的需求。说明 混合存储型已停止售卖，更多信息，请参见【通知】Redis混合存储型实例停止售卖。推荐选择 持久内存型 实例。...
离线同步数据质量排查
如果写出数据和目标存储已有数据发生数据约束（主键冲突、唯一键约束、外键约束等），数据库则使用来源数据update更新目标表已有数据行，在目标表存在多个数据约束的情况下，数据替换可能会失败并产生脏数据 如果写出数据和目标存储已有...
管理数据
企业管理员使用数据域可以基于业务属性、组织架构、数据特征等维度对数据资产进行分类管理。通过将拥有共同属性的数据资产集中到同一个数据域中，管理员可以高效管理数据资产及资产中的敏感数据。本文介绍首次使用数据域功能的具体操作。...
用户价值
数据资源平台为用户提供了一站式数据资产定义、生产、管理与服务平台，提供企业级数据资产构建能力和一致性使用体验，助力客户快速构建数据智能平台，实现数据资源统一管理，挖掘潜在规律，优化业务决策，让大数据真正的驱动客户业务。...
数据上传
DataWorks的数据上传功能支持将本地文件、数据分析的电子表格、OSS文件等数据上传至MaxCompute、EMR Hive、Hologres等引擎进行分析及管理，为您提供便捷的数据传输服务，助力您快速实现数据驱动业务。本文为您介绍如何使用数据上传功能上传...
- 产品推荐
- 这些文档可能帮助您