CDM接口数据层设计规范
本文为您介绍CDM接口数据层设计规范。接口数据层将不同数据域的汇总数据预关联在一个...如果一个汇总表出现混合多个数据域时，表名称中需要使用hbd（hybrid 缩写）进行标识，这种情况当前只用于准实时情况，离线计算不建议跨数据域存储数据。
基于Tair与LLM构建企业专属Chatbot
因此，可以使用 云原生内存数据库Tair 作为大语言模型的外部存储，将私域数据和长期对话记录存储在Tair向量检索中，结合Tair高效的向量检索能力与大语言模型的AI能力，使企业专属Chatbot更加智能。Tair特性与优势 Tair向量检索是在 云原生...
创建逻辑模型：维度表
存储策略 维度表基于什么策略（即存储数据的时间周期及数据量范围）存储数据。维度 维度表关联的维度，用于配置维度表分析数据的视角。说明 创建维度，详情请参见 创建概念模型：维度。表名规则 通过已配置的检查器规范维度表的命名规则。...
概述
数据建模的必要性 海量数据的标准化管理 企业业务越庞大数据结构就越复杂，企业数据量会随着企业业务的快速发展而迅速增长，如何结构化有序地管理和存储数据是每个企业都将面临的一个挑战。业务数据互联互通，打破信息壁垒 公司内部各业务...
案例介绍
基于 主题域 的划分原则，零售事业群的数据域划分详情如下：会员（消费者）域 商品域 门店域 交易域 供应链域 履约域 营销域 服务域 流量域 公共域 确定维度与业务过程。您可以按照以下步骤，梳理维度和业务过程：列举出业务活动，下表仅...
数仓规划概述
数仓规划是基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前，需要完成数据仓库的规划，包括定义数据板块、项目、数据源、计算源和统计周期。功能介绍 数仓规划包括逻辑空间与物理空间...
逻辑结构说明
说明 在Dataphin 3.3版本，维度更名为业务对象，业务过程更名为业务活动，数据域更名为主题域，业务板块更名为数据板块。各层中核心概念的详细内容请参见下表。核心概念 简要含义 数据板块 数据板块定义了数据仓库的多种命名空间，是一种...
数仓规划概述
数仓规划是基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前，需要完成数据仓库的规划，包括定义数据板块、项目、数据源、计算源和统计周期。功能介绍 数仓规划包括逻辑空间与物理空间...
维度建模概述
维度表 结合业务的数据域的规划，提取出各业务数据域中进行数据分析时可能存在的维度，并将维度及其属性通过维度表的方式存储下来。例如，在进行电商业务数据分析时，可用的维度及其属性有：订单维度（属性包括订单ID、订单创建时间、买家...
数据建模：智能数据建模
适用场景 DataWorks智能建模可助力企业构建自身建模能力，挖掘企业的数据资产价值，例如：海量数据的标准化管理 企业业务越庞大数据结构就越复杂，企业数据量会随着企业业务的快速发展而迅速增长，如何结构化有序地管理和存储数据是每个...
公共汇总粒度事实层（DWS）
不跨数据域：数据域是在较高层次上对数据进行分类聚集的抽象。数据域通常以业务过程进行分类，如交易统一划到交易域下，商品的新增、修改放到商品域下。区分统计周期：在表的命名上要能说明数据的统计周期，如_1d 表示最近1天，td 表示截至...
Hologres开发规范
数据域的名称 数据域对应的缩写示例 交易域 trd 商品域 itm 日志域 log 会员和店铺域 mbr 供销存管理域 dst 销售和客服域 crm 信用和风控域 rsk 工具和服务域 tls 物流和快递域 lgt 命名规范 任务命名规范 任务命令时要区分内部任务还是...
公共汇总粒度事实层（DWS）
数据域通常以业务过程进行分类，例如交易统一划到交易域下，商品的新增、修改放到商品域下。区分统计周期。在表的命名上要能说明数据的统计周期，例如_1d表示最近1天，td表示截至当天，nd表示最近N天。公共汇总事实表规范 公共汇总事实表...
零售电商数据建模
基本信息 基本信息 值*数仓分层 公共层-维度层 业务分类 零售*数据域 商品域 存储策略 每日全量（df）维度 商品(sku)表名规则-（在“数仓分层-数仓规划”可以给每个层级配置强/弱表名检查器，新建表模型时可以选择对应的检查器，那么表名就...
关系图
逻辑模型-维度表：结合业务的数据域规划，提取出各业务数据域中进行数据分析时可能存在的维度，并将维度及其属性通过维度表的方式进行存储。逻辑模型-明细表：结合业务过程的规划，梳理分析各业务过程中可能产生的实际数据，将这些实际数据...
快速体验
DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力，本文以一个零售电商行业的数仓搭建实验为例，为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现，帮助您深入了解阿里云...
CREATE DOMAIN
CREATE DOMAIN 用于创建一个新的域。简介 CREATE DOMAIN 创建一个新的域。域本质上是一种带有可选约束（在允许的值集合上的限制）的数据类型。定义一个域的用户将成为它的拥有者。如果给定一个模式名（例如 CREATE DOMAIN myschema....
产品计费
数据域管理 该功能支持将具有相同特征的数据资产划分到同一个数据域中，从而高效管理数据资产及资产中的敏感数据。安全审计 DSC 根据内置和自定义的审计规则审计您的资产，并支持展示审计到的会话信息、原始日志和异常告警。数据脱敏 DSC ...
核心概念
本文为您介绍Dataphin中，业务板块、数据域、项目、维度、业务过程、维度逻辑表、事实逻辑表、原子指标等基本概念。数据板块 数据板块是逻辑空间的重要组成部分，是基于业务特征划分的命名空间。当数据的业务含义存在较大差异时，您可以...
什么是Dataphin
Dataphin是阿里巴巴集团OneData数据治理方法论内部实践的云化输出，一站式提供数据采、建、管、用全生命周期的大数据能力，以助力企业显著提升数据治理水平，构建质量可靠、消费便捷、生产安全经济的企业级数据中台。Dataphin兼容多种计算...
创建实例
容量型存储用于存储数据库中访问频率较低的历史数据（冷数据），从而降低存储成本。关于容量型存储的介绍，请参见 冷存储介绍。您可以在创建实例时选购容量型存储，也可以在实例创建完成后开通容量型存储。说明 当存储类型为容量型云存储时...
文档更新动态（2022年）
更新说明 购买指引 2022年07月19日 维度、业务过程、数据域升级 业务板块升级为数据板块，数据域升级为主题域。维度更名为业务对象，业务过程更名为业务活动，并增加三种子类型：事件、业务流程和业务快照。更新说明 创建并管理业务实体 ...
管理数据
步骤一：添加数据域 添加数据域前，建议您根据业务单元或组织架构等规划需要添加的数据域名称和层级关系（最多支持创建三级数据域），然后重复执行以下步骤添加多个数据域。您也可以使用批量导入功能添加数据域。具体操作，请参见 更多操作...
数据域
数据域是联系较为紧密的数据主题的集合，通常是根据业务类别、数据来源、数据用途等多个维度，对企业的业务数据进行的区域划分，将同类型数据存放在一起，便于您快速查找需要的内容。不同使用目的数据，分类标准不同。例如，电商行业通常...
新建数据域
通过新建数据域，实现对数据域的定义与管理，便于从数据域维度对数据模型进行分类管理，方便逻辑表设计时使用。本文介绍如何新建数据域。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标...
新建数据域
通过新建数据域，实现对数据域的定义与管理，便于从数据域维度对数据模型进行分类管理，方便逻辑表设计时使用。本文介绍如何新建数据域。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，...
审计日志
主题域 AddDataDomain 新增主题域（原数据域）。UpdateDataDomain 变更主题域（原数据域）。DeleteDataDomain 删除主题域（原数据域）。公共定义 AddStatisticalPeriod 新增统计周期。UpdateStatisticalPeriod 变更统计周期。...
客户案例
解决方案 友盟+联合MaxCompute构建开发者数据银行，为企业提供面向分析的、实现友盟域数据与企业私域数据全面融合的自助分析服务“U-DOP数据开放”。该服务通过订阅数据包返还数据到MaxCompute，预置分析模板并结合可视化分析BI工具来快速...
高效数据治理实施指南
DataWorks数据治理中心可协助数据治理团队建立数据治理框架、优化治理过程、提升治理效率，从而实现治理目标的高效突破。本文通过治理负责人的实操过程，为您介绍如何通过数据治理计划能力，高效设定和达成数据治理目标。背景信息 在多人...
COPY
COPY 用于在PolarDB表和标准文件系统文件之间移动数据。简介 COPY 在 PolarDB表和标准文件系统文件之间移动数据。COPY TO 把一个表的内容复制 到 一个文件，而 COPY FROM 则从一个文件复制数据到一个表（把数据追加到表中原有数据）。COPY ...
组合类型
接着，字符串被交给 text 数据类型的输入例程并且变成"\（如果我们使用的数据类型的输入例程也会特别处理反斜线，例如 bytea，在命令中我们可能需要八个反斜线用来在组合域中存储一个反斜线）。美元引用可以被用来避免双写反斜线。说明 当...
多值数据写入
时序多值模型 多值的模型是针对数据源建模，我们每一行数据针对的是一个数据源，它的被测量的多个指标在同一行上，所以每一个数据源，数据的来源在每一个时间点上都有一行，这就是多值的模型。比如某个机器的cpu，mem和load指标。每次是...
划分数据域
在划分数据域时，既能涵盖当前所有的业务需求，又能让新业务在进入时可以被包含进已有的数据域或扩展新的数据域。数据域的划分工作可以在业务调研之后进行，需要分析各个业务模块中有哪些业务活动。数据域可以按照用户企业的部门划分，也...
划分数据域
数据域 业务过程 会员店铺域 注册、登录、装修、开店、关店 商品域 发布、上架、下架、重发 日志域 曝光、浏览、单击 交易域 下单、支付、发货、确认收货 服务域 商品收藏、拜访、培训、优惠券领用 采购域 商品采购、供应链管理
XML 类型
它比直接在一个 text 域中存储 XML 数据的优势在于，它会检查输入值的结构是不是良好，并且有支持函数用于在其上执行类型安全的操作。使用这种数据类型要求在安装时用 configure-with-libxml 选项编译。xml 类型可以存储格式良好的遵循 XML...
全局变量管理
背景信息 全局变量可以理解为参数变量，用于管理作用域为全局的数据库变量，以及全局控制数据库的行为。在 ODC 全局变量页面可以查询和修改连接到当前数据源下所有数据库变量信息。查询全局变量 示例：在 SQL 开发窗口中，查询数据源 mysql...
Dataphin中业务板块、数据域和项目之间的关系
产品名称 Dataphin 产品模块 数据域 概述 本文描述Dataphin业务板块、数据域和项目之间的关系。问题描述 Dataphin业务板块、数据域和项目之间的关系是什么？问题原因 NA 解决方案 业务板块是逻辑空间的重要组成部分，是基于业务特征划分的...
识别任务说明
文件或表扫描限制 为了避免数据源中文件或表过大影响整体扫描进度，数据安全中心对可以扫描的文件大小或表的字段大小做了限制，请您在进行敏感数据扫描前了解以下规则：结构化数据（RDS MySQL、RDS PostgreSQL、PolarDB等）、大数据...
Dataphin如何快速找到某数据域下的指标？
概述 本文主要介绍快速找到某数据域下的指标的方法。详细信息 如何快如找到某数据域下的指标呢？方法如下：打开资产-地图，选择数据表。在筛选项中筛选项目、业务板块及相关数据域即可查看所属的指标。适用于 Dataphin 说明：本文适用于...
创建概念模型：维度
维度是您观察业务状况的视角，您可在维度建模中规划并创建维度，后续创建维度表时进行关联，关联后即可通过不同维度分析呈现不同视角的业务数据状况。如果您希望在维度表中直接关联使用已有维度，则可参考本文创建。本文为您介绍如何创建并...
- 产品推荐
- 这些文档可能帮助您