数据页面管理
在管理数据页面中，数据的类型分为 ...上传数据 管理数据页面中的数据类型有 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六大类，不同类型的数据可上传的数据格式互不相同，具体三种类型数据上传数据的详细说明请参见 上传数据。
概述
Serverless数据库能够使得数据库集群资源随客户业务负载动态弹性扩缩，将客户从复杂的业务资源评估和运维工作中解放出来。本文介绍了Serverless的工作原理、核心优势和适用场景。背景 数据库是现代企业IT系统中非常重要的一部分。在创建...
跨阿里云账号迁移MongoDB实例
如果数据库业务量较大或服务器规格较低，可能会加重数据库压力，甚至导致数据库服务不可用。建议您在执行数据迁移前谨慎评估，在业务低峰期执行数据迁移。单节点实例不支持使用DTS执行增量数据迁移，为保障数据一致性，全量数据迁移期间...
跨阿里云账号迁移MongoDB实例
如果数据库业务量较大或服务器规格较低，可能会加重数据库压力，甚至导致数据库服务不可用。建议您在执行数据迁移前谨慎评估，在业务低峰期执行数据迁移。单节点实例不支持使用DTS执行增量数据迁移，为保障数据一致性，全量数据迁移期间...
从MongoDB单节点实例迁移至副本集或分片集群实例
如果数据库业务量较大或服务器规格较低，可能会加重数据库压力，甚至导致数据库服务不可用。建议您在执行数据迁移前谨慎评估，在业务低峰期执行数据迁移。单节点实例不支持使用DTS执行增量数据迁移，为保障数据一致性，全量数据迁移期间...
案例介绍
零售事业群的业务形态分两大块，线上自营电商和线下商超，所涉及的主要业务流程有：供货商的采购、运输、仓储。消费者的下单、支付购买商品。线上销售与门店销售中的大件货物需要履约配送。线上与门店的营销活动，例如线上大促、线下打折等...
配置for-each节点
创建和配置业务流程 您需要创建一个上游为赋值节点，下游为for-each节点的业务流程：进入数据开发页面。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据...
创建解决方案
数据开发模式全面升级，包括工作空间>解决方案>业务流程三级结构，抛弃陈旧的目录组织方式。背景信息 DataWorks对数据开发模式进行全面升级，按照业务种类组织相关的不同类型的节点，让您能够更好地以业务为单元、连接多个业务流程进行开发...
加工数据
在 数据开发 页面，双击 采集数据 阶段创建的业务流程名，本案例业务流程名为 WorkShop。新建节点。在该业务流程下，右键单击 MaxCompute，选择 新建节点>ODPS SQL。本案例需要 依次 创建如下三个节点：dwd_log_info_di、dws_user_info_all...
加工数据
在 数据开发 页面，双击 采集数据 阶段创建的业务流程名，本案例业务流程名为 WorkShop。新建节点。在该业务流程下，右键单击 MaxCompute，选择 新建节点>ODPS SQL。本案例需要 依次 创建如下三个节点：dwd_log_info_di、dws_user_info_all...
参数节点
参数管理 当数据开发的业务流程中，下游节点的任务需要使用某些常量参数、变量参数时，您可以使用参数节点，将下游节点需要使用的参数均添加至参数节点中，需使用参数的下游节点直接挂在参数节点之下，即可获取使用所需参数，便于整个业务...
创建手动任务
进入手动业务流程功能界面 您需要前往 DataStudio（数据开发）>手动业务流程 页面，通过手动业务流程创建手动触发执行的任务。进入 数据开发 页面。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据建模与开发>数据开发，在...
应用场景
实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线，您可以实时接入APP、WEB、IoT和数据库等产生的异构数据，统一管理，并投递到下游的分析、归档等系统，构建清晰的数据流，让您更好的释放数据的价值。...
确定需求
业务流程通常与业务板块紧密耦合，对应一个或多个表及其所属数据源，可以作为构建数仓的原始数据来源。下表展现的是一个营销业务板块的业务流程模块。业务流程 A公司电商营销管理 商品管理 Y 用户管理 Y 购买流程 Y 交易订单 Y 用户反馈 Y ...
创建业务流程
本文为您介绍如何创建业务流程，在业务流程中创建节点并配置依赖关系。完成创建后，您可以利用数据开发功能，对工作空间的数据进行深入分析和计算。前提条件 开始本操作前，请确保您已经在工作空间中准备好业务数据表 bank_data 和其中的...
创建Hologres外部表
提交后您可在DataWorks数据开发相应业务流程（即创建表时所选的路径）的Hologres目录，查看该表结构。从生产环境加载 用于从生产环境加载生产表的相关信息，并显示至当前页面。说明 仅当表已被提交至生产环境后，才可执行该操作。执行该...
明细数据层（DWD）
例如，A公司的订单交易业务流程中，在设计下单这个业务过程的事实表时，不能包含支付金额这个表示支付业务过程的事实。在选择维度和事实之前，必须先声明粒度。粒度（数据行数的最小单位，非统计粒度）的声明是事实表设计中不可忽视的重要...
ListFolders
ParentFolderPath String 是 业务流程/我的第一个业务流程/MaxCompute 父文件夹的路径。RegionId String 是 cn-zhangjiakou 地域信息，通常为服务所在的地域。例如，华东2（上海）为cn-shanghai，华北3（张家口）为cn-zhangjiakou。您无需...
上传数据
上传数据操作入口 您可以在数据开发的头部菜单栏、业务流程下的表分组或表管理页面中进行上传数据的操作，入口如下所示。在 数据开发 页面的头部菜单栏中。在 数据开发 页面业务流程下的表分组中。标准模式下，在 表管理 页面中，对开发表...
维度建模
业务过程。参照下表，新建会员域下的业务。您也可以使用 通用工具 导入 业务过程。英文缩写 中文名 英文名 数据域 负责人 备注 login 登录 login 会员域 xxx-register 注册 register 会员域 xxx-mbf_default（系统）会员域_默认（系统）mbr...
规范定义最佳实践
维度 维度是分析业务的角度，是对应业务流程中的业务对象。例如客户、商品、部门等都可以作为分析业务的角度。派生指标 派生指标是分析业务的指标。由原子指标、统计周期、统计粒度和业务限定组成。例如原子指标为支付金额，最近1天海外...
规范定义最佳实践
维度 维度是分析业务的角度，是对应业务流程中的业务对象。例如客户、商品、部门等都可以作为分析业务的角度。派生指标 派生指标是分析业务的指标。由原子指标、统计周期、统计粒度和业务限定组成。例如原子指标为支付金额，最近1天海外...
MaxCompute函数管理
您可以通过MaxCompute函数面板，查看在MaxCompute计算引擎中存在的函数、函数的变更历史，并可以一键添加函数至数据开发面板的业务流程中。查看函数 进入 数据开发 页面。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据...
聚合支付方案
阿里云从业务扩展性、数据流动性、服务高可用三方面入手，通过多款云数据库产品为利楚扫呗制定聚合支付方案，解决利楚扫呗在业务扩展期遇到的数据存储空间不足、读写性能下降以及大数据分析空缺等问题。业务痛点 武汉利楚商务服务有限公司...
如何对JSON类型进行高效分析
PolarDB 列存索引（In Memory Column Index，IMCI）功能推出了完备的虚拟列与列式JSON功能等，可以快速处理大数据和多种数据类型（包括结构化数据与半结构化数据等），并提供高效的数据分析、查询与流计算能力，适用于数据分析、数据仓库与...
资源组编排
DataWorks的资源组编排功能，帮助您在数据开发阶段，批量修改指定业务流程下目标节点使用的调度资源组。当您的工作空间中有多个调度资源组时，可以根据实际业务需求，使用该功能快速为目标节点重新分配资源组，促进资源的合理使用。本文为...
查看数据开发操作记录
使用说明 仅支持查看DataStudio中以下几类操作记录：任务责任人变更操作、任务调度属性变更操作、任务及表提交操作、任务收藏操作、业务流程删除及数据下载等操作。DataWorks已集成至 操作审计（ActionTrail）中，您可以在ActionTrail中...
运行并管理手动任务
手动业务流程发布至生产环境后您可以在该页面手动触发任务运行。支持您通过列表或DAG图方式，快速查看任务的详细信息并执行相关操作。说明 手动任务提交至调度系统后，不会自动运行，只有手动触发才会运行。详情请参见：创建手动任务。目前...
百华悦邦
PolarDB PostgreSQL版（兼容Oracle）具有容量大、高性价比、分钟级弹性、读一致性、毫秒级延迟（物理复制）、无锁备份等优点，为您解决业务上的难点和痛点。本文介绍北京百华悦邦科技股份有限公司如何通过 PolarDB PostgreSQL版（兼容...
配置数据脱敏
您也可以展开业务流程，右键单击目标业务流程，选择 新建节点>数据集成>实时同步。在 新建节点 对话框中，选择同步方式为 单表（Topic）到单表（Topic）ETL，输入 名称，并选择 路径。重要 节点名称必须是大小写字母、中文、数字、下划线...
DMS数据管理预案助力业务大促
背景信息 大型活动期间，公司业务量可能出现大幅度上涨，数据库的使用与数据安全管理将面临巨大挑战。例如如下场景：临近双十一，数据库即将面临一次访问流量上的大考。筹备业务大促期间，您可评估您现有数据库的使用情况，预估活动期间的...
DML无锁变更概览
DML无锁数据变更可以将单个SQL拆分成多个批次执行，能更好地满足业务方对大量数据变更的需求，例如历史数据清理、全表更新字段等，保证执行效率，减小对数据库性能、数据库空间等的影响。背景信息 当业务累积了大量数据时，需要定期清除表...
ListDataServiceGroups
调用ListDataServiceGroups查询数据服务业务流程列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action ...
场景：如何配置业务流程定时时间
当业务流程所有任务都要求在某一时间才可以开始执行的情况下，您可只设置业务流程开始节点的定时时间，业务流程会在定时时间到达后按照依赖关系依次运行整个业务流程。关于依赖关系对任务执行的影响，详情请参见 依赖关系对任务执行的影响...
规划工作空间
工作空间之间的业务流程、任务节点独立开发，互不影响。在工作空间内部：仅“开发”、“管理员”角色的成员具备创建、编辑、删除任务节点的权限。仅“开发”、“运维”、“管理员”角色具备提交发布包的权限。仅“运维”、“部署”、“管理...
确定需求
您在构建数据仓库之前，首先需要确定构建数据仓库的目标与需求，并进行全面的业务调研。您需要了解真实的业务需求，以及确定数据仓库要解决的问题。业务调研 充分的业务调研和需求分析是数据仓库建设的基石，直接决定数据仓库能否建设成功...
确定需求
您在构建数据仓库之前，首先需要确定构建数据仓库的目标与需求，并进行全面的业务调研。您需要了解真实的业务需求，以及确定数据仓库要解决的问题。业务调研 充分的业务调研和需求分析是数据仓库建设的基石，直接决定数据仓库能否建设成功...
资产安全概述
数据分类 数据分类是对数据使用领域的设定，用于辅助对数据的敏感程度进行区分（例如公司业务数据较敏感，但是生产车间的传感器数据不敏感）。Dataphin内置了 公司数据（如公司财务报告）、业务数据（如业务客户数量）、个人数据（如消费者...
资产安全概述
数据分类 数据分类是对数据使用领域的设定，用于辅助对数据的敏感程度进行区分（例如公司业务数据较敏感，但是生产车间的传感器数据不敏感）。Dataphin内置了 公司数据（如公司财务报告）、业务数据（如业务客户数量）、个人数据（如消费者...
HoloStudio一键迁移至DataStudio
数据开发迁移 我们会将HoloStudio数据开发中的目录及其文件按照默认迁移策略一同迁移至DataStudio（数据开发）的调度业务流程中，调度业务流程详情请参见 创建业务流程。迁移策略：HoloStudio数据开发中已设置调度的任务不用迁移，未设置...
- 产品推荐
- 这些文档可能帮助您