行业模型模版
DataWorks智能数据建模联合具备丰富行业建模经验的数据架构师，总结阿里云百万用户最全面的业务场景，结合阿里巴巴技术创新能力，提供零售电子商务、金融、制造等多个领域的行业模型最佳实践。您可使用该模版快速构建属于您的数据仓库。...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
发布包总览概述
且（为 数据源管理员 或 数据源负责人）数据架构 业务对象、业务活动、主题域 跨租户发布使用人 且（为 超级管理员 或 系统管理员 或 数据板块架构师 负责的板块）研发对象 集成任务、建模研发、指标研发、文件管理、计算任务 跨租户发布...
发布包总览概述
且（为 数据源管理员 或 数据源负责人）数据架构 业务对象、业务活动、主题域 跨租户发布使用人 且（为 超级管理员 或 系统管理员 或 数据板块架构师 负责的板块）研发对象 集成任务、建模研发、指标研发、文件管理、计算任务 跨租户发布...
创建数据板块
在开始执行操作前，请确认您已将数据板块架构师、业务负责人、数据负责人添加至Dataphin成员列表。具体操作请参见 添加Dataphin成员。使用限制 支持超级管理员和系统管理员新建数据板块。如何获取系统管理员角色请参见 添加Dataphin成员。...
创建数据板块
在开始执行操作前，请确认您已将数据板块架构师、业务负责人、数据负责人添加至Dataphin成员列表。具体操作请参见 配置成员和超级管理员的联系方式。使用限制 支持超级管理员和系统管理员新建数据板块。如何获取系统管理员角色请参见 配置...
创建Kudu数据源
从早期的OLTP、OLAP拆分，到后来的Lambda架构，都存在数据复制和同步的复杂性，而Kudu的单一数据架构，规避了传统架构数据复制和同步的复杂性。更多详情请参见 Kudu官网。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、...
金融大数据
架构优势：合理解决了金融行业内外部数据整合问题 优化了结数据架构分层 提供了高效的数数据加工与服务方式 技术架构 架构说明：阿里云大数据数据仓库解决方案经历了阿里巴巴集团内部的实战验证，完全基于自主研发，且在不断优化、完善，以...
应用场景
该方案优势如下：全托管免运维 弹性扩展能力 开放数据湖架构 一站式的数据开发平台 数据查询与分析场景 在传统数据平台下，数据仓库工程师和数据分析师通常面临两个不同的环境，甚至使用不同的引擎和语法，导致数据指标和算子行为存在差异...
管理数据架构待发布对象
导入的发布包文件中存在数据架构变更对象时，将在待发布数据架构页面为您展示，您可在待发布数据架构页面对数据架构对象进行管理和发布。前提条件 数据架构对象所在的数据板块已经发布。待发布数据架构对象入口 请参见 发布包总览入口，...
管理数据架构待发布对象
导入的发布包文件中存在数据架构变更对象时，将在待发布数据架构页面为您展示，您可在待发布数据架构页面对数据架构对象进行管理和发布。前提条件 数据架构对象所在的数据板块已经发布。待发布数据架构对象入口 请参见 发布包总览入口，...
前言
阿里云卓越架构框架面向的是首席技术官（CTO）、架构师、运维、安全、研发等角色。通过了解卓越架构中定义的最佳实践和解决方案，组织中的这些职能角色能够不断的将应用架构和卓越架构中的最佳实践进行比较，并不断进行架构的迭代和改进，...
捷顺
DAS服务自动SQL限流和自动SQL调优，帮助DBA从救火员转向数据库架构师，有更多时间和精力帮助研发优化系统架构，审核数据库的变更和各种操作，进一步降低系统故障的概率。DAS服务自动对数据库实例进行治理，帮助捷顺科技把数据库的运维成本...
从Oracle迁移应用至阿里云PolarDB全流程指南
您可以使用数据传输轻松构建安全、可扩展、高可用的数据架构。云数据库PolarDB：PolarDB是阿里巴巴自主研发的下一代关系型分布式云原生数据库，目前兼容三种数据库引擎：MySQL、PostgreSQL、高度兼容Oracle语法。计算能力最高可扩展至1000...
Doris概述
Apache Doris是一个高性能、实时的分析型数据库，能够较好的满足报表分析、即席查询、数据湖联邦查询加速等使用场景。本文为您介绍Apache Doris。背景信息 关于更多Apache Doris信息，详情请参见 Doris介绍。使用场景 数据源经过各种数据...
概述
数据域的设定建议由统一组织或者人员（如数据架构师或者模型小组成员）进行管理和设定，数据域设计人员需要能对企业有深刻的业务理解，更多的表达对业务的解释和抽象。使用DataWorks进行数据域的规划建设的操作，请参见 数据域。业务过程 ...
构建运营模型
其中的成员包括：架构师和专业技术人员，负责上云架构设计和业务上云迁移工作；安全、合规等领域专家，负责设计企业IT治理方案、预估风险和制定治理规则；财务专家，负责制定财务的管理流程和成本分摊规则。云管理团队：在企业业务全面上云...
数仓规划权限列表
权限点 超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 板块架构师 普通成员 查看数据板块列表-Y 查看数据板块详情 Y Y N N N N N 新建数据板块 Y Y N N N N N 编辑数据板块 Y Y N N N 负责板块的 N 删除数据板块 Y Y N N N ...
数仓规划权限列表
权限点 超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 板块架构师 普通成员 查看数据板块列表-Y 查看数据板块详情 Y Y N N N N N 新建数据板块 Y Y N N N N N 编辑数据板块 Y Y N N N 负责板块的 N 删除数据板块 Y Y N N N ...
业务调研
资源/数据增长需求 当前基础设施环境，是否满足业务预期的资源或数据增长需求，以及数据增长要求对架构提供优化需求，比如数据库容量无法满足业务未来数据增量，在上云同时，需要做水平拆分；安全合规要求 是否有行业特征的安全合规要求，...
架构域管理
域架构师（主）必选，选择主架构师人员。域架构师（备）选填，选择备选架构师。质量负责人（主）必选，选择主质量负责人员。质量负责人（备）选填，选择备选质量负责人。架构域等级 必选，选择架构域等级。说明 目前仅支持到二级架构域。...
自媒体：易撰
自媒体 网站地址：易撰 客户介绍 长沙营智信息技术有限公司是专业的新媒体大数据服务商，其旗下知名品牌易撰，基于新媒体大数据挖掘技术及NLP算法分析，为各内容创客、广告主提供全面、科学、精准的大数据分析服务以及大数据架构解决方案。...
物联网数据处理分析架构参考
存在的问题 主要面临三大挑战：整体数据架构复杂，数据链路多存在稳定性风险，增加管理和运维的难度和成本。Java应用轮询调用数据API，无法满足大规模数据同步的性能要求。产生不必要的中间存储成本，企业信息部门无需实时分析时序数据，...
集群版-单副本
集群版-单副本采用代理（proxy）集群模式，数据分片为单节点架构，可为您提供高性能的存储服务。警告 单副本架构不能保障数据可用性和服务连续性，选用前请务必确认风险，不建议您在生产环境中使用该架构的实例。云数据库Redis版...
发现并处理大Key和热Key
因此，在读、写压力都较大且对数据一致性要求很高的场景下，读写分离架构并不是最优方案。使用阿里云Tair的QueryCache特性 云原生内存数据库Tair 会根据高效的排序和统计算法识别出实例中存在的热点Key（通常热点Key的QPS大于3,000），开启...
发现并处理Redis的大Key和热Key
因此，在读、写压力都较大且对数据一致性要求很高的场景下，读写分离架构并不是最优方案。使用阿里云Tair的QueryCache特性 云数据库Redis会根据高效的排序和统计算法识别出实例中存在的热点Key（通常热点Key的QPS大于3,000），开启该功能后...
简介
典型案例&架构 航海船舶大数据平台 场景：全球AIS船舶实时位置数据，每天上亿条轨迹写入，要求轨迹时空/时序查询秒级响应，具体包括：监管区域实时地理围栏判断。轨迹区域回放（指定区域+指定时间段）。轨迹回放（指定时间段查询）。架构...
排查Redis实例CPU使用率高的问题
因此，在读、写压力都较大且对数据一致性要求很高的场景下，读写分离架构并不是最优方案。排查并禁用高消耗命令 排查步骤 通过性能监控功能，确认CPU使用率高的具体时间段。具体操作，请参见 查看性能监控。通过下述方法，找出高消耗的命令...
未来规划
云计算架构的核心逻辑就是通过虚拟化技术带来池化资源，云原生数据库采用分布式数据库架构，实现大规模扩展，每套数据库系统横跨多台服务器和虚拟机，带来了全新的系统管理挑战。其中最核心的挑战就是如何实现弹性以及高可用，实现按需按量...
资产权限列表
权限点 超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 板块架构师 板块管理员 项目管理员 普通成员 权限申请 申请数据表权限 Y Y-Y 申请数据源权限 Y Y-Y 申请函数权限 Y Y-Y 申请变量权限 Y Y-Y 申请密钥权限 Y Y-Y 申请数据...
资产权限列表
权限点 超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 板块架构师 板块管理员 项目管理员 普通成员 权限申请 申请数据表权限 Y Y-Y 申请数据源权限 Y Y-Y 申请函数权限 Y Y-Y 申请变量权限 Y Y-Y 申请密钥权限 Y Y-Y 申请数据...
创建ID
进入 规划 页面后，默认进入 数据架构 页面。在 数据架构 页面，单击 标签架构。在标签架构页面，按照下图操作指引，选择 ID管理 页签，并 单击 新增ID。在 创建ID 对话框中，配置ID相关信息。参数 描述 ID名称 填写ID名称。允许中英文、...
E-MapReduce支持倚天云服务器
大数据场景下倚天架构与X86架构对比 在相同规格下X86架构的ECS实例和基于倚天架构的ECS实例上进行了基准测试，可以看到在大数据业务场景下倚天架构实例比基于x86架构实例算力性价比更高。降低硬件成本 相比于X86架构ECS实例成本，倚天架构...
创建GreenPlum数据源
使用限制 Dataphin仅支持超级管理员、数据源管理员、板块架构师、项目管理员角色创建数据源。超级管理员、数据源管理员角色添加与配置请参见 添加、配置及管理Dataphin成员。板块架构师配置请参见 创建数据板块。项目管理员配置请参见 添加...
创建GreenPlum数据源
使用限制 Dataphin仅支持超级管理员、数据源管理员、板块架构师、项目管理员角色创建数据源。超级管理员、数据源管理员角色添加与配置请参见 添加、配置及管理Dataphin成员。板块架构师配置请参见 创建数据板块。项目管理员配置请参见 添加...
流程中心
流程提交后，默认生成三个并行的子审批流，分别是架构师审批、质量负责人审批和运维负责人审批。三个子流程分别审批通过，则发布评审流程通过完成。紧急发布审批 触发条件 创建紧急发布迭代时，自动触发紧急发布审批流程。流程 自动触发后...
Transaction Table2.0概述
很多业务场景并不要求延时秒级更新可见或者行级更新，更多的需求是分钟级或者小时级的近实时数据处理叠加海量数据批处理场景，MaxCompute支持基于Transaction Table2.0实现近实时的增全量一体的数据存储、计算解决方案，本文为您介绍本方案...
概述
通过 DST，运维人员、开发人员和架构师能看清楚复杂的大规模微服务架构下的应用及服务之间的 复杂调用关系、性能指标、出错信息 与 关联日志，从而实现故障根因分析、服务治理、应用开发调试、性能管理、性能调优、架构管控、故障定责等运...
创建API数据源
使用限制 Dataphin仅支持超级管理员、数据源管理员、板块架构师、项目管理员角色创建数据源。超级管理员、数据源管理员角色添加与配置请参见 添加Dataphin成员。板块架构师配置请参见 创建数据板块。项目管理员配置请参见 操作步骤。操作...
南京银行
转型过程中遇到如下挑战：新业务的指数级发展，导致高并发的需求和大数据量的管理对系统提出了越来越高的要求，需要在最短的时间内提高系统对于业务的支撑能力。传统单体架构扩展成本高、响应慢。事务的 ACID 过度依赖数据库，导致数据库...
- 产品推荐
- 这些文档可能帮助您