云产品集成
常见云产品如下：大数据开发治理平台 DataWorks 实时计算 Flink 版 数据库管理 DMS DataV 数据可视化 Quick BI 数据分析与展现 前提条件 已获取 OceanBase 数据库的基本连接信息，详细步骤请参见 获取连接参数。大数据开发治理平台 ...
资产全景及目录概述
整体概述 Dataphin的数据资产功能，基于数据资产管理的规范及方法论，帮助您对数据资产进行盘点评估：支持自动化提取分析元数据，可视化构建数据资产大图，便于管理者发现与了解数据资产价值。支持对数据生产中的计算、存储、安全、应用等...
资产全景及目录概述
整体概述 Dataphin的数据资产功能，基于数据资产管理的规范及方法论，帮助您对数据资产进行盘点评估：支持自动化提取分析元数据，可视化构建数据资产大图，便于管理者发现与了解数据资产价值。支持对数据生产中的计算、存储、安全、应用等...
查看敏感数据血缘（公测）
DataWorks的数据血缘功能支持可视化展示敏感数据的血缘关系，自动分析字段之间的异常关联关系、敏感数据识别结果异常的字段，帮助您梳理敏感数据的扩散情况及影响面，提高数据识别效率。本文为您介绍如何查看血缘关系图。背景信息 数据血缘...
快速体验
DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力，本文以一个零售电商行业的数仓搭建实验为例，为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现，帮助您深入了解阿里云...
什么是图数据库GDB?
图数据库与传统关系型数据库相比的优势 传统的关系型数据库和图数据库无论是在模型，存储以及查询优化上都存在极大的差异。比如社交用户关系中的2度查询请求，传统关系型数据库处理起来至少是秒级别的，3度查询更差甚至无法支持。对比而言...
IoT数据自动化同步至云端解决方案
物联网、大数据和云计算作为当前第三次信息化浪潮的代表技术，将在未来形成广泛的影响。物联网专注于物物相连，大数据专注于数据的价值化，云计算则为大数据和物联网提供计算资源等服务支持。大数据是物联网体系的重要组成部分。物联网的...
东软案例
企业面向客户、合作伙伴和内部员工建设IT系统及应用复杂度和数量会随着产品智能、互联化的深入持续增长，对映可用性保障运维监控采集数据采集种类，以及需要存储的数据量同步激增，现有监控系统基于RRD数据库或关系数据库搭建的单模引擎的...
仪表盘
图表或组件：图表或组件是进行数据可视化的最小单位，每一个图表均需要关联一个数据集。图表附属了某个仪表盘或大屏，图表的生成过程是依据数据集提供的数据模型对 SQL结果进行二次聚合分组，然后将二次加工的数据进行可视化编码。维度：...
什么是数据管理DMS
DMS提供全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，致力于帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。视频介绍 功能特性 详情信息，请参见 功能概览。为什么选择数据管理DMS 全域数据...
产品优势
本文为您介绍DataV产品的主要优势功能...自定义三维模型 支持自定义三维模型上传与展示，极大的丰富了数据大屏的三维表现力。安全性高 DataV支持发布链接访问和二维码分享访问，通过密码/Token的方式进行访问权限控制，保护您的数据隐私安全。
产品优势
本文为您介绍DataV产品的主要优势功能...自定义三维模型 支持自定义三维模型上传与展示，极大的丰富了数据大屏的三维表现力。安全性高 DataV支持发布链接访问和二维码分享访问，通过密码/Token的方式进行访问权限控制，保护您的数据隐私安全。
数据集成
数据源支持情况 数据集成目前支持40种以上的数据源类型（包括关系型数据库、非结构化存储、大数据存储、消息队列等），通过定义来源与去向数据源，并使用数据集成提供的数据抽取插件（Reader）、数据写入插件（Writer），实现任意结构化、...
数据集市
数据集市是基于业务分类，面向特定应用场景或者产品的数据组织。通常位于数据应用层，依赖于公共层的整合数据。本文为您介绍如何创建数据集市并管理主题域。前提条件 已创建业务分类，用于对指定业务进行特定场景化的细分。详情请参见 业务...
基本介绍
与云原生多模数据库Lindorm的关系 云原生多模数据库Lindorm是阿里巴巴自主研发的多模型数据库，云数据库HBase增强版的内核由 云原生多模数据库Lindorm宽表引擎 提供，为了获取更新、更完善的能力，推荐直接使用云原生多模数据库Lindorm。...
基于Delta lake的一站式数据湖构建与分析实战
选择“关系数据库实时入湖”，按照下图的信息填写数据源、目标数据湖、任务配置等信息。并保存。c.配置数据源，选择刚才新建的“dlf_demo”连接，使用表路径“dlf_demo/employees”，选择新建DTS订阅，填写名称。d.回到任务管理页面，点击...
功能发布记录（2022年）
所有DataWorks用户 数据集成审批策略 数据保护伞新增敏感数据血缘可视化图谱 新增敏感数据血缘可视化图谱，功能如下：基于数据的生产信息解析出敏感字段之间的血缘关系，将其中敏感字段类型相同的血缘关系进行识别结果扩散，极大提高识别...
什么是Dataphin
Dataphin是阿里巴巴集团OneData数据治理方法论内部实践的云化输出，一站式提供数据采、建、管、用全生命周期的大数据能力，以助力企业显著提升数据治理水平，构建质量可靠、消费便捷、生产安全经济的企业级数据中台。Dataphin兼容多种计算...
基本概念
DTS 数据传输服务（Data Transmission Service，简称DTS）支持关系型数据库（RDBMS）、非关系型数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，帮助您构建安全、可扩展、高可用的...
拓展组件
性能开销较大，支持百级数据。使用PBR材质，受光照影响，但不会投射阴影。属性名称 参数 说明 柱状图组件 配置资产 选择柱状图资产资源。相对坐标 单击 图标，控制当前对象的相对坐标位置。数据 输入含有地理信息的json代码。辐射气泡组件 ...
文档修订记录
附录：空间级预设角色与MaxCompute引擎权限的映射关系 2023.8.25 新增功能 数据建模 用于帮助您快速构建数据仓库模型架构图，直观展示数据仓库中各模型之间的关系。一个关系图承载一个数据仓库模型，一个账号支持创建多个关系图。关系图 ...
产品概述
背景信息 随着国家对数据安全和个人敏感信息的加强监管，原子化的数据安全能力已无法满足监管要求，国家标准和行业标准逐渐提出数据全生命周期的安全保障的需求，传统的三方安全加固和客户端加密都在客户成本、架构改造、数据库性能等带来...
产品架构
当前信息化技术发展面临的一个主要矛盾是"日益多样的业务需求带来的多种类型数据与数据存储技术架构日趋复杂成本快速上升之间的矛盾。伴随5G、IoT、智能网联车等新一代信息技术的逐步普及应用，这个矛盾会越来越突出。为了解决这个问题，...
产品概述
背景信息 随着国家对数据安全和个人敏感信息的加强监管，原子化的数据安全能力已无法满足监管要求，国家标准和行业标准逐渐提出数据全生命周期的安全保障的需求，传统的三方安全加固和客户端加密都在客户成本、架构改造、数据库性能等带来...
需求分析
d 网站访问日志原始数据表：ods_raw_log_d 网站访问日志明细表数：dwd_log_info_di 用户网站访问信息宽表：dws_user_info_all_di 用户画像数据：ads_user_info_1d 根据规范设计数据流：本实验使用数据集成离线同步任务将用户信息数据与用户...
需求分析
d 网站访问日志原始数据表：ods_raw_log_d 网站访问日志明细表：dwd_log_info_di 用户网站访问信息宽表：dws_user_info_all_di 用户画像数据：ads_user_info_1d 根据规范设计数据流：本实验使用数据集成离线同步任务将用户信息数据与用户...
增强E-R
E-R图能较好的描述业务数据中的关联关系、数据库存储表和字段之间的依赖和关联关系，并通过此关系将业务或数据库存储的逻辑关系沉淀到数据库设计中。随着业务规模的增大和数据库外键性能的降低，越来越多的系统设计采用应用系统来保障业务...
使用DataV可视化应用展示数据返回结果
本文为您介绍如何在DataV中调用DataWorks的数据服务API，并将数据返回结果展示在DataV可视化应用中。前提条件 在开始本案例前，您需要首先完成 准备工作，并已经 生成了数据服务API。背景信息 警告 您必须使用HTTP协议进入DataV控制台，...
Dataphin支持的数据源
背景信息 Dataphin支持对接的数据源包括大数据存储型数据源、文件数据源、消息队列数据源、关系型数据源和NoSQL数据源，各模块支持对接的数据源类型说明如下：如果您需要在Dataphin中连接某数据源，则需要先在数据源管理中创建该数据源。...
RDS术语
DMS Data Management，数据管理，是一种阿里云提供的图形化的数据管理工具，集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。支持MySQL、SQL Server、PostgreSQL、MongoDB、...
同步时源库为Oracle的注意事项及限制
关于数据类型映射关系的更多信息，请参见 结构初始化涉及的数据类型映射关系 暂不支持同步触发器。建议您删除源库的触发器，否则可能会因触发器导致数据不一致。若您需要同步触发器，详情请参见 源库存在触发器时如何配置同步作业。DTS会...
RDS术语
DMS Data Management，数据管理，是一种阿里云提供的图形化的数据管理工具，集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。支持MySQL、SQL Server、PostgreSQL、MongoDB、...
RDS术语
DMS Data Management，数据管理，是一种阿里云提供的图形化的数据管理工具，集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。支持MySQL、SQL Server、PostgreSQL、MongoDB、...
权限管理与规范化数据开发
本实践将基于DataWorks标准模式空间完成从“数据建模”到“数据生产”的基本流程，帮助您快速掌握规范化的数据体系建设流程，提升在数据开发过程中的规范性、安全性、稳定性。背景信息 DataWorks采取RBAC权限模型供用户管理DataWorks所有...
可视化页面性能优化常见问题
在可视化应用中网络以及电脑配置影响较大，其次是静态资源以及数据接口响应时长。可视化应用中自定义组件引入第三方库的种类和版本是否保持一致。机器配置影响情况。一般页面加载多久是合理的？浏览器页面加载时间与内容有关，在可视化页面...
离线同步能力说明
数据集成的离线同步功能为您提供数据读取（Reader）和写入插件（Writer），方便您通过定义来源与去向数据源，并结合DataWorks调度参数使用，将源端数据库中全量或增量数据的同步至目标数据库中。本文为您介绍离线同步的相关能力。使用限制 ...
可视化页面性能优化常见问题
在可视化应用中网络以及电脑配置影响较大，其次是静态资源以及数据接口响应时长。可视化应用中自定义组件引入第三方库的种类和版本是否保持一致。机器配置影响情况。一般页面加载多久是合理的？浏览器页面加载时间与内容有关，在可视化页面...
常见问题
为什么Redis内存报警与监控的内存使用率不一致 如何解决Redis内存使用率突然升高 如何搜索大Key 查看Redis集群实例的架构图和监控数据 查看Redis集群子实例内存 查看当前账号所有实例内存的使用信息 使用memtier-benchmark测试Redis集群版...
从RDS MySQL同步至Tablestore
增量数据初始化 DTS在全量数据初始化的基础上，将源库的增量更新数据实时同步至目标库。在增量数据初始化阶段，DTS支持同步的SQL语句为INSERT、UPDATE、DELETE。警告 请勿在源库执行DDL语句，否则将导致数据同步失败。准备工作 重要 由于在...
使用DataWorks
背景信息 数据集成的导出方式有如下两种：向导模式：创建离线同步节点后，在DataWorks界面以可视化方式配置数据来源、去向及字段的映射关系等信息，完成数据导出操作。脚本模式：创建离线同步节点后，将DataWorks可视化界面切换至脚本模式...
- 产品推荐
- 这些文档可能帮助您