X-Engine简介
因为目标是面向大规模的海量数据存储，提供高并发事务处理能力和降低存储成本，在大部分大数据量场景下，数据被访问的机会是不均等的，访问频繁的热数据实际上占比很少，X-Engine根据数据访问频度的不同将数据划分为多个层次，针对每个层次...
产品简介
产品介绍 蚂蚁链旅游文创智能合约服务是基于区块链技术的产品，旨在帮助旅游文创行业解决传统模式中的问题，该服务利用智能合约技术，将旅游文创产品信息和交易记录存储在区块链上，提供 资源效率更高、组合灵活性更强、批量流转、简化管理...
通过向导模式配置离线同步任务
数据集成提供向导式的开发引导，您无需编写任何代码，通过在界面勾选数据来源与去向，并结合DataWorks调度参数，实现将源端单表或分库分表的全量或增量数据周期性同步至目标数据表。本文为您介绍向导模式配置离线同步任务的常规配置，各...
基本概念
栅格数据（Raster Data）是将地理空间分割成有规律的网格，每一个网格称为一个单元（像元或像素），并在各单元上赋予相应的属性值来表示实体的一种数据形式。栅格数据通常有两种类型的栅格数据：专题数据和影像数据。专题数据：每个栅格像...
文档更新动态（2022年之前）
新增实时元表的资产质量监控规则，包括统计趋势监测、实时多链路对比和实时离线数据核对。通用功能 新建数据源规则 新建实时元表规则 2020-11-17 数据安全 功能拓展 新增数据安全增值功能包。数据安全支持定义数据的业务分类和安全等级，并...
整库离线同步至OSS
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步解决方案支持的数据源及其配置详情请参见 支持的数据源与读写能力。说明 ...
数据开发
本实验中参考数据建模的分层划域，新建“ODS数据引入层、DIM维度层、DWD明细数据层、DWS汇总数据层、ADS应用数据层”。主题管理：按照分析视角对表进行划分。本实验中参考数据建模的分层划域，按照下表，新建八个一级主题和若干个二级主题...
一键实时同步至DataHub
一键实时同步至DataHub方案支持全增量一体化同步，先进行全量数据迁移，然后再实时同步增量数据至目标端。本文为您介绍如何创建一键实时同步至DataHub任务。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，配置好您需要同步...
产品架构
阿里云区块链服务构建于Kubernetes之上，支持业界主流的区块链引擎技术，与阿里云丰富的云服务进行整合，支持用户构建跨企业、跨地域的业务协作和交易网络，实现区块链业务场景的快速落地。产品功能架构 基础设施层：支持公共云、专有云...
通过脚本模式配置离线同步任务
当您需要实现更精细化的配置管理时，您可以使用脚本模式配置离线同步任务，通过编写数据同步的JSON脚本并结合DataWorks调度参数使用，将源端单表或分库分表的全量或增量数据周期性同步至目标数据表。本文为您介绍脚本模式配置离线同步任务...
DataX同步数据
DataX是异构数据源离线同步的工具，支持多种异构数据源之间高效的数据同步。Dataphin系统内嵌了DataX组件，支持通过构建Shell任务调用DataX，实现数据同步。本教程以RDS MySQL数据库为例，为您介绍基于Dataphin如何调用DataX同步数据。前提...
DataX同步数据
DataX是异构数据源离线同步的工具，支持多种异构数据源之间高效的数据同步。Dataphin系统内嵌了DataX组件，支持通过构建Shell任务调用DataX，实现数据同步。本教程以RDS MySQL数据库为例，为您介绍基于Dataphin如何调用DataX同步数据。前提...
调用链采样配置最佳实践
但是我们也无法忽视调用链全量采集带来的网络I/O、链路处理、性能损耗、数据存储等可观测费用成本。常用采样方案介绍 通过大量实践发现，无论从计算、存储资源成本消耗上进行分析，还是从具体使用场景角度评估，都不一定需要收集所有埋点...
数仓分层
数据引入层（ODS，Operational Data Store，又称数据基础层）：将原始数据几乎无处理地存放在数据仓库系统中，结构上与源系统基本保持一致，是数据仓库的数据准备区。这一层的主要职责是将基础数据同步、存储到MaxCompute。数据公共层（CDM...
常见问题
问题分析 如果A端的Socket因为主动关闭或者因为异常退出被关闭，B端仍发送数据，发送的第一个数据包则引发Connect reset by peer异常（A端连接断开后，B端给通道中写数据）。A端退出，但退出时并未关闭该连接，B端如果仍然从连接中读数据则...
功能更新动态（2022年之前）
新增实时元表的资产质量监控规则，包括统计趋势监测、实时多链路对比和实时离线数据核对。2020年11月17日 华北2（北京）新建数据源规则 新建实时元表规则 2020年11月26日 华南1（深圳）2020年12月15日 华东2（上海）资产安全 新增资产安全...
层级生成器功能介绍
将自定义绘制的边界数据制作成层级下钻结构数据后，您也可以将其导出成DataV专有格式，并将该导出的层级结构数据文件，应用到 基础平面地图 3.0 组件的 自定义区域下钻层 子组件中，具体生成层级结构数据及应用到DataV组件的操作方法，请...
01新建模型目录
DWD：全称Data Warehouse Detail，明细数据层，该层数据和源数据基本保持一致，保存着最细粒度的数据，一般存放所有的明细数据，是所有后期分析的数据基础。具有数据量大，查询计算较慢的特点。DWS：全称Data Warehouse Summary，汇总数据...
数据湖构建服务条款
协议中条款前所列索引关键词仅为帮助您理解该条款表达的主旨之用，不影响或限制本协议条款的含义或解释。为维护您自身权益，建议您仔细阅读各条款具体表述。【审慎阅读】您 在同意本协议之前，应当认真阅读本协议。请您务必审慎阅读、充分...
应用场景
图数据库GDB针对高度互联数据的存储和查询场景进行设计，并在内核层面进行了大量优化，非常适合营收增长、金融风控、商品推荐、社交推荐、循环担保检测、异常指标监控和违规团伙挖掘等场景。营收增长 图数据库GDB提供智能搜索推荐一体化...
企业版和标准版功能对比
支持 支持 全密态 PolarDB MySQL版 提供全密态数据库功能，数据在用户侧加密后传入数据库管理系统，数据明文对于数据库服务端不可见，实现了端到端的全程加密的数据强安全性。支持 支持 连接管理 连接池 PolarDB 支持会话级连接池和事务级...
产品优势
蚂蚁区块链 蚂蚁区块链 BaaS 平台具备以下优势：高性能 金融科技区块链基于它并行共识的技术，轻松满足金融领域的高频场景应用。高可靠性 业务可靠受理，峰值业务缓冲，基于 PBFT 的共识技术提供高可用的拜占庭容错能力，支持共识状态自动...
Hive数据导入
数据源及目标端配置参数说明 参数名称 参数说明 数据链路名称 数据链路名称。系统默认按数据源类型与当前时间生成名称，可按需修改。数据源 选择已有的Hive数据源，也可新建数据源。目标端类型 目前仅支持 数据湖-OSS存储。OSS路径 ...
区域下钻热力层（v2.x版本）
区域下钻热力层是基础平面地图的子组件，可直接作为省或直辖市级、地市级区域热力层使用。支持独立的样式、数据和交互配置，包括下钻区域的标注、边线、鼠标交互事件以及位置信息等。本文介绍区域下钻热力层各配置项的含义。注意 当前为v2....
技术架构
计算节点与存储节点之间通过理解数据库语义的智能互联协议将filter和projection等算子从计算层下推到存储层执行。为了保证事务和查询语句的低延迟，同时降低计算节点之间状态同步的延迟，计算节点和存储节点之间使用25Gb高速RDMA网络互联，...
用户价值
数据服务更便捷：能够赋予数据以业务价值，让各级用户能够直观的理解数据，并以此为基础向应用输出多样、便捷的数据服务，不断提升数据面向业务的价值。数据应用更智能：提供面向业务人员的无代码业务模型构建能力和数据分析能力，大大降低...
数据质量教程概述
数据质量是数据分析结论有效性和准确性的基础。本文为您介绍数据质量保障教程的业务场景以及如何衡量数据质量的高低。前提条件 在开始本教程前，请您首先完成 搭建互联网在线运行分析平台 教程，详情请参见 业务场景与开发流程。业务场景 ...
数据质量教程概述
数据质量是数据分析结论有效性和准确性的基础。本文为您介绍数据质量保障教程的业务场景以及如何衡量数据质量的高低。前提条件 在开始本教程前，请您首先完成 搭建互联网在线运行分析平台 教程，详情请参见 业务场景与开发流程。业务场景 ...
Delta Lake概述
Delta数据湖方案如下：在大数据存储层之上提供了数据管理层，该数据管理层等同于数据库中的元数据管理，其元数据随着数据一起存放并对用户可见（例如 图 1 所示）。Delta基于元数据管理引入了ACID，解决了因数据导入失败而产生脏数据和数据...
核心概念
本文为您介绍Dataphin中，业务板块、数据域、项目、维度、业务过程、维度逻辑表、事实逻辑表、原子指标等基本概念。数据板块 数据板块是逻辑空间的重要组成部分，是基于业务特征划分的命名空间。当数据的业务含义存在较大差异时，您可以...
创建实时元表规则
实时多链路对比质量规则支持监控数据滞留、统计偏差等问题。实时离线数据核对 实时数据与离线数据在使用相同统计路逻辑时，实时离线数据核对质量规则可以检测数据之间的差异。如果差异较大，可能存在数据质量的问题。质量规则配置 在...
创建实时元表规则
实时多链路对比质量规则支持监控数据滞留、统计偏差等问题。实时离线数据核对 实时数据与离线数据在使用相同统计路逻辑时，实时离线数据核对质量规则可以检测数据之间的差异。如果差异较大，可能存在数据质量的问题。质量规则配置 在...
案例介绍
本案例以某公司的零售事业群为例，为您介绍在构建数据中台时，如何规划业务模型中的业务板块、项目、数据域和指标等，帮助您更好的理解Dataphin的核心概念。案例场景简介 某公司是一家横跨多个行业领域的大型企业，以零售商超起家，逐步...
创建数据库
说明 创建实例时所选择的存储类型将决定您在创建数据库时所使用的存储类型，例如您在创建实例时选择的是 RDS MySQL，则您在创建数据库时存储类型即固定为 RDS for MySQL 不可变更。PolarDB-X 1.0 存储层 私有定制RDS 与计算层 PolarDB-X 1....
DataWorks模块使用说明
使用流程概览：参考文档：数据服务概述 其他子模块 场景与子模块 功能说明 相关文档 数据安全-数据保护伞 DataWorks数据保护伞为数据安全管理产品，为您提供数据发现、数据脱敏、数据水印、访问控制、风险识别、数据溯源等功能。数据保护伞...
概述
库仓一站式（Zero-ETL）传统数据仓库，会通过数据ETL方式同步数据，采用MPP/BSP等并行计算架构可以很好解决OLAP复杂查询，但面相高并发的数据在线查询（Serving场景）会有明显的资源并发瓶颈，会通过数据回流到OLTP数据库提供在线查询。...
通过数据订阅实现缓存更新策略
DTS（Data Transmission Service）的数据订阅功能结合MongoDB或Redis，可以实现高可靠、低延迟的缓存更新策略。本文以源为 RDS MySQL、目标为阿里云数据库Redis版为例，为您介绍缓存更新策略。前提条件 已完成数据订阅通道的配置并新增消费...
可视分析创作间和传统BI软件差异比较
对比项 可视分析创作间 传统BI软件 数据源 数据连接类型：支持Excel上传，支持数据库连接 数据连接类型：支持Excel上传，支持数据库连接 支持临时业务数据，也支持建模后的数据内容 通常需要前期IT人员完成数据建模 数据采集和准备 零代码...
矢量散点层（v2.x版本）
矢量散点层是基础平面地图的子组件，支持独立的样式、数据和交互配置，包括矢量散点层的散点配置、系列配置、弹框样式以及交互配置等，能够以矢量散点的形式表现地理位置上的点数据信息。本文介绍矢量散点层各配置项的含义。单击 子组件...
图标散点层（v2.x版本）
图标散点层是基础平面地图的子组件，能够以图标散点的形式表现地理位置上的点数据信息。图标散点层支持独立的样式、数据和交互配置，包括图标散点层的图标配置、系列配置、弹框样式以及交互配置等。本文介绍图标散点层各配置项的含义。参见...
- 产品推荐
- 这些文档可能帮助您