公共规范
本文为您介绍建设MaxCompute数据仓库的公共规范。层次调用约定 应用层应优先调用公共层数据，必须存在中间层CDM数据，不允许应用层跨过中间层CDM从ODS层重复加工数据。中间层CDM需要积极了解应用层数据的建设需求，将公用的数据沉淀到公共...
引擎简介
云原生多模数据库 Lindorm 时序引擎是一款 高性能、低成本、稳定可靠 的在线时序数据库引擎服务，提供高效读写、高压缩比存储、时序数据聚合计算、数据库内机器学习等能力。核心能力 高性能：时序引擎支持高写入吞吐，通过自研的时序引擎，...
产品简介
DLA Ganos是基于云原生数据湖分析（Data Lake Analytics，DLA）系统设计开发的，面向时空大数据存储与计算的数据引擎产品。基于DLA无服务器化（Serverless）数据湖分析服务与内置的Spark计算引擎，DLA Ganos打通了阿里云各个存储系统，如...
成本分析
如果您希望了解和分析在使用MaxCompute时产生的费用、计算用量和存储用量，MaxCompute为您提供成本分析功能，从费用出发下钻到用量明细，为关注费用的管理人员提供更便捷的费用分析能力，方便您后续进行成本优化。本文为您介绍使用...
设置数据时效
数据时效说明 此处设置的数据时效的计算不是对数据自身带入的时间戳为基准进行计算，而是基于数据实际写入到数据库的时间为基准进行计算。数据在数据库中的时间超过设置的数据时效后并不会立刻失效，而是会由数据库后台慢慢自行清理。数据...
就绪检测节点
在场景运行开始时，就绪检测节点可检测数据源是否符合设定的条件，如果不符合，则无法继续运行场景。本文介绍就绪检测节点的配置参数说明。节点属性 节点属性 界面关键参数说明如下：参数 说明 节点名称 节点的名称。节点标识 节点的唯一...
基本概念
本文列出了蚂蚁隐私计算服务平台涉及的基本概念，以便于您更好地理解产品。安全配置 安全配置全称为授权安全配置，离线样本被授权到多方安全分析项目后，数据所有方在项目中按照安全级别对数据进行分列、分级的配置。数据的安全性越高，对...
就绪检测节点
在场景运行开始时，就绪检测节点可检测数据源是否符合设定的条件，如果不符合，则无法继续运行场景。本文介绍就绪检测节点的配置参数说明。节点属性 节点属性 界面关键参数说明如下：参数 说明 节点名称 节点的名称。节点标识 节点的唯一...
CREATE CONTINUOUS QUERY
连续查询（Continuous Queries，简称CQ）是时序引擎内部自动定期执行的时序查询任务，有助于数据的长期高效存储。您可以通过在CREATE CONTINUOUS QUERY语法中配置数据写入规则，完成定期连续查询任务的创建。引擎与版本 CREATE CONTINUOUS ...
HASH
使用示例 示例1：计算相同数据类型的输入参数的Hash值。命令示例如下。返回66。select hash(0,2,4);示例2：计算不同数据类型的输入参数的Hash值。命令示例如下。返回97。select hash(0,'a');示例3：任一输入参数为空或NULL。命令示例如下。...
全球数据库最佳实践
（可选）购买固定规格计算包 若创建主集群或从集群时选择付费方式为 按量付费，您还可以购买固定规格计算包来抵扣按量付费集群的计算节点费用。购买固定规格计算包后，按量付费 集群的计算节点费用将由固定规格计算包自动抵扣费用，更加...
应用场景
本文介绍函数计算的典型应用场景，包括Web应用、数据ETL处理、AI推理、视频转码等。Web应用 函数计算和其他云产品搭配使用，可以让工程师只需编写业务代码即能够快速构建可弹性扩展的Web应用。同时这些程序可在多个数据中心高可用运行，不...
应用场景
本文介绍函数计算的典型应用场景，包括Web应用、数据ETL处理、AI推理、视频转码等。Web应用 函数计算和其他云产品搭配使用，可以让工程师只需编写业务代码即能够快速构建可弹性扩展的Web应用。同时这些程序可在多个数据中心高可用运行，不...
产品架构
高效满足IoT/监控等场景的测量数据、设备运行数据的存储处理需求，整体架构如下：TSCore 是时序引擎中负责数据组织的核心部分，其整体思想与LSM结构相似，数据先写入Memchunk，然后Flush到磁盘，但由于时序数据天然的顺序写入特征，定向...
性能指标
性能指标 计算引擎 计算资源 数据源 数据量 传输通道 传输带宽 任务平均运行时间 MaxCompute 3000*2000 CU MaxCompute 4亿*1亿 OSS 1000Mb/s 12分钟 MaxCompute 3000*2000 CU MaxCompute 8亿*1亿 OSS 1000Mb/s 24分钟 MaxCompute 3000*2000...
数据库访问失败的常见原因
本文介绍函数计算访问数据库失败的常见原因。常见原因排查 数据库连接偶现失败 如果您访问数据库偶现失败，可按照以下步骤进行原因排查。数据库断开连接时，是否使用 destroy()替换 end()使用。由于函数实例在空闲2~5分钟左右后，会自动...
什么是EMR Serverless StarRocks
EMR Serverless StarRocks是开源StarRocks在阿里云上的全托管服务，您可以通过其灵活地创建和管理实例以及数据。本文为您介绍StarRocks的核心特性，并详述EMR Serverless StarRocks在此基础之上所引入的诸多增强功能与服务优势。StarRocks...
云市场计量映射上报说明
计算巢服务云市场商品依据售卖模式不同，分为按周期付费和按量付费两种方式，其中按量付费的计费方式为服务商预先在云市场定义计量项及单价，再通过调用云市场上报接口推送计量项数据并计算费用。计算巢云市场计量上报功能简化了整个上报...
按量付费闲时版
计费单价如下：公共云：0.154元/计算时 金融云：0.293元/计算时 SpotSpark作业（指计算配额为os_SpotQuota的Spark作业）SpotSpark作业当日计算费用=当日总计算时×单价 计费单价如下：公共云：0.22元/计算时 金融云：0.418元/计算时 ...
功能优势
当您的数据库中有数据需要被保护时，可以使用RDS MySQL全密态数据库功能，该功能提供的加密解决方案能够在遵守数据保护法规的前提下保障您的数据安全，使被保护数据免受未授权访问。本文将详细介绍RDS MySQL全密态数据库功能的优势，帮助您...
分区表达式介绍
第二步，计算DELTA，DELTA为-1M，将计算上月同一天的数据，计算得到20220403。最终结果为20220403。当补4月3日数据时就会触发规则执行，如果补5月3日，或者3月3日，则不会触发规则，$[]主要用于实现与执行日期相关的分区表达。内置分区表达...
分区表达式介绍
第二步，计算DELTA，DELTA为-1M，将计算上月同一天的数据，计算得到20220403。最终结果为20220403。当补4月3日数据时就会触发规则执行，如果补5月3日，或者3月3日，则不会触发规则，$[]主要用于实现与执行日期相关的分区表达。内置分区表达...
产品概述
什么是全密态数据库 全密态数据库是数据库与存储实验室与阿里云数据库团队合作的自研产品，以技术为基石，最小化人员、平台管理等不可控因素造成的潜在数据安全隐患，可以有效杜绝云数据库服务（或应用服务等数据拥有者以外的任何人）接触...
新零售：特步
PolarDB-X 专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题，历经各届天猫双十一及阿里云各行业客户业务的考验，助力企业加速完成业务数字化转型。本文介绍特步（中国）有限公司如何通过 PolarDB-X 应对...
2018年功能发布记录
2018年12月 功能名称 变更类型 功能描述 相关文档 表格存储触发器 新增 函数计算推出表格存储触发器，通过表格存储触发器，当您的表格变更时会实时触发函数计算对数据进行自定义处理。使用表格存储触发器，您可以轻松实现对数据的计算、...
物化视图
随着MaxCompute的深入使用，会出现对MaxCompute的表有很多重复查询的情况，并且不同使用者之间互相不知道其他人也在使用同样的计算逻辑。为了提高用户的计算效率、减少重复计算，同时加速用户计算。MaxCompute提供物化视图智能计算加速，为...
设备上云数据筛选
本文以使用官方示例驱动的LightSensor设备为例，讲述如何筛选设备上报到云端的数据。前提条件 请您确保已完成边缘实例的创建。具体操作步骤，请参见 专业版环境搭建 或 标准版环境搭建。创建光照度传感器产品以及该产品下的LightSensor设备...
推送记录
在 推送记录 页面，您可单击 离线计算、实时计算、数据质量 或 数据服务 页签，查看对应模块的推送记录。不同功能模块的页签展示一致，下图以 离线计算 为例。区域 描述 ①筛选与搜索区 您可根据推送记录对象名称的关键字进行搜索，也可...
计算层高可用
任意节点宕机导致当前节点上的计算任务失败，可依赖计算任务间的血缘关系，找到上一次持久化的中间数据结果，对失败任务进行重新调度计算，而且仅重新计算失败的任务。对于Coordinator前端节点，通过持久化查询的元数据，通过调度新的...
数据引入层（ODS）
ODS（Operational Data Store）层存放您从业务系统获取的最原始的数据，是其他上层数据的源数据。业务数据系统中的数据通常为非常细节的数据，经过长时间累积，且访问频率很高，是面向应用的数据。说明 在构建MaxCompute数据仓库的表之前，...
创建Hologres计算源
Dataphin支持使用Hologres为MaxCompute计算引擎作为加速计算源或单独作为离线计算源，作为加速源使用时可加速数据服务中的Dataphin数据源的查询速度，以满足对查询速度有要求的业务场景。本文为您介绍如何创建Hologres计算源。操作步骤 请...
常见问题
MaxCompute支持多种计算模型数据通道，满足多场景需求。所以您只需要会使用SQL、Python、Java等开发语言就可以使用MaxCompute进行数据分析。如何理解开源与云原生的大数据技术与产品？推荐您阅读 从开源到云原生，你不得不知的大数据实战。...
申通快递迁移Oracle到Lindorm
方案亮点：去Oracle、云Lindorm宽表引擎+LTS+搜索引擎一体化架构。客户感言 物流订单、巴枪等业务为非强事务要求的业务，最初选择...Lindorm云原生分布式及存储计算分离架构，具备极致弹性伸缩能力，助力客户轻松应对双十一大促业务峰值。
准备环境
为保证您可以顺利完成本次实验，请您首先确保自己云账号已开通大数据计算服务MaxCompute、数据工场DataWorks和 人工智能平台 PAI。前提条件 注册阿里云账号，详情请参见 注册阿里云账号。实名认证，详情请参见 个人实名认证 背景信息 本次...
SKEWJOIN HINT
当两张表Join存在热点，导致出现长尾问题时，您可以通过取出热点key，将数据分为热点数据和非热点数据两部分处理，最后合并的方式，提高Join效率。SkewJoin Hint可以通过自动或手动方式获取两张表的热点key，分别计算热点数据和非热点数据...
世纪联华
如果没有函数计算，联华超市在双十一大型促销活动中，如果只靠扩展机器来支撑大体量的流量和业务，将无法保障活动正常进行。阿里云解决了扩容问题，极大地提高了数据储备能力。减弱对技术人员的依赖：阿里云提供前沿技术，商超的开发人员...
SKEWJOIN HINT
当两张表Join存在热点，导致出现长尾问题时，您可以通过取出热点key，将数据分为热点数据和非热点数据两部分处理，最后合并的方式，提高Join效率。SkewJoin Hint可以通过自动或手动方式获取两张表的热点key，分别计算热点数据和非热点数据...
世纪联华
如果没有函数计算，联华超市在双十一大型促销活动中，如果只靠扩展机器来支撑大体量的流量和业务，将无法保障活动正常进行。阿里云解决了扩容问题，极大地提高了数据储备能力。减弱对技术人员的依赖：阿里云提供前沿技术，商超的开发人员...
数据倾斜诊断
AnalyticDB PostgreSQL版 提供的智能诊断数据倾斜功能，可以每小时定期自动诊断数据库内的所有表，并生成相应的诊断信息表，供您检测库内所有表的倾斜情况。注意事项 智能诊断数据倾斜功能仅支持存储弹性模式实例，且内核版本须满足以下...
整体架构
Transaction Table2.0的增量存储和处理架构的特殊设计主要集中在五个模块：数据接入、计算引擎、数据优化服务、元数据管理、数据文件组织，其他部分与MaxCompute通用的架构一致。本文为您介绍Transaction Table2.0的核心架构要点。...
- 产品推荐
- 这些文档可能帮助您