查看资源合规时间线
背景信息 合规时间线是资源的一组合规评估记录，包括的要素如下表所示。要素 说明 合规时间线上的点 起点：资源第一次被规则评估的时间。合规评估可能是定时任务触发、实时变更触发或手动触发。节点：资源每次的规则评估都会形成合规时间线...
查看资源合规时间线
背景信息 合规时间线是资源的一组合规评估记录，包括的要素如下表所示。要素 说明 合规时间线上的点 起点：资源第一次被规则评估的时间。合规评估可能是定时任务触发、实时变更触发或手动触发。节点：资源每次的规则评估都会形成合规时间线...
Dataphin支持的数据源
具体操作，请参见：新建离线自定义源类型 新建实时自定义源类型 数据源说明 应用场景 描述 相关文档 离线集成 离线集成支持多种组件，包括输入、输出与转换组件等，通过在画布上简单的拖拽、配置并组装的方式，生成离线集成单条管道。离线...
标签资产市场概述
离线调用次数：指的是在指定的统计时间范围内，引用该标签的标签离线服务、群组离线服务、群组分页查询服务的成功调用实例数。引用次数：标签被其他标签或群组直接引用的次数（仅包括统计发布版本）。订阅情况：标签订阅情况的数据信息。...
数仓加速查询
本文以GitHub公开事件数据为例，为您介绍使用Hologres加速查询MaxCompute，并对接BI分析工具（本文以DataV为例），实现实时分析离线数据的通用架构与核心步骤。示例架构 搭建离线数仓时，Hologres可直接读取离线数仓MaxCompute中的数据，并...
计算设置概述
设置Dataphin实例的计算引擎为MaxCompute 实时计算引擎 阿里云实时计算Flink 阿里云新一代计算引擎Flink，支持实时计算，具有高吞吐低延迟等优势，同时也支持离线计算与调度。租户开启 实时研发 模块后，系统将根据 离线计算引擎 选择进行...
新建镜像表
镜像表帮助您统一管理Flink计算任务中的实时表和离线表。本文为您介绍如何生成镜像表。背景信息 如果Flink任务的生效模式为实时和离线，则新建计算任务开发即有实时表又有离线表。Dataphin支持新建镜像表，镜像表映射了实时表和离线表。您...
新建镜像表
镜像表帮助您统一管理Flink计算任务中的实时表和离线表。本文为您介绍如何生成镜像表。背景信息 如果Flink任务的生效模式为实时和离线，则新建计算任务开发即有实时表又有离线表。Dataphin支持新建镜像表，镜像表映射了实时表和离线表。您...
用户画像分析概述
经过离线特征加工、维度标签映射、载入即席分析数据等过程，提供实时人群分析、圈选能力。画像分析方法论已经广泛应用于各个行业，是赋能经营策略优化、精细化运营、精准营销的重要手段。例如以下典型场景。广告行业：通过人群画像洞察，...
Dataphin支持的数据源
具体操作，请参见：新建离线自定义源类型 新建实时自定义源类型 数据源说明 应用场景 描述 相关文档 离线集成 离线集成支持多种组件，包括输入、输出与转换组件等，通过在画布上简单的拖拽、配置并组装的方式，生成离线集成单条管道。离线...
实时数仓 Hologres系统权限策略参考
什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制（RAM）产品提供了两种类型的权限策略：系统策略和自定义策略。系统策略统一由阿里云创建，策略的版本...
MySQL分库分表实践
背景信息 实际业务场景下数据同步通常不能通过一个或多个简单离线同步或者实时同步任务完成，而是由多个离线同步、实时同步和数据处理等任务组合完成，这就会导致数据同步场景下的配置复杂度非常高。尤其是在MySQL分库分表的场景下，上游的...
HoloWeb简介
本文为您介绍什么是HoloWeb以及HoloWeb提供的开发和运维功能。背景信息 Hologres是为大数据设计的一站式实时数仓，支持数据实时写入、PB级数据高并发低延时的分析处理和超高QPS点查。与MaxCompute无缝打通，支持数据加速查询，兼容...
计算设置概述
设置Dataphin实例的计算引擎为TDH或ArgoDB 星环TDH 6.x Transwarp Data Hub（TDH)是星环大数据平台 实时计算引擎 阿里云实时计算Flink 阿里云新一代计算引擎Flink，支持实时计算，具有高吞吐低延迟等优势，同时也支持离线计算与调度。...
MySQL分库分表同步至Hologres（方案2.0）
背景信息 实际业务场景下数据同步通常不能通过一个或多个简单离线同步或者实时同步任务完成，而是由多个离线同步、实时同步和数据处理等任务组合完成，这就会导致数据同步场景下的配置复杂度非常高。尤其是在MySQL分库分表的场景下，上游的...
基本概念
管理元数据 角色（Role）角色是实时计算Flink版安全功能中的概念，可以理解为拥有相同权限的用户的集合。多个用户可以同时存在于一个角色下，一个用户也可以隶属于多个角色。给角色授权后，该角色下的所有用户拥有相同的权限。角色授权 ...
Hologres推荐的数仓分层
背景信息 Hologres与Flink、MaxCompute、DataWorks深度兼容，能够提供实时离线一体化联合解决方案。在该方案下有着非常丰富的应用场景，例如实时大屏、实时风控、精细化运营等。不同的应用场景对处理的数据量、数据复杂度、数据来源、数据...
发布 H5 离线包
要发布您已经创建的离线包，您需要创建该离线包的发布任务并完成相关配置。您可以选择发布单个 H5 离线包，也可以选择批量发布多个离线包。操作步骤 发布单个离线包 进入 mPaaS 控制台，完成以下步骤：点击左侧导航栏的 实时发布>离线包...
用户行为分析（UV）概述
例如大促时，电商商家需要实时计算店铺的实时UV，并根据UV情况及时调整运营策略，从而达成销售目标。在计算用户UV时，由于业务需求不同，计算的维度和数据量也不同，通常来讲会有以下诉求。用户数据量大，每天几亿条，维度多（10+以上），...
概述
通过 SDK，为终端 App 提供实时检测能力，即支持在联网条件下，对线上各方进行录音录像，并实现实时交互式检测。在远程双录质检过程中，智能检测 SDK 根据质检流程，调用相应的检测模型，并根据模型返回的检测结果，提供实时交互式检测。...
实时发布简介
实时发布服务（Mobile Delivery Service，简称 MDS）是 mPaaS 平台的核心基础服务组件之一，提供版本升级包、热修复包、H5 离线包的管理和发布服务，同时支持 开关配置、白名单、发布规则 管理功能。在客户端集成实时发布服务功能后，您...
Kafka实时同步
背景信息 Kafka 是一款高吞吐量、高可扩展性的分布式消息队列服务，广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等场景。Hologres与大数据生态无缝打通，您可以通过DataWorks数据集成、Flink以及Hologres Connector等...
配置 H5 离线包
您可以在实时发布平台上传、发布离线包，将离线包快速推送到客户端。关于离线包的详细介绍，请参考 离线包简介。在添加离线包之前，您需要添加离线包的相关配置。操作步骤 进入 mPaaS 控制台，完成以下步骤：单击左侧导航栏的 实时发布>离...
数据库中的数据离线同步至Hologres
Hologres支持通过DataWorks平台将数据库中的数据离线同步至Hologres，进行高并发低延时的查询分析处理操作。本文将为您介绍使用DataWorks将各类数据库数据离线同步至Hologres的操作方法。前提条件 开通DataWorks，详情请参见 入门概述。...
新建FLINK_SQL任务
本文为您介绍基于开源Flink实时引擎如何创建FLINK_SQL任务。前提条件 在开始执行操作前，请确认项目已开启 实时引擎 并已配置 Flink 为计算源。具体操作，请参见 创建通用项目。权限说明 仅支持 超级管理员、项目管理员 和 开发者 创建...
方案背景
大数据计算场景：推荐系统，订单类业务等 实时数据计算场景：监控系统，电商数字大屏等 样例场景 某电商公司为了完成电商运营数据的分析和展示，使用表格存储统一存储电商数据，通过Spark的流批处理离线聚合或实时统计电商数据，最终在...
数据集成概述
全增量同步任务简介 实际业务场景下，数据同步通常不能通过一个或多个简单离线同步或者实时同步任务完成，而是由多个 离线同步、实时同步 和 数据处理 等任务组合完成，这就会导致数据同步场景下的配置复杂度非常高。为了解决上述问题，...
基于Flink+Hologres搭建实时数仓
使用Flink+Hologres搭建实时数仓可以充分利用Flink强大的实时处理能力和Hologres提供的Binlog、行列共存和资源强隔离等能力，实现高效、可扩展的实时数据处理和分析，帮助您更好地应对不断增长的数据量和实时业务需求。本文介绍如何通过...
视频点位
根据视频点位所在的接流工作组协议类型是否为FILE，视频点位分为实时视频点位及离线视频模拟点位。当协议类型为FILE时，该工作组下的视频点位为离线视频模拟点位;当协议类型为非FILE时，该工作组下的视频点位为实时视频点位。创建实时视频...
基于Flink+Hologres搭建实时数仓
使用Flink+Hologres搭建实时数仓可以充分利用Flink强大的实时处理能力和Hologres提供的Binlog、行列共存和资源强隔离等能力，实现高效、可扩展的实时数据处理和分析，帮助您更好地应对不断增长的数据量和实时业务需求。本文介绍如何通过...
Terraform
更多信息请参见 什么是Terraform。Terraform的命令行接口CLI（Command Line Interface）提供一种简单机制，用于将配置文件部署到阿里云或其他任意支持的云上，并对其进行版本控制。它编写了描述云资源拓扑的配置文件中的基础结构，例如虚拟...
实时同步数据库的数据至Hologres
背景信息 Hologres是实时交互式分析产品，与大数据生态无缝打通，深度集成智能研发平台DataWorks，支持高并发和低延时地查询分析数据。您可以通过DataWorks数据集成同步将数据库中的数据实时同步至Hologres，再进行高并发低延时的查询分析...
安全白皮书
实时计算Flink版完全兼容开源Apache Flink API，从访问控制、网络、存储、备份恢复、操作审计等方面，提供全面的安全加固功能来保障您的数据安全。租户隔离 支持多租户的使用场景，通过阿里云账号认证体系（认证方式采用AccessKey对称密钥...
应用场景
数据分析：实现了实时数据分析生成的数据可以直接用于Serving，从而实现了实时和离线数据的统一融合。实时数据建模：提供了实时数据建模聚合表，以支持实时聚合能力。强大的引擎和优化器保证了数据库在实时数据建模时的高效性。实时更新：...
创建 H5 离线包
在创建 H5 离线包资源时，您需要填写基本信息和配置信息。前置任务 您已经在配置管理页面，完成 H5 离线包相关配置。详细信息，参见 配置离线包。关于此任务 您可以选择单个创建 H5 离线包，也可以选择以批量导入 H5 离线包文件的方式一次...
全增量实时同步至Hologres
步骤八：资源组配置 运行当前同步解决方案将产生多个离线同步子任务和一个实时同步子任务，您可以单击界面右上方的 资源组配置，查看并切换当前的任务所使用的离线同步资源组和实时同步资源组。说明 离线和实时同步任务推荐使用不同的资源...
功能特性
Kafka通过DataWorks实时同步 MySQL、PostgreSQL等数据库整库实时同步 通过DataWorks数据集成可以实现MySQL、PostgreSQL等数据库的数据全量离线以及增量实时同步至Hologres。MySQL分库分表实践 Spark写入Hologres 可以通过Hologres ...
生成 H5 离线包
生成一个离线包主要分为以下两步：构建前端.zip 包 在线生成.amr 包 构建前端.zip 包 根据离线包使用的场景不同，配置路径分为以下两种：全局资源包 普通资源包 说明 在同一个 H5 离线包中，全局资源包与普通资源包不可共存。离线包 ID（即...
主从实例读写分离部署（共享存储）
Hologres 从V1.1版本开始，针对线上生产环境高可用的场景，提供了共享存储的主从多实例部署方式，在该模式下支持故障隔离，负载隔离，有效支撑了高可用场景。本文介绍高可用方案的一些基本原理以及如何配置共享存储的主从多实例。单实例...
配置管理
质检类型：离线质检：指的是 离线语音质检 和 离线文本质检；离线质检规则：质检分析时使用哪些质检规则。语言模型：录音转文本时使用的语言模型，语言模型可在左侧导航栏中的 模型-语言模型 中维护。（离线文本质检不涉及，可忽略）热词...
- 产品推荐
- 这些文档可能帮助您