查看数据指标
相关文档 云监控报警 在线设备数量、上下行通信消息量、规则引擎数据流转次数等数据，还可以通过云监控进行监控和报警。请参见：配置报警规则 报警信息说明 设备网络状态 连网方式为Wi-Fi的设备，可以上报网络状态数据。请参见：设备上报...
DataWorks V3.0
MaxCompute：大数据计算服务MaxCompute（原ODPS）是一种快速、完全托管的EB级大数据计算引擎，是大规模离线数据仓库的核心引擎。MaxCompute是DataWorks最早支持，且最成熟完备的计算引擎，目前已基本覆盖MaxCompute的所有功能。详情请参见 ...
什么是DataWorks
DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎，为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台。从2009年起，DataWorks不断沉淀阿里巴巴大数据建设方法论，支撑数据中台建设，同时与...
数据模型概述
DDM目前支持逻辑模型和物理模型建模，其中物理模型又分为关系型数据模型和非关系型数据模型，支持的大数据引擎为MaxCompute、Hive。说明 Hadoop的MR调优参数属于底层，DDM是数据建模工具，支持设置表、字段等物理属性。
数据标准
数据是由特定的环境产生的，这些环境因素包括生产者、时间、系统等，从而造成了同一个语义的数据，有...说明 目前使用DDM进行数据建模可以进行逻辑建模和物理建模，但物理建模仅支持MaxCompute和Hive两种大数据引擎，不支持自定义数据源类型。
简介
HBase Ganos是什么 HBase Ganos是阿里云推出的一款包含管理 空间几何数据、时空轨迹、专题栅格、遥感影像的时空大数据引擎系统。系统兼容开源GeoMesa、GeoServer等生态，内置了高效的时空索引算法、空间拓扑几何算法、遥感影像处理算法等，...
什么是云原生多模数据库Lindorm
多模型的核心能力主要由以下几大数据引擎提供，包括：数据引擎 核心能力 宽表引擎 负责 宽表与对象数据 的管理和服务，具备全局二级索引、多维检索、动态列、TTL等能力，适用于元数据、订单、账单、画像、社交、feed流、日志等场景，兼容...
基本概念
G Ganos时空引擎 阿里云推出的一款管理空间几何数据、时空轨迹的时空大数据引擎系统。该系统兼容开源GeoMesa、GeoServer等生态，内置了高效的时空索引算法、空间拓扑几何算法等，结合 云原生多模数据库 Lindorm 宽表引擎强大的分布式存储...
代码模式建模
DataWorks数据建模的设计与实现解耦，在设计过程中，您无需考虑各个大数据引擎的实现方式，建模引擎会根据FML语言定义的Schema去驱动底层各个数据引擎的执行和操作，仅在实际物化（即把设计的逻辑表转换为底层引擎的物理表）阶段，建模引擎...
物联网设备数据上云存储
如何使用规则引擎转发数据到 TSDB 您可以通过在阿里云物联网平台的控制台上配置规则引擎将物联网平台中的数据转发到时间序列数据库（TSDB）的实例中。具体详情请参见 数据转发到实例内的时序数据存储。注意：目前发布的地域有“华东2”只...
Delta Lake概述
背景信息 通常的数据湖方案是选取大数据存储引擎构建数据湖（例如，阿里云对象存储OSS产品或云下HDFS），然后将产生的各种类型数据存储在该存储引擎中。在使用数据时，通过Spark或Presto对接数据分析引擎并进行数据解析。但该套方案存在...
东软案例
多模型数据融合分析困难，面向海量数据采集终端同时写入数据的并发能力弱，数据量大且价值密度低导致存储成本高，基于开源软件自建数据存储集群稳定性低运维成本高等问题，东软急需新型运维大数据存储引擎支撑，来对运维系统存储引擎升级...
基于Delta lake的一站式数据湖构建与分析实战
数据湖计算与分析 相比于数据仓库，数据湖以更开放的方式对接多种不同的计算引擎，如传统开源大数据计算引擎Hive、Spark、Presto、Flink等，同时也支持云厂商自研的大数据引擎，如阿里云MaxCompute、Hologres等。在数据湖存储与计算引擎...
TSDB全量迁移至时序引擎
本文介绍时间序列数据库（Time Series Database，简称TSDB）全量迁移至 云原生多模数据库 Lindorm 时序引擎的方法。前提条件 已安装Linux或者macOS操作系统，并且安装以下环境。已安装Java环境，版本为JDK 1.8及以上。已安装Python环境，...
如何选择文件引擎规格
存储规格选择 当您选择Lindorm文件引擎 作为大数据、数据湖的底层存储时，推荐您选用 容量型云存储 类型。Lindorm存储以预留空间方式计费，需要确保LindormDFS的预留存储空间超出您的最大使用空间10%以上 说明 容量型存储在保持低成本的...
产品概述
产品描述 Dataphin是集产品、技术、方法论于一体的智能大数据平台建设引擎，为您提供数据引入、规范定义、建模研发、资产管理、数据服务等全链路智能数据建设及治理服务。功能 描述 Dataphin全托管 全托管又称公共云多租户模式，只需购买...
数据库引擎
数据库引擎 数据库引擎分类 文档链接 Atomic Atomic Lazy Lazy Replicated Replicated PostgreSQL PostgreSQL MySQL MySQL SQLite SQLite MaterializedPostgreSQL MaterializedPostgreSQL MaterializedMySQL MaterializedMySQL
JindoFS实战演示
Impala如何高效查询OSS数据 Impala如何高效查询OSS数据 2021-06-08 Apache Impala是一个开源的大数据查询分析引擎，能够快速查询分析存储在Hadoop集群的PB级数据。如果您已将HDFS数据迁移至OSS中，可通过在Impala中使用JindoFS SDK，高效...
数据指标说明
规则引擎消息流转MQ云产品次数 规则引擎消息流转OTS云产品次数 规则引擎消息流转RDS云产品次数 规则引擎消息流转REPUBLISH云产品次数 规则引擎消息流转TSDB云产品次数 规则引擎消息流转DATAHUB云产品次数 规则引擎消息流转FC云产品次数 ...
金融大数据
业务架构 架构说明：大数据仓库调用外部数据和数据集市的信息，通过数据获取层、数据模型层、数据加工层、数据应用层和分析集市的层层筛选、分析、加工，由大数据服务接口向内部源数据输出适用于多种用户场景的有效数据。大数据仓库功能...
计算设置概述
设置Dataphin实例的计算引擎为TDH或ArgoDB 星环TDH 6.x Transwarp Data Hub（TDH)是星环大数据平台 实时计算引擎 阿里云实时计算Flink 阿里云新一代计算引擎Flink，支持实时计算，具有高吞吐低延迟等优势，同时也支持离线计算与调度。...
风险识别管理（旧版）
3 规则的描述信息 基础配置>备注 基本信息>描述信息 4 规则生效的引擎 规则项>引擎 规则定义>条件设置 区域，选择条件 选择 数据位置 时，所配置的 数据引擎名称。5 规则生效的项目空间 规则项>项目空间 规则定义>条件设置 区域，选择条件 ...
教程概述
物联网平台接收到数据后通过规则引擎转发至DataHub。在DataHub中通过DataConnector将数据同步到RDS MySQL数据库中。使用DataV将RDS MySQL中的数据展示在大屏上。说明 物联网平台转发至DataHub，是因为DataHub可以将数据同步至MaxCompute，...
基本介绍
背景信息 云数据库HBase增强版是由 云原生多模数据库Lindorm宽表引擎 提供的、完全兼容HBase的云上托管数据库，从2011年开始云数据库HBase增强版正式承载阿里内部业务的海量数据实时存储需求，支撑服务了淘宝、支付宝、菜鸟、优酷、高德等...
报警信息说明
如示例中，“MessageCountForwardedThroughRuleEngine_MNS”对应类目为“规则引擎消息流转次数（MNS）”，表示在一定时间内，规则引擎流转数据到消息服务（MNS）的次数超过了报警规则中设置的阈值。具体类目名称代码说明，请参见 阈值报警...
数据质量概述
非DataWorks收费 数据质量规则校验会产生校验SQL并下推到引擎执行，数据质量规则运行将会产生引擎费用，各引擎计费细则请参考各引擎计费文档。例如，假设您使用MaxCompute引擎按量付费模式时，数据质量规则校验将会产生MaxCompute引擎费用...
数据使用诊断
处理建议 您可以根据所给的建议，进行敏感数据规则设置，以便全面掌握敏感数据分布情况，保护敏感数据的安全。诊断详情列表 数据安全防护诊断 帮助您提升敏感数据的安全性。安全检测维度 安全检测项 检测对象 检测方式 敏感数据保护 数据...
结构设计
控制删除主键 控制删除索引 控制主键更改为索引 控制修改主键包含列 控制修改普通索引 控制新增索引类型 控制SQL执行风险 控制核心实例风险 控制表存储引擎 控制锁表/大表变更风险 审批规则校验 禁止执行任何DDL变更到数据库 禁止执行任何...
创建安全规则
安全规则是通过一组领域专用语言DSL（Domain Specific Language）对数据库实现精细化管控的规则集合，您在使用DMS的查询、导出、变更等功能时，可以通过安全规则管控这些功能行为，从而在平台内制定和打造数据库的操作规范和研发流程。...
智能基线
规则引擎消息流转OTS云产品次数 规则引擎消息流转MQ云产品次数 规则引擎消息流转MNS云产品次数 规则引擎消息流转FC云产品次数 规则引擎消息流转DATAHUB云产品次数 规则引擎流转消息延时 规则引擎消息流转次数 规则引擎流转消息大小
【通知】DAS安全审计（新版）公测通知
内置了超过900种高危操作规则，涵盖异常操作、数据泄露、SQL注入和漏洞攻击等4大类，能够更全面地支持自动识别高危操作、SQL注入和新增访问等风险。并且支持根据访问的库、表、字段、访问源、实例等不同维度自定义检测模型，使安全策略更加...
招商数据
本章节主要讲述平台提供的招商数据查询服务，包括企业信息的查询、企业风险的监控、企业关系的查询，可以帮助租赁型园区通过大数据更好的进行招商。
配置物联网平台设备
物联网平台主要负责获取设备端数据，并通过规则引擎将数据转发至Table Store、DataHub、RDS、Message Service、Message Queue、TSDB、FC以及另外一个Topic。前提条件 您已经完成了 DataHub项目的创建。操作步骤 创建产品。登录阿里云 物...
普通数据变更
您可以通过DMS内置的安全规则引擎，设置允许开发人员直接在SQL Console对开发库执行DML语句，且不需要提交工单审批，即可实现在不影响数据安全的情况下提升研发效能。本示例以在SQL Console执行 INSERT 语句举例。调整poc_dev库的安全规则...
入门概览
本文介绍 云原生多模数据库 Lindorm 时序引擎的使用流程，帮助您快速连接使用Lindorm时序引擎。操作流程 从创建Lindorm实例到Lindorm时序引擎的应用开发，您需要完成以下操作：创建Lindorm实例，创建时选择数据引擎为时序引擎，具体操作请...
开通消息引擎
Lindorm消息引擎是Lindorm流引擎的底层存储，本文介绍如何开通消息引擎。说明 您可以通过Lindorm管理控制台创建Lindorm实例，购买消息引擎，或为已有的Lindorm实例开通消息引擎。创建实例时开通消息引擎 在 实例列表 中点击 创建。在...
异地备份方案概览
PolarDB O引擎 数据库类型 推荐方案 方案说明 方案特点 PolarDB O引擎 推荐在DBS进行 逻辑备份。通过公网将数据库实例进行异地备份，详情请参见 自建数据库异地备份。数据库需开启公网。低成本。PostgreSQL 数据库类型 推荐方案 方案说明 ...
配置数据过滤转换
数据过滤插件可以对数据进行规则过滤，例如过滤字段的大小等，符合规则的数据才会被保留。前提条件 配置数据过滤节点前，您需要先配置好相应的输入节点，详情请参见 实时同步支持的数据源。操作步骤 进入 数据开发 页面。登录 DataWorks...
使用DMS进行数据归档
AnalyticDB PostgreSQL版 支持将以下数据源的数据进行归档：RDS MySQL PolarDB MySQL引擎 PolarDB-X AnalyticDB MySQL 3.0 RDS PostgreSQL PolarDB PostgreSQL引擎 数据归档方案对比 归档方案 性价比 数据管理的易用性 数据查询以及分析...
数据存储目录结构说明
本章介绍文件引擎...目录 说明/${实例ID}-global/${实例ID}_xxx 宽表引擎数据存储目录/solr 搜索引擎数据存储目录/tsdb 时序引擎数据存储目录 说明${实例ID}：lindorm实例ID。xxx：实例所在的区域，如cn-shanghai则表示为上海的实例。
- 产品推荐
- 这些文档可能帮助您