什么是工业互联网平台
平台基于阿里云的物联网、云计算和工业大数据的技术，构建用数字化控制并管理资源、收集分析历史信息、基于数据分析结果进行业务决策和优化的技术和方法。工业互联网企业级平台将制造企业中的设备通过物联网技术连接到云端，把运营业务对象...
将云消息队列 Kafka 版的数据迁移至MaxCompute
本文介绍如何使用DataWorks数据同步功能，将 云消息队列 Kafka 版 集群上的数据迁移至阿里云大数据计算服务MaxCompute，方便您对离线数据进行分析加工。前提条件 在开始本教程前，确保您在同一地域中已完成以下操作：云消息队列 Kafka 版 ...
IoT数据自动化同步至云端解决方案
物联网、大数据和云计算作为当前第三次信息化浪潮的代表技术，将在未来形成广泛的影响。物联网专注于物物相连，大数据专注于数据的价值化，云计算则为大数据和物联网提供计算资源等服务支持。大数据是物联网体系的重要组成部分。物联网的...
Slowly Changing Dimension
业务数据随着时间在不断变化，如果您要对数据进行分析，则需要考虑如何存储和管理数据。其中数据中随着时间变化的维度被称为Slowly Changing Dimension（SCD）。E-MapReduce根据实际的数仓场景定义了基于固定粒度的缓慢变化维（G-SCD）。...
区域热力层（v4.x版本）
图表样式 区域热力层是基础平面地图 4.0的子组件，支持独立的样式、数据和交互配置，包括区域的标注、颜色、边线、鼠标交互事件以及位置信息等，能够以热力区域的形式表现地理位置上的区域信息。样式面板 搜索配置：单击 样式 面板右上角的...
ModifyInstance
Parameter.4.Code String 是 LogStorage 数据库审计的第4组属性的Code配置，设置为 LogStorage，表示数据库审计的日志存储。Parameter.4.Value String 是 5 数据库审计的第4组属性的Value配置，数据库审计的日志存储大小，取值范围：0 TB~...
使用MaxCompute控制台（离线）
MaxCompute控制台提供数据上传功能，支持您将本地文件或阿里云对象存储服务OSS中的文件数据离线（非实时）上传至MaxCompute进行分析处理及相关管理操作。使用限制 仅支持基于 本地文件 或 阿里云对象存储OSS 上传数据，具体如下。本地文件...
整体架构
概述 自2012年第一次在集团发布上线以来，AnalyticDB MySQL版 至今已累计迭代发布近百个版本，支撑起集团内的电商、广告、物流、文娱、旅游、风控等众多在线分析业务。AnalyticDB MySQL版 从2014年开始正式对外提供服务，覆盖十多个行业，...
产品优势
数据管理能力 大工业云数据体系，云上结构化客户数据，原子化对象打散，灵活再造业务数据模型，帮助客户沉淀数据以及经验。算法优化能力 经过实战检验的业务过程智能优化算法服务，一周接入、一周上线帮助制造业直接降本增效。技术专家能力...
基本介绍
背景信息 云数据库HBase增强版是由 云原生多模数据库Lindorm宽表引擎 提供的、完全兼容HBase的云上托管数据库，从2011年开始云数据库HBase增强版正式承载阿里内部业务的海量数据实时存储需求，支撑服务了淘宝、支付宝、菜鸟、优酷、高德等...
发展历程
2021年 IDC发布《IDC MarketScape：中国政务大数据管理平台市场厂商评估2021》报告，阿里云位居行业领导者位置，产品能力居中国第一。以MaxCompute为核心代表的阿里云数仓进入 Forrester Wave 2021 Q1云数据仓库卓越表现者象限，成为入选...
什么是DataWorks
从2009年起，DataWorks不断沉淀阿里巴巴大数据建设方法论，支撑数据中台建设，同时与数万名政务、央国企、金融、零售、互联网、能源、制造、工业等行业的客户携手，不断提升数据应用效率，助力产业数字化升级。产品架构 DataWorks十多年...
客户案例
DataWorks在多个行业中均有典型的案例落地，帮助多个行业的企业解决数据痛点，挖掘数据价值，本文为您介绍典型行业中已落地的客户案例。新零售行业：大润发云上数据中台建设 客户架构如下。客户简介 为了快速数字化转型，拥抱新零售，...
PolarDB Serverless实现了哪些突破
以亚马逊Aurora和阿里云 PolarDB 为代表的第一代云原生数据库，第一次对数据库架构进行了改造，实现了存储和计算分离，并基于此实现了一写多读，一定程度上适配云架构。存储完成了池化和按量付费，这对云数据库的发展有了非常大的促进作用...
什么是开放平台
阿里云工业开放平台是基于阿里云大数据的一体化计算平台，通过数据工厂对企业系统数据、工厂设备数据、传感器数据、人员管理数据等多方工业企业数据进行汇集，并借助图像、视频识别、机器学习和人工智能算法，来激活海量数据价值。...
云数据库录入
说明 在第一次录入云数据库时，DMS系统会同步云数据库侧的名称。后续不再进行同步，您可以通过编辑实例来维护实例名称。具体操作，请参见 编辑实例。开启DBLink 选择是否开启DBLink，详情请参见 逻辑数仓。无锁结构变更 选择是否开启无锁...
查询报错问题
第一次查询时会将数据缓存到内存中，若下次查询所需要的数据依然在内存中时，此时不用再次读磁盘，因此访问速度很快。用户使用的是普通表，且写入大量数据后未执行optimize操作，此时执行SQL会随着插入数据多而变得越来越慢。这是因为分析...
DataWorks模块使用说明
使用流程概览：参考文档：数据集成概述 数据建模与开发 子模块：数据建模 功能说明：数据建模是全链路数据治理的第一步，沉淀阿里巴巴数据中台建模方法论，从数仓规划、数据标准、维度建模、数据指标四个方面，以业务视角对业务的数据进行...
东软案例
此外，东软连续四次入选普华永道“全球软件百强企业”，还曾荣获最具全球竞争力中国公司20强、中国50强全球挑战者、亚洲最受赏识的知识型企业、亚太地区最佳雇主等奖项。业务要求与挑战 线上互联网化的信息服务繁荣发展为政府、企业数字...
UPSERT
说明 时序引擎连续两次写入的PRIMARY KEY相同，第二次写入的数据将直接覆盖第一次写入的数据。第一次写入数据。UPSERT INTO sensor(device_id,region,time,temperature,humidity)VALUES('F07A1260','north-cn','2021-04-22 15:33:10',13.2,...
离线同步常见问题
脏数据实时场景分析：场景一：报错现象：{"message":"写入 ODPS 目的表时遇到了脏数据:第[3]个字段的数据出现错误，请检查该数据并作出修改或者您可以增大阈值，忽略这条记录.","record":[{"byteSize":0,"index":0,"type":"DATE"},{...
应用场景
通过本文档，您可以了解工业大脑开放平台的应用场景，作为您初次使用工业大脑产品的参考。工业大脑的使用场景如下图所示。良率提升 您可以使用工业大脑平台，提升生产良品率，具体应用场景如下。光伏行业：企业借助工业大脑的人工智能技术...
历史数据回放
使用步骤 1、快速入门视频 2、步骤详解 步骤一：设置页面历史回放，进入页面时的右侧面板最下方是历史回放的选择框（第一次创建页面时，历史回放默认不勾选）步骤二：勾选页面历史回放后，需要将页面进行保存（点击保存按钮或者快捷键cmd+s...
添加用户和数据源
说明 如果选择的实例是第一次作为数据源，需要单击 一键添加白名单 将企业数据智能平台的IP地址添加到 AnalyticDB PostgreSQL版 实例的白名单中。数据库 输入如要管理的数据库名称，如何创建数据库，请参见 数据库管理。本次快速入门教程...
DataWorks On EMR使用说明
开始使用 一、数据建模与开发 模块 说明 相关文档 数据建模 数据建模是全链路数据治理的第一步，沉淀阿里巴巴数据中台建模方法论，从数仓规划、数据标准、维度建模、数据指标四个方面，以业务视角对业务的数据进行诠释，让企业内部实现“数...
EMR+DLF数据湖解决方案
通过EMR+DLF数据湖方案，可以为企业提供数据湖内的统一的元数据管理，统一的权限管理，支持数据湖的多种管理如数据生命周期，湖格式自动优化，存储分析等。同时支持多源数据入湖以及一站式数据探索的能力。本文为您介绍EMR+DLF数据湖方案...
1.0.5版本
工厂模型和工艺路径数据订阅 主数据订阅 2）组织根节点名称可编辑 3）主数据和元数据的显示顺序优化 4）数字工厂第三方域名部署 5）告警弹窗状态体验优化 6）一方应用-生产过程追溯 SPC中参数的实时控制非受控状态的操作优化 分设备查看和...
什么是工业大脑AICS
通过输出“供、研、产、销”全链路智能算法服务，激活工业海量数据的价值，帮助工业生态伙伴快速、低成本构建行业解决方案，最终实现把人工智能与大数据技术接入到传统的生产线中，帮助生产企业实现数据流、生产流与控制流的协同，提高生产...
Time travel
基于Transactional Table 2.0，计算引擎可高效支持 Time travel查询 的典型业务场景，即查询历史版本的数据，可用于回溯历史状态的业务数据，或数据出错时，用来恢复历史状态数据进行数据纠正，当然也支持直接使用restore操作恢复到指定的...
配置交互
下发数据应用示例 示例1:下发固定值到指定设备点位 第一步：在页面上增加以下组件，包括工业按钮、文字。第二步：选中文字组件“加压”为文字组件配置交互动作“下发数据”，设置下发值为固定值10。第三步：浏览或发布时，可点击文字“加压...
实施步骤
139.224.92.81/24,139.224.92.22/24,139.224.92.35/24,139.224.4.30/24,139.224.92.102/24,139.224.4.48/24,139.224.4.104/24,139.224.92.11/24,139.224.4.60/24,139.224.92.52/24,139.224.4.26/24,139.224.92.57/24,112.74.156.111/24,120...
冷热分层
Delta Lake是新型数据湖方案，推出了数据流入、数据组织管理、数据查询和数据流出等特性，同时提供了数据的ACID和CRUD操作。通过结合Delta Lake和上下游组件，您可以搭建出一个便捷、易用、安全的数据湖架构。在数据湖架构设计中，通常会...
Delta Lake概述
Delta Lake以数据为中心，围绕数据流走向（数据从流入数据湖、数据组织管理和数据查询到流出数据湖）推出了一系列功能特性，协助您搭配第三方上下游工具，搭建快捷、易用和安全的数据湖。背景信息 通常的数据湖方案是选取大数据存储引擎...
快速入门
MySQL快速入门 SQL Server快速入门 PostgreSQL快速入门 MariaDB快速入门 数据库引擎 以下是对四种数据库引擎的介绍：云数据库RDS MySQL MySQL是全球受欢迎的开源数据库之一，作为开源软件组合LAMP（Linux+Apache+MySQL+Perl/PHP/Python）中...
TPC-H
TPC-H Benchmark是由国际事务处理性能委员会（Transaction Processing Performance Council）发布的数据库领域权威测试标准之一，是被工业界和学术界普遍认可的决策支持测试标准，也是数据库选型的重要参考指标之一。经过严苛的大规模分析...
Quick BI连接MaxCompute
如果您是第一次添加该数据源，需要等待1~5分钟完成数据同步。步骤二：使用Quick BI查询及分析数据 在Quick BI操作界面，您可以基于新创建的数据连接，查询MaxCompute项目数据及分析数据。您可以执行如下操作，操作详细指导，请参见 管理...
阶段一：基础防护建设
在该阶段，DataWorks为您提供了数据分类分级、规范数据开发流程、企业级身份认证、开源身份隔离等多个场景的最佳实践，帮助企业做好数据安全治理的相关基础防护工作。场景一：数据分级分类 无论在任何行业，数据分级分类都是监管首要检查的...
参考：渐进式计算
第n+1天执行需要处理[n-5,n+1]区间的数据。可以看出，第n+1天执行过程中有6天的数据是被重复计算的。如下图所示：渐进式计算方式：第n（n>=7）天执行需要处理[n-6,n]区间的数据；第n+1天执行需要处理[n,n+1]区间的数据。即第n+1天执行只...
什么是数据库网关
使用指引 如果您是第一次使用数据库网关，您可以参考下述步骤开始使用：准备工作 新建数据库网关 添加数据库 为什么选择数据库网关 数据库网关提供安全可靠、低成本的数据库接入服务，通过数据库网关您可以安全且低成本地将第三方云或本地...
DataWorks On CDP/CDH使用说明
一、数据集成 DataWorks的数据集成模块为您提供读取和写入数据至CDP/CDH Hive、CDP/CDH HBase的能力，您需要将Hive或HBase组件创建为 DataWorks的 Hive或HBase数据源，实现将其他数据源的数据同步至Hive或HBase数据源，或将Hive或HBase数据...
- 产品推荐
- 这些文档可能帮助您