芯片厂商入驻流程
安全芯片接入平台（以下简称接入平台）为安全芯片厂商提供了流程化的芯片接入系统，提供相关验证工具、SDK、文档模板，保障安全芯片可以高效、高质量的接入阿里云IoT安全生态。本文为您介绍芯片厂商入驻流程。接入平台需使用阿里云账号登录...
开发获取温度数据的服务
在业务逻辑工作台，开发三个业务服务，分别用于获取设备上报的温度数据，每整点统计前一小时的最高温度数据，和筛选指定时间段内每小时的最高温度数据。前提条件 已完成以下操作：创建项目和产品 开发虚拟设备 使用云数据库创建数据表 说明...
平台安全诊断
平台安全诊断目前支持的安全域说明如下：数据计算与存储安全性诊断 用于对数据权限的控制、数据存储加密、数据存储备份等功能进行安全性诊断，及时识别潜在的安全隐患，提升在数据存储与访问过程中的安全性。数据传输安全性诊断 用于对数据...
方案背景
本文主要为您介绍基于表格存储的海量气象格点数据解决方案的背景及挑战。背景 气象数据是一类典型的大数据，具有数据量大、时效性高、数据种类丰富等特点。气象数据中大量的数据是时空数据，记录了时间和空间范围内各个点的各个物理量的...
RestAPI Reader最佳实践
数据存储json路径：本示例接口获取的数据存储于data下，此处配置为 data。请求参数：请求参数与调度参数搭配使用，实现每天同步当天数据的。请求参数配置为 startTime=${extract_day}${start_time}&endTime=${extract_day}${end_time} 后续...
DataWorks数据集成
该平台具备可跨异构数据存储系统、可靠、安全、低成本、可弹性扩展等特点，可为20多种数据源提供不同网络环境下的离线（全量/增量）数据进出通道。关于数据集成的更多信息，请参见 数据集成（Data Integration）和 支持的数据源与读写插件...
分层存储
您可以根据数据的访问频率，将某些表或分区的存储类型设置为低频存储或长期存储，实现数据的冷热分层，以降低数据存储费用。申请开通使用 目前分层存储处于邀测阶段，如需您需要使用此功能，请单击 申请开通，在 新功能试用申请 页面申请...
术语
硬件压缩盘（Smart-SSD）Smart-SSD是存储物理硬盘层的一种高压缩技术，SSD硬盘内嵌专用FPGA/ASIC压缩计算芯片，在数据读写访问过程中由内嵌专用芯片实时对数据进行解压缩、压缩，大幅降低了数据存储成本。同时，面向 PolarDB 专用场景进行...
PSL4发布说明
通过FPGA/ASIC芯片进行数据压缩可以减少写入存储介质的数据量，从而节省更多的存储空间。更多的空闲空间可以有效降低SSD磁盘固有的写放大，从而实现了性能的显著提升。数据被压缩后，物理Flash的存储数据访问量减少，从而提升了数据的访问...
PSL4发布说明
通过FPGA/ASIC芯片进行数据压缩可以减少写入存储介质的数据量，从而节省更多的存储空间。更多的空闲空间可以有效降低SSD磁盘固有的写放大，从而实现了性能的显著提升。数据被压缩后，物理Flash的存储数据访问量减少，从而提升了数据的访问...
PSL4发布说明
通过FPGA/ASIC芯片进行数据压缩可以减少写入存储介质的数据量，从而节省更多的存储空间。更多的空闲空间可以有效降低SSD磁盘固有的写放大，从而实现了性能的显著提升。数据被压缩后，物理Flash的存储数据访问量减少，从而提升了数据的访问...
企业版和标准版功能对比
支持 不支持 OSS外表 若集群中某些库表的数据几乎没有更新、插入和修改操作，且读取频率非常低，如果您有降本需求，可以使用 PolarDB MySQL版 提供的冷数据归档功能，将这部分数据转存至低成本的OSS上存储，以降低数据存储成本。...
版本及存储引擎
可查询加密 允许用户从客户端加密敏感数据，将其作为完全随机的加密数据存储在数据库服务器端，并对加密数据进行丰富的查询。可查询加密只允许在客户端查看敏感数据的明文，在查询到达服务器端时会同时包含从KMS获取的加密密钥，然后在...
OSS小时数据
StorageType String standard 数据存储类型。取值如下：standard：标准存储-本地冗余 IA：低频访问-本地冗余 archive：归档存储-本地冗余 coldarchive：冷归档存储 deepcoldarchive：深度冷归档存储 standard-zrs：标准存储-同城冗余 IA-...
概述
Serverless数据库能够使得数据库集群资源随客户业务负载动态弹性扩缩，将客户从复杂的业务资源评估和运维工作中解放出来。本文介绍了Serverless的工作原理、核心优势和适用场景。背景 数据库是现代企业IT系统中非常重要的一部分。在创建...
新功能发布记录
功能发布更新 2024年 03月 功能名称 变更类型 功能描述 相关文档 数据工作站 新增 支持以文档形式交付查询的数据和数据变化趋势等信息，并支持在交付后使用智能工具解答数据相关问题。使用数据工作站功能可以提高数据交付效率和数据自助...
产品规格和定价
数据测点：采集数据并发送到TSDB的数据监测点，例如一个温度传感器的温度、某台服务器的CPU使用率；一个数据采集点生产一条时间线。写入能力TPS：指TSDB支持的最大写入速率，即每秒写入数据点的最大数量（数据点/秒）。存储空间 设备产生的...
DataWorks On CDP/CDH使用说明
一、数据集成 DataWorks的数据集成模块为您提供读取和写入数据至CDP/CDH Hive、CDP/CDH HBase的能力，您需要将Hive或HBase组件创建为 DataWorks的 Hive或HBase数据源，实现将其他数据源的数据同步至Hive或HBase数据源，或将Hive或HBase数据...
支持识别的OSS文件类型
68 XPM图像文件 152 LHa压缩文件 69 XWD X Window Dump图像文件 153 LRZIP压缩文件 70 BPG图像文件 154 LZ4压缩文件 71 MongoDB数据库文件 155 Lzip压缩文件 72 MySQL数据库文件 156 Unix压缩文件 73 Oracle数据库文件 157 LZMA压缩文件 74...
什么是PolarDB MySQL标准版
PolarDB MySQL版 的标准版是 PolarDB 全新推出的数据库集群类型，采用阿里云全新一代高性能低成本的计算和存储基础设施，用户使用较低的成本即可享受到 PolarDB 的核心能力。PolarDB MySQL版 的标准版采用计算与存储分离的架构，数据库代理...
产品架构
BE BE是StarRocks的后端节点，负责数据存储、SQL执行等工作。数据存储方面，StarRocks的BE节点都是完全对等的，FE按照一定策略将数据分配到对应的BE节点。BE负责将导入数据写成对应的格式存储，并生成相关索引。在进行Stream Load导入数据...
通过实时计算订阅数据
参数 说明 数据存储类型 DataHub数据存储。EndPoint 通过 DataHub访问域名 获取。Project DataHub的项目名称，可在 DataHub控制台 中获取。使用同样的方式注册RDS数据存储，参数说明如下。参数 说明 Instance RDS的实例ID，可在RDS实例的 ...
数仓规划概述
下图以默认的五层数据分层为例，数据分层规划完成后，后续的表数据存储可根据规划分别存储至不同的数据分层中。贴源层：用于数据库、日志、消息等基础源数据的引入。源数据经过一系列ETL操作进入贴源层，该层级只能挂载贴源表。公共层：...
概述
表（Table）数据存储在Kudu的位置。Table有Schema和全局有序的Primary Key属性，且可以划分为多个Tablet。分片（Tablet）一个表可以被分到若干个分片中，称为Tablet。一个Tablet是指表上一段连续的Segment。一个特定的Tablet会被复制到多个...
常见问题
云数据库 SelectDB 版 与数据管理服务DMS原生搭配，提供可视化、易用的SQL查询编辑器，减少数据管理工作量。云数据库 SelectDB 版 仅需投入少量运维人力。云数据库 SelectDB 版 内核是基于 Apache Doris 内核开发的商业化版本，基于云架构...
数据防泄漏典型案例
外部攻击导致的数据泄漏 基础设施不可控，避免数据存储系统存在安全漏洞 配置不当导致的外部攻击 敏感数据越权访问和存储 支持的数据库 数据安全中心异常告警功能支持检测的数据库类型包括：RDS、PolarDB、PolarDB-X、OSS和MaxCompute。...
高效数据治理实施指南
通过数据存储资源优化，可以有效地降低数据存储成本，提高数据存储的效率，控制数仓团队的数据成本。此外，存储资源优化还可以帮助企业更好地管理数据，提高数据的安全性和可靠性。步骤一：明确成本治理重点，规划数据治理工作 成本治理...
X-Engine简介
因为目标是面向大规模的海量数据存储，提供高并发事务处理能力和降低存储成本，在大部分大数据量场景下，数据被访问的机会是不均等的，访问频繁的热数据实际上占比很少，X-Engine根据数据访问频度的不同将数据划分为多个层次，针对每个层次...
什么是对象存储OSS
数据存储到阿里云OSS以后，您可以选择标准存储（Standard）作为移动应用、大型网站、图片分享或热点音视频的主要存储方式，也可以选择成本更低、存储期限更长的低频访问存储（Infrequent Access）、归档存储（Archive）、冷归档存储（Cold ...
混合存储型（已停售）
使用混合存储型，将所有课程信息存储到磁盘，访问量大的课程和题库数据存储到内存并常驻内存，保证高频访问数据的读写性能，实现高性能与高性价比的有机结合。典型业务场景的示例如下：场景1：使用开源Redis集群存储了100 GB的数据，但高峰...
DataWorks On Hologres使用说明
DataWorks为Hologres提供离线任务调度、元数据管理、数据治理、数据安全管控等能力，但任务计算、数据存储仍在Hologres中。标准模式工作空间下，DataWorks为不同环境绑定不同的Hologres实例，实现DataWorks开发环境与生产环境存储、资源等...
DataWorks On MaxCompute使用说明
DataWorks为MaxCompute提供任务调度、元数据管理、数据治理、数据安全管控等能力，但任务计算、数据存储仍在MaxCompute中。标准模式工作空间下，DataWorks为不同环境绑定不同的MaxCompute项目，实现DataWorks开发环境与生产环境存储、资源...
创建同步任务
通常，网卡流量是通道流量膨胀的1至2倍，实际流量膨胀取决于具体的数据存储系统传输序列化情况。错误记录数控制（脏数据控制）用于定义脏数据阈值，及对任务的影响。重要 当脏数据过多时，会影响同步任务的整体同步速度。不配置时默认允许...
相关的云服务
数据源类云产品 使用DataWorks进行数据集成时，支持将数据从不同数据源间进行离线或实时同步，各类阿里云或自建关系型数据库、非结构化存储、大数据存储、消息队列等产品均支持添加为DataWorks的数据源，添加完成后即可使用DataWorks进行...
数据治理中心概述
数据治理中心可自动发现平台使用过程中数据存储、任务计算、代码开发、数据质量及安全等维度存在的问题，并通过健康分量化评估，从全局、工作空间、个人等多个视角，以治理报告及排行榜呈现治理成果，帮助您高效达成治理目标。同时，提供...
RDS术语
数据结构多样时，可以选择将结构化数据存储在RDS，将非结构化数据存储在MongoDB，满足业务的多样化存储需求。更多信息，请参见 什么是云数据库MongoDB版。慢SQL 执行时间很长的SQL语句。更多信息，请参见 慢日志分析。O OSS Object Storage...
RDS术语
数据结构多样时，可以选择将结构化数据存储在RDS，将非结构化数据存储在MongoDB，满足业务的多样化存储需求。更多信息，请参见 什么是云数据库MongoDB版。慢SQL 执行时间很长的SQL语句。更多信息，请参见 慢日志分析。O OSS Object Storage...
RDS术语
数据结构多样时，可以选择将结构化数据存储在RDS，将非结构化数据存储在MongoDB，满足业务的多样化存储需求。更多信息，请参见 什么是云数据库MongoDB版。慢SQL 执行时间很长的SQL语句。更多信息，请参见 慢日志分析。O OSS Object Storage...
概述
Historical组件负责索引后的历史数据的存储，数据存储在deep storage。Deep storage可以是本地，也可以是HDFS等分布式文件系统。Indexing service包含以下两个组件：Overlord组件负责索引任务的管理、分发。MiddleManager负责索引任务的...
准备工作
本文介绍环境准备和数据准备工作。环境准备 已创建阿里云E-MapReduce的Hadoop集群。具体操作，请参见 创建集群。已下载E-MapReduce的最新 SDK，SDK包的名称格式为emr-datasources_shaded_*.jar，emr-datasources_shaded_*.jar中包含...
- 产品推荐
- 这些文档可能帮助您