Pandas API支持
MaxFrame提供了兼容Pandas的API接口，您可以用类似于Pandas的方式来操作MaxCompute中的数据，同时利用MaxCompute强大的分布式计算能力，简化您在大数据环境下的数据处理工作，本文为您介绍Pandas API的支持情况。当前MaxFrame支持的API详情...
基本概念
冷热分离 Lindorm宽表引擎实现了数据的冷热分离能力，系统会自动根据用户设置的冷热分界线自动将表中的冷、热数据分类归档到冷、热存储中。更多信息，请参见 冷热分离介绍。LTS LTS（Lindorm Tunnel Service）是面向Lindorm业务场景特点...
OSS数据安全防护最佳实践
DSC 在您完成数据源识别授权后，从您存储在OSS的海量数据中快速发现和定位敏感数据，对敏感数据分类分级并统一展示，同时追踪敏感数据的使用情况，并根据预先定义的安全策略，对数据进行保护和审计，以便您随时了解OSS数据资产的安全状态。...
概述
事实上，鉴于数据库研究在数据发现、数据管理、版本控制、数据清理和数据集成方面积累的专业知识，PolarDB for AI 可以为数据驱动的智能应用提供一站式的数据（包括：数据、特征和模型）服务来解决这种割裂状态，大大减少数据驱动的智能...
组件参考：所有组件汇总
逻辑回归二分类 该组件是一个二分类算法，支持稀疏及稠密数据格式。GBDT二分类 该组件的原理是设置阈值，如果特征值大于阈值，则为正例，反之为负例。PS-SMART二分类 参数服务器PS（Parameter Server）致力于解决大规模的离线及在线训练...
数据加工过程卡点校验
数据在数据仓库中进行清洗、加工、整合、算法和建模等一系列运算后，再通过同步工具输出到数据产品中进行消费。整个流程中，先有数据加工，才有数据仓库模型和数据仓库代码的建设。因此，保障数据加工过程中的质量是保障离线数据仓库整体...
新功能发布记录
本文介绍云数据库Redis版的产品功能动态及对应的文档。说明 更多产品动态请参见 云产品动态。Redis内核版本更新 Redis企业版小版本发布日志 Redis社区版小版本发布日志 Proxy小版本发布日志 功能发布更新 2024年 2024年04月 变更项 说明 ...
CDT服务条款
提示条款 欢迎您与阿里云计算有限公司（以下简称“阿里云”）共同签署本《阿里云产品服务协议》（下称“本协议”）并使用阿里云服务！协议中条款前所列索引关键词仅为帮助您理解该条款表达的主旨之用，不影响或限制本协议条款的含义或解释...
新功能发布记录
OceanBase 数据库之间的数据迁移 支持 TiDB 数据库至 OceanBase 数据库 MySQL 租户的结构迁移、全量迁移、增量同步、全量校验和反向增量 迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户 支持 PolarDB-X 1.0 数据库至 OceanBase ...
环境准备
步骤一：购买开通云产品 本次实验涉及的阿里云产品如下，您可参考以下内容准备合适的云产品：说明 如果您已有满足环境要求的云产品，也可不新开通，直接使用已有的云产品进行操作。云产品 环境要求 DataWorks 版本要求：仅操作体验...
高效基因序列检索助力快速分析肺炎病毒
云原生数据仓库AnalyticDB MySQL版 是云端托管的PB级高并发低延时数据仓库，通过 AnalyticDB MySQL版 向量检索功能构建的基因检索系统，支持毫秒级针对10亿级别的向量数据进行查询分析，更加快速、高效的为肺炎病毒防控、研发治疗药物以及...
产品优势
合规性 使用数据安全中心产品，可以帮助企业满足等保2.0对“云计算环境下安全审计”及“个人信息保护”的要求。云原生 依托云原生优势，为云上数据源提供一体化数据保护和防御机制。支持防护常见的结构化数据、非结构化数据和大数据产品，...
技术架构选型
本教程中使用阿里云大数据产品MaxCompute配合DataWorks，完成整体的数据建模和研发流程。完整的技术架构图如下图所示。其中，DataWorks的数据集成负责完成数据的采集和基本的ETL。MaxCompute作为整个大数据开发过程中的离线计算引擎。...
资产安全概述
生产数据写开发环境、测试环境数据准备 例如，脚本任务需要识别手机号的位数，但该脚本任务中的数据表选择了MD5脱敏算法，将11位的手机号变成了32位，导致脚本任务无法识别手机号位数。因此，在使用资产安全的过程中，您需要结合安全法规及...
资产安全概述
生产数据写开发环境、测试环境数据准备 例如，脚本任务需要识别手机号的位数，但该脚本任务中的数据表选择了MD5脱敏算法，将11位的手机号变成了32位，导致脚本任务无法识别手机号位数。因此，在使用资产安全的过程中，您需要结合安全法规及...
客户案例
MaxCompute已被广泛应用于各大领域处理云上大数据，帮助众多企业解决了海量数据分析问题，同时降低企业运维成本，企业人员可更专注于业务开发。本文为您介绍MaxCompute的精选客户案例。MaxCompute的全量客户案例信息，请参见 行业客户案例...
功能特性
数据安全中心 功能集 功能 功能描述 参考文档 数据分类分级 数据资产接入 支持自动发现并接入阿里云上的数据资产。支持通过一键连接或账密连接方式连接数据库，一键接入支持：RDS、PolarDB、PolarDB-X（原DRDS）、Redis、OSS、TableStore、...
常见问题
数据作为客户重要的信息资产，需要得到有效保护，确保有一个明确定义的、技术可实现的数据分类与保护策略，解决业务逻辑在分类和保护级别上不一致的问题。作为数据保护的基础，数据安全保护应先聚焦于自动化的数据分类。数据分类使用预先...
阶段一：基础防护建设
例如：《金融数据安全分级指南 JR/T 0197-2020》《网络安全标准实践指南——网络数据分类分级指引》《信息安全技术个人信息安全规范 GB/T 35273—2020》《信息技术大数据数据分类指南 GB/T 38667-2020》《基础电信企业数据分类分级方法 YD/...
免费体验Lindorm宽表性能&价格力
背景 云原生多模数据库Lindorm面向海量泛时序数据、半结构化数据和非结构化数据提供低成本存储、在线查询和检索、离线分析、AI 推理等一站式数据服务，支持MySQL协议，兼容HBase、Elasticsearch、Hive、Spark、HDFS 等开源标准。...
服务条款
本服务条款是阿里云计算有限公司(以下简称“阿里云”)与您就云数据库Memcache版(ApasaraDB Memcache）等相关事项所订立的有效合约。您通过盖章、网络页面点击确认，或以其他阿里云认可的方式选择接受本服务条款，或实际使用阿里云提供的 云...
大数据专家服务
大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户构建和持续优化的大...
性能测试工具-Shell
配置被测表的压缩算法，可选项有：#NONE LZO ZSTD SNAPPY GZ LZ4 ZSTD 等#注意部分被测系统可能不支持指定的压缩算法#云Lindorm推荐使用ZSTD ahbench.table.compression=SNAPPY#配置被测表的编码算法，可选项有：#NONE DIFF INDEX#注意部分...
云原生大数据计算服务 MaxCompute
云原生大数据计算服务(MaxCompute)是一种快速、完全托管的TB/PB级数据仓库解决方案。MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式计算模型，能够更快速的解决用户海量数据计算问题，有效降低企业成本，并保障数据安全。
行业趋势与背景
在这种需求下，大规模分布式事务型数据库成为解决分布式系统数据存储、管理的主要方向。PolarDB-X 技术发展 产品前言 PolarDB-X 是由阿里巴巴自主研发的云原生分布式数据库，融合分布式SQL引擎DRDS与分布式自研存储X-DB，基于云原生一体化...
块存储概述
块存储是阿里云为云服务器ECS提供的块设备产品，具有高性能和低时延的特点，支持随机读写，满足大部分通用业务场景下的数据存储需求。您可以像使用物理硬盘一样，在云服务器ECS上进行格式化并建立文件系统来使用块存储。本文介绍块存储的...
阿里云电子政务云产品全家福
阿里云电子政务云平台价格是华北2公共云同等配置的2倍 云数据库 HBase 版 云数据库 HBase 版是面向大数据领域的一站式NoSQL服务，100%兼容开源HBase并深度扩展，支持海量数据下的实时存储、高并发吞吐、轻SQL分析、全文检索、时序时空查询...
云数据库录入
本文介绍如何将阿里云数据库录入至数据管理DMS中。前提条件 支持录入的云数据库类型，请参见 支持的云数据库。系统角色为DBA或管理员。查看系统角色的操作，请参见 查看我的系统角色。已在云数据库的白名单中添加DMS的服务器访问地址。详细...
持久内存型
云原生内存数据库Tair 持久内存型（简称持久内存型），基于持久内存技术，为您提供大容量、兼容Redis的内存数据库产品。单实例成本对比云数据库Redis社区版最高可降低30%，且数据持久化不依赖传统磁盘，保证每个操作持久化的同时提供近乎...
将自建ClickHouse数据迁移到云ClickHouse中
当您计划将自建数据库ClickHouse迁移到云数据库ClickHouse提升业务的可扩展性和可靠性时，本文档将为您提供实际操作指南以及如何处理可能遇到的问题。参考本文档迁移策略，您将能够高效、安全地完成数据迁移，并最大化云端环境的利益。说明...
Serverless Spark概述
DLA Spark基于云原生架构，提供面向数据湖场景的数据分析和计算功能。开通DLA服务后，您只需简单的配置，就可以提交Spark作业，无需关心Spark集群部署。重要 云原生数据湖分析（DLA）产品已退市，云原生数据仓库 AnalyticDB MySQL 版 湖仓...
功能特性
面向业务场景的工作区管理 工业领域垂直细分众多，从生产环境、工艺、设备到产品质地、形态千差万别，因此不同的业务场景在样本存储与组织、标注功能需求及预训练的源算法模型上会存在较大差异。工业视觉智能需要帮助用户来对这些特定场景...
Cloudera CDP 企业数据云平台
企业数据云平台Cloudera Data Platform（简称阿里云CDP），是阿里云和Cloudera联合打造阿里云上的大数据平台。
我是安全管理员
跨库查询 跨数据库查询为不同环境下的在线异构数据源，提供及时的关联查询服务。数据库开发 数据变更 对数据进行变更，以满足上线数据初始化、历史数据清理、问题修复、测试等诉求。结构设计 在新项目、新需求或者优化等业务场景中，一般会...
视频分类训练
针对原始视频数据，您可以使用视频分类训练算法组件对其进行模型训练，从而获得用于推理的视频分类模型。本文介绍视频分类训练算法组件的配置方法及使用示例。前提条件 已开通OSS并完成授权，详情请参见 开通OSS服务 和 云产品依赖与授权：...
持久内存型
Tair 持久内存型（简称持久内存型）基于持久内存技术，为您提供大容量、兼容Redis的内存数据库产品。单实例成本对比 Redis社区版 最高可降低30%，且数据持久化不依赖传统磁盘，保证每个操作持久化的同时提供近乎Redis社区版的吞吐和延时，...
产品功能
VPC 虚拟网络：云数据库Memcache版全面接入VPC，可基于阿里云构建出一个隔离的网络环境。SASL（Simple Authentication and Security Layer）鉴权：采用SASL进行用户身份认证鉴权，保障数据访问安全性。完善的工具为您分担缓存数据库的运维...
性能测试工具-图形工具
AHBench-jenkins是由阿里云HBase团队研发的benchmark测试套件。本文介绍AHBench-jenkins测试套件的使用和注意事项。介绍 该测试套件集成了YCSB（Yahoo!Cloud Serving Benchmark）工具，YCSB提供了测试集合、测试流程控制、结果汇聚等功能。...
什么是MaxCompute
MaxCompute是适用于数据分析场景的企业级SaaS（Software as a Service）模式云数据仓库，以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，使您可以经济并高效...
性能测试工具-Shell
配置被测表的压缩算法，可选项有:#NONE LZO ZSTD SNAPPY GZ LZ4 ZSTD 等#注意部分被测系统可能不支持指定的压缩算法#云数据库HBase性能增强版推荐使用ZSTD ahbench.table.compression=SNAPPY#配置被测表的编码算法，可选项有:#NONE DIFF ...
- 产品推荐
- 这些文档可能帮助您