新建计算资源
操作步骤 登录 数据资源平台控制台。在页面左上角单击 图标，选择 探索。在顶部菜单栏，单击 图标，选择目标工作组，单击 数据中心。在左侧导航栏，选择 数据配置>计算资源管理。在 计算资源管理 页面右上角，单击 新建计算资源。在 新建...
Serverless Spark概述
区别于传统实体集群，虚拟集群中没有固定的计算资源，您无需配置和维护计算节点，只需根据实际业务需要分配资源额度和配置待访问目标数据所在的网络环境。同时，虚拟集群也可以配置默认的Spark作业参数，方便您统一管理Spark作业。关于如何...
功能更新动态（2023年）
支持配置数据源编码，配置数据源编码后，可在Flink SQL任务中通过 数据源编码.table 或 数据源编码.schema.table 的格式引用MySQL、Hologres和MaxCompute数据源中的表。创建FTP数据源 创建Salesforce数据源 创建OSS数据源 安全设置 安全...
可视化页面性能优化常见问题
组件配置数据接口的响应速度以及加载的数据量。可视化应用使用到的组件数量、种类和版本是否为老版本。在可视化应用中网络以及电脑配置影响较大，其次是静态资源以及数据接口响应时长。可视化应用中自定义组件引入第三方库的种类和版本是否...
可视化页面性能优化常见问题
组件配置数据接口的响应速度以及加载的数据量。可视化应用使用到的组件数量、种类和版本是否为老版本。在可视化应用中网络以及电脑配置影响较大，其次是静态资源以及数据接口响应时长。可视化应用中自定义组件引入第三方库的种类和版本是否...
轮播页面
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
使用成本优化功能实现降本增效
MaxCompute为您提供成本优化（计算资源优化推荐）功能，可基于实际作业请求量和资源配置期望，对包年包月一级Quota类型的计算资源生成更优的资源配置方案，帮助您进一步优化计算成本。本文通过典型场景案例介绍如何通过成本优化（计算资源...
2023年
2023年09月01日-MaxCompute 数据传输独享资源费用（包年包月）降价通知 尊敬的MaxCompute用户：MaxCompute对数据传输独享资源组架构重构，提高了运行效率，同等资源可以支持更多并发，从而降低了使用资源的成本，遂在2023年9月1日零时开始...
独享资源组模式
独享数据集成资源组 独享数据集成资源组创建成功后，您需要在配置数据集成任务时修改任务运行资源。在 资源组列表>独享资源组 页面，单击相应资源后的 修改归属工作空间，绑定独享数据集成资源组归属的工作空间。在数据集成任务的编辑页面...
读取优化
Result[]re=table.get(List<Get>gets)大scan缓存是否设置合理 scan一次性需求从服务端返回大量的数据，客户端发起一次请求，服务端会分多批次返回客户端，这样的设计是避免一次性传输较多的数据给服务端及客户端有较大的压力。目前数据会...
产品优势
阿里云E-MapReduce（简称EMR）为您提供相对方便可控的企业级开源大数据服务。您可以快速搭建开源大数据服务，例如Hadoop、Spark、Flink、Kafka和HBase服务。稳定可靠的开源组件 100%采用社区开源组件，随开源版本升级迭代，详情请参见 版本...
数据组织优化
本文为您介绍Transactional Table 2.0在数据组织优化服务上的架构设计。Clustering 当前痛点 Transactional Table 2.0支持分钟级近实时增量数据导入，高流量场景下可能会导致增量小文件数量膨胀，从而引发存储访问压力大、成本高，并且大量...
2023年
2023-06-27 全部地域 REVERSE MULTIMAP_FROM_ENTRIES SHUFFLE FLATTEN SEQUENCE ARRAY_NORMALIZE NGRAMS COMBINATIONS 计算资源优化推荐功能发布 MaxCompute推出计算资源优化推荐功能，向客户生成并推荐更优的计算资源配置方案，进一步化...
Transaction Table2.0概述
随着当前数据处理业务场景日趋复杂，很多业务场景并不要求延时秒级更新可见或者行级更新，更多的需求是分钟级或者小时级的近实时数据处理叠加海量数据批处理场景，MaxCompute支持基于Transaction Table2.0实现近实时的增全量一体的数据存储...
场景：跨账号创建数据源
配置数据源信息。配置基本信息。根据界面提示，配置如下信息。标准模式工作空间，需分别创建开发环境数据源和生产环境数据源。工作空间模式，详情请参见 必读：简单模式和标准模式的区别。关键参数配置如下：对方账号的UID：其他阿里云账号...
API概览
ModifyVectorConfiguration 修改实例向量引擎优化配置 修改实例向量引擎优化配置。PauseInstance 暂停实例 暂停AnalyticDB PostgreSQL版实例。RebalanceDBInstance 实例部署平衡 对AnalyticDB PostgreSQL版实例进行部署平衡。...
关键特性
低成本 专属集群 MyBase 在满足业务架构需求的同时，利用不同数据库的不同资源特性，通过合理有效的资源超配，实现更高的资源利用率，降低成本，详情请参见 设置资源超配。高弹性 在特定时间可以对实例进行临时的资源弹性扩展，提升实例的...
计算资源组管理
当您需要在 云原生多模数据库 Lindorm 中高效管理计算引擎的资源时，本文档将指导您如何创建计算资源组，并对每个资源组进行配置，以实现资源隔离，优化资源分配，并确保作业按照预期性能运行。前提条件 已开通计算引擎。如何开通，请参见 ...
创建集群
这是一个预设的、用于定期或在特定条件下清理不再使用的PVC资源的Job任务，旨在优化存储资源管理，避免无效或冗余数据持久化导致的存储空间浪费问题。Presto：是基于内存的分布式SQL交互式查询引擎。支持多种数据源，适合PB级海量数据的...
文档更新动态（2022年）
更新说明 补数据、实例运行诊断 2022年10月25日 新增数据标准功能 支持标准集的属性配置、数据标准的批量导入、下载及上线管理、码表和词根的配置管理。新增落标映射规则管理配置。支持数据标准的标准集创建及发布、审批、下线等全线生命...
设置投递数据到对象存储OSS
当您需要将资源的定时快照或配置变更历史投递到对象存储OSS的指定地址时，需要设置存储空间（Bucket）。资源数据投递到指定存储空间后，您可以查看或下载JSON格式文件。前提条件 请确保您已开通对象存储OSS服务。具体操作，请参见 开通OSS...
网格优化中心概述
自适应配置推送优化 四、软硬结合性能优化的持续推进 五、资源超卖模式下的支持 一、收敛服务发现的范围，提升网格配置的推送效率 在Istio中，可以通过以下几种方式收敛服务发现的范围，从而提高控制平面推送网格配置的效率。通过收敛服务...
功能更新动态（2024年）
查询并下载数据 资源 支持在.py类型的资源文件中使用 from dataphin import odps/hive，使用条件和限制与在Python任务中一致；使用该语句，支持读取逻辑表和进行表鉴权。上传资源及引用 离线研发和建模研发 开发环境下，逻辑表数据预览变量...
新功能发布记录
本文介绍了ACM每次发布涉及的新增功能、功能优化、重要问题修复及对应的文档，帮助您了解ACM的发布动态。迁移到MSE Nacos ACM进入下线状态，所有配置管理相关的需求由MSE中的Nacos承接（ACM独享版，更好的安全和稳定性）。您需要在ACM控制...
视频
过滤器 打开 过滤器，选择已创建的数据过滤器或新建数据过滤器，并配置数据过滤器脚本，实现数据的筛选功能。详情请参见 管理数据过滤器。数据响应结果 实时展示了组件所使用的数据。当组件数据源发生变化时，数据响应结果会对应展示最新的...
新建数据探查任务
数据过滤 开启后，可在代码框中配置数据过滤的脚本。例如：city='hangzhou'。探查范围 用于设置需要探查记录数。支持全部记录、随机抽样n条记录、百分比抽样n%记录。全部记录：已选字段指定分区内的所有记录均参与探查，适用于需要对全量...
新建数据探查任务
数据过滤 开启后，可在代码框中配置数据过滤的脚本。例如：city='hangzhou'。探查范围 用于设置需要探查记录数。支持全部记录、随机抽样n条记录、百分比抽样n%记录。全部记录：已选字段指定分区内的所有记录均参与探查，适用于需要对全量...
配置资源属性
配置资源组 进入数据开发节点的编辑页面，单击右侧导航栏的 调度配置，在 资源属性 区域配置节点调度时使用的资源组。在 调度资源组 下拉框，选择任务调度时需要使用的资源组，默认配置为 公共调度资源组。说明 如果需要修改新建任务默认...
产品性能
I/O优化 CPU:40 核|内存：176G ECS 规格：ecs.d2s.10xlarge 数据盘配置：吞吐密集型本地盘 7300GB X 15块 系统盘配置：ESSD云盘 256GB X 1块 OSS带宽（北京region）10Gb with JindoFS SDK 1.2 软件配置 集群中Spark资源配置如下 spark....
新功能发布记录
通过Spark SQL读Lindorm数据 2023年6月 类别 名称 说明 相关文档 新增 资源总览和作业使用统计 湖仓版（3.0）支持查看以下资源使用情况：集群级别的计算资源和存储资源，包括预留资源和弹性资源。资源组级别的总计算资源、计算预留资源、...
新功能发布记录
OceanBase 数据库之间的数据迁移 支持 TiDB 数据库至 OceanBase 数据库 MySQL 租户的结构迁移、全量迁移、增量同步、全量校验和反向增量 迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户 支持 PolarDB-X 1.0 数据库至 OceanBase ...
功能更新动态（2022年）
2022年10月25日 华北2（北京）基线监控配置、调度配置、计费说明 2022年10月27日 华东1（杭州）2022年11月01日 华南1（深圳）2022年11月03日 华东2（上海）数据标准 支持标准集的属性配置、数据标准的批量导入、下载及上线管理、码表和词根...
运维中心概述
调度资源大盘：为您提供全局任务资源分配、全局资源消耗、建议优化任务等，便于您及时获取资源调度状况、了解资源调度趋势，以判断资源的消耗及影响，从而作出预算准备、资源扩容或规格升级的决策。任务运维 任务运维依照调度时效分为周期...
新功能发布记录
2022-01-21 全部地域 可视化搜索 SQL搜索 支持设置集成服务 配置审计支持的集成服务如下：云速搭CADT 配置审计可以将资源数据投递到云速搭CADT，云速搭CADT根据资源变更自动调整应用架构中的资源配置，帮助您实时且准确地管理应用架构。...
双11消费屏柱图
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
数据上传下载成本优化
Tunnel文件上传优化 小文件会消耗更多计算资源，建议当文件量积累较大时一次性上传。例如，调用Tunnel SDK时，缓存达到64 MB提交一次。合理预估VPC带宽 当数据在IDC机房时，如果您需要通过专线同步数据到MaxCompute，请预估带宽，平衡数据...
产品服务等级协议
本服务等级协议（Service Level Agreement，以下简称“SLA”）约定了阿里云向客户提供的数据资源平台的服务可用性等级指标及赔偿方案。特别提示您，除非另有约定，本协议不适用于数据资源平台公测、邀测、免费的功能及版本，也不适用于数据...
功能特性
资源中心 数据源中心 支持配置数据源，以满足不同的数据存储和访问需求。数据源中心 安全中心 安全中心涵盖用户管理、告警实例及告警组管理，以及审计日志，确保了操作的精细权限控制和安全监控。管理用户 管理告警组和告警实例 管理审计...
散点层
过滤器 打开 过滤器，选择已创建的数据过滤器或新建数据过滤器，并配置数据过滤器脚本，实现数据的筛选功能。详情请参见 管理数据过滤器。数据响应结果 实时展示了组件所使用的数据。当组件数据源发生变化时，数据响应结果会对应展示最新的...
文档更新动态（2024年）
部分数据源支持配置数据库连接超时、重试次数，此外，离线集成任务中也可以单独配置任务级别的重试次数。对离线集成任务和全域数据质量监控规则运行生效，支持的数据源包括MySQL、PolarDB-X（原DRDS）、PolarDB、AnalyticDB for MySQL 2.0...
- 产品推荐
- 这些文档可能帮助您