域名解析已经生效，但是网站打不开？
域名解析生效：域名解析是指将域名指向用户...如果解析测试生效，则代表网站无法打开的原因不是域名解析导致，建议如下：检查是否为备案原因导致的网站不可用。参考 备案与DNS解析。联系服务器IP或网站空间技术人员，排查网站无法访问的原因。
FE参数配置
max_running_rollup_job_num_per_table 默认值：1 是否可以动态配置：true 是否为Master FE节点独有的配置项：true 说明：控制Rollup作业并发限制。dynamic_partition_enable 默认值：true 是否可以动态配置：true 是否为Master FE节点独有...
Java SDK Demo
本文以一个完整的程序为例，提交一个计算π的作业到数据湖分析DLA，跟踪它的状态，查询历史上的运行结果。import com.aliyuncs.DefaultAcsClient;import com.aliyuncs.IAcsClient;import com.aliyuncs.exceptions.ClientException;import ...
PAI-TF概述
PAI-TF的作业都是基于底层的分布式调度系统动态调度至不同机器。当您提交PAI-TF作业时，无需担心是否需要提前申请GPU物理主机，PAI-TF所需要的GPU资源随作业的提交动态分配，随作业的结束动态释放。全局计算调度 当您在使用MaxCompute计算...
管道概述
10 智能生产管道 适用于智能生产作业（如：视频摘要、字幕提取等所有生产作业）系统已为您分配了1个默认的智能生产管道（默认管道在控制台暂不展示、也不支持修改和创建）。通过SubmitIProductionJob接口提交智能生产作业时，如果不传入...
Python SDK Demo
int,page_size:int):"""打印spark集群中历史作业详情:param client:阿里云客户端:param cluster_name:运行作业的spark集群名称:param page_number:历史作业页码,编码是从1开始的:param page_size 每页返回多少作业:return:None:exception ...
管理自定义连接器
更新自定义连接器 说明 更新自定义连接器后，使用该连接器的运行中的作业不受影响。重新启动作业后，会使用更新的连接器。进入自定义连接器更新入口。登录 实时计算控制台。单击目标工作空间 操作 列下的 控制台。在左侧导航栏，单击 数据...
分场景排错指引
如果作业中存在乱序的数据，这些乱序的数据的Watermark不在新窗口的开窗和关窗时间范围内，导致这些数据被丢弃。例如下图中11秒的数据在16秒进入15~20秒的窗口，而它的Watermark为11，会被系统认为是迟到数据，从而导致被丢弃。通常丢失的...
基本概念
您可以在NIS服务器上建立用户，当新节点加入到NIS中时，便可以使用NIS服务器中的用户来登录这个节点，而不需要在每个节点上都建立同样的用户。LDAP：轻型目录访问协议（Lightweight Directory Access Protocol），在E-HPC中，LDAP被用来对...
配置自动调优
Flink作业支持智能调优和定时调优两种自动调优模式。本文为您介绍如何配置智能调优和定时调优，以及配置过程中的注意事项。背景信息 通常，您需要花费大量的时间进行作业调优。例如，新上线一个作业时，需要考虑如何配置该作业的资源、并发...
使用Logview查看作业运行信息
说明 处于Terminated状态的Instance由于作业已处理完成，因此不存在队列信息。单击Status查看队列详细信息：Sub Status：表示当前子状态信息。WaitPos：表示排队位置，如果是 0 表示正在运行，如果为-表示尚未到Fuxi。QueueLength：表示...
作业优先级
本文为您介绍MaxCompute的包年包月作业优先级功能，并提供开启、设置和查看作业优先级的操作指导。背景信息 MaxCompute的包年包月计算资源有限，在实际数据开发过程中，系统需要优先保障重要作业的计算资源。例如，系统必须在06:00点前产出...
使用Python依赖
您可以在Flink Python作业中使用自定义的Python虚拟环境、第三方Python包、JAR包和数据文件等，本文为您介绍如何在Python作业中使用这些依赖。背景信息 本文通过以下场景为您介绍如何使用Python依赖：使用自定义的Python虚拟环境 使用第三...
Logview诊断实践
在实际业务开发过程中，企业通常要求作业能在期望的时间节点前产出结果，并根据结果做进一步决策，这就需要作业开发人员及时关注作业运行状态，识别并优化慢作业。您可以通过MaxCompute的Logview功能诊断慢作业。本文为您介绍导致出现慢...
查询加速（MCQA）
示例如下，对于有大量分区的表不建议把所有分区的数据都设置成数据源，可以筛选需要的分区或通过自定义SQL获取需要的数据。http://service.cn-beijing.maxcompute.aliyun.com/api?project=*_beijing&interactiveMode=true&alwaysFallback=...
MySQL
此外，VVR 4.0.8以下版本在全量读取阶段无法执行Checkpoint，全量阶段的作业失败会导致作业重新读取全量数据，稳定性不佳。因此建议您将作业升级到VVR 4.0.8及以上版本。结果表 RDS MySQL数据库支持自增主键，因此在结果表的DDL中不声明该...
Spark常见问题
作业报错 运行Spark作业时，报错User signature dose not match，如何解决？运行Spark作业时，报错You have NO privilege，如何解决？运行Spark作业时，报错Access Denied，如何解决？运行Spark作业时，报错No space left on device，如何...
运行模式
此外，您也不需要上传 spark-defaults.conf 文件，而是将 spark-defaults.conf 文件中的配置都逐条加到ODPS SPARK节点配置项中。ODPS SPARK节点 spark-submit 主Java、Python资源 app jar or python file 配置项-conf PROP=VALUE Main ...
湖仓版作业调度
云原生数据仓库AnalyticDB MySQL版 湖仓版（3.0）的作业调度提供离线SQL应用、Spark应用的复杂任务流功能，具备灵活的ETL数据处理、数据开发等能力。使用流程 前提条件 如果通过阿里云账号（主账号）登录，使用作业调度功能需要满足以下两...
写入或更新调优指南
Binlog源表 Flink消费Hologres Binlog支持的数据类型有限，对不支持的数据类型（如SMALLINT）即使不消费此字段，仍然可能导致作业无法上线。从Flink引擎VVR-6.0.3-Flink-1.15 版本开始，支持通过JDBC模式消费Hologres Binlog，此模式下支持...
2023年
GetRunningJobs-获取运行态的作业列表 2023-08-24 新增GetJobResourceUsage-获得作业执行者级别的资源使用列表 新说明 指定时间范围内，针对已结束的全部作业进行统计，以“天”为级别展示作业执行者级别的资源使用总量。...
基于Flink+Paimon搭建流式湖仓
SQL作业中通过SET语句指定的配置项也可以在 作业 运维 页面的作业 部署详情 页签指定，详见 如何配置作业运行参数？Paimon写入性能优化请参见 Apache Paimon官方文档。创建CDAS同步作业。在 实时计算控制台 上，新建名为ods的SQL 流作业，...
资源规划及规格选型
计算W/N的前提是数据处理作业的 cost_cpu 很稳定，而且在这N个小时内，所有作业都随时在运行，不存在任何空闲的计算资源。但是，实际项目可能会因为某些原因导致作业运行时间延长（例如参与计算的数据量增加），相当于W会变大。同时，由于...
2023-04-13版本
部署JAR作业 部署Python作业 作业启动流程优化 作业的资源和Flink Conf的相关配置放置在部署详情页面，您可以在不停止作业的情况下调配资源，启动阶段仅需要设置启动位点。作业启动 新增元数据页面 Flink社区不推荐使用临时表，建议您使用...
作业调试
您可以使用作业调试功能模拟作业运行、检查输出结果，验证SELECT或INSERT业务逻辑的正确性，提升开发效率，降低数据质量风险。本文为您介绍如何进行Flink SQL作业调试。背景信息 您可以在Flink开发控制台使用作业调试功能本地验证作业逻辑...
管理作业版本
背景信息 本文从以下方面为您介绍如何管理作业版本：对比作业版本 回滚作业版本 锁定作业版本 删除作业版本 对比作业版本 仅支持SQL代码和作业配置内容的对比，有差异的内容就会被标记出来。登录 实时计算控制台。在 Flink全托管 页签，...
Quick BI公开之后URL开始可以打开，后来无法打开
问题描述 Quick BI公开之后URL开始可以打开，后来打不开了。问题原因 因为每次点击公开按钮都会生成新的链接，原来的链接就失效了。解决方案 取消‘生成新链接’的勾选或不要每次复制链接后去点击公开按钮。适用于 Quick BI
计算费用（按量付费）
计费公式 类型 价格 说明 示例 MapReduce作业当日计算费用=当日总计算时×单价 一个执行成功的MapReduce作业计算时=作业运行时间（小时）×作业调用的Core数量 标准MapReduce作业（指使用按量付费标准版计算配额的MapReduce作业）一般情况...
2023-10-23版本
部署作业 增强作业排序筛选能力 在作业运维页面，支持根据作业健康分、业务延迟进行排序，支持根据修改人筛选作业。暂无 支持RAM角色、资源目录成员、云SSO用户登录鉴权 阿里云账号体系全面适配，包括阿里云账号、RAM用户、RAM角色、资源...
QueryFpDBDeleteJobList-查询清空或删除DNA库
接口说明 本接口通过清空或删除 DNA 库作业 ID 进行查询，如果不传入 ID 则默认返回最近 20 个作业列表。QPS 限制 本接口的单用户 QPS 限制为 100 次/秒。超过限制，API 调用会被限流，这可能会影响您的业务，请合理调用。更多信息，请参见...
媒体处理常见问题
媒体转码为每个用户设置了共享型转码资源的配额，用户最多能同时处理的作业数量不超过该限额。在系统繁忙时，能同时处理的作业数量可能小于共享型转码资源限额。什么是转码预置模板？预置模板是一种内置转码模板，其中包含您希望媒体转码在...
按量付费闲时版
MaxCompute提供单价更低的按量付费计算资源规格类型（按量付费闲时版），为您降低在延迟不敏感场景下使用MaxCompute的成本。本文为您介绍MaxCompute按量付费闲时版的应用场景、资源说明和计费说明，并帮助您了解注意事项和使用方法。应用...
计量计费
另外，为了避免大量突发的作业占据太多资源，限制并发的作业数为3个，即任意时间，单个用户最多只有3个通用文本向量的异步作业在并发运行，其他的作业只能在队列中等待。超出基础限流配额请发送电子邮件至 dashscope@alibabacloud.com 额外...
查看历史作业实例日志
Flink全托管支持在作业探查界面、对象存储OSS或者日志服务SLS上查看历史作业实例的日志。本文为您介绍如何在作业探查界面、OSS或SLS上查看历史作业实例日志。背景信息 如果出现以下情况，则您需要查看历史作业实例的日志：您需要查看、搜索...
计量计费
另外，为了避免大量突发的作业占据太多资源，限制并发的作业数为3个，即任意时间，单个用户最多只有3个通用文本向量的异步作业在并发运行，其他的作业只能在队列中等待。超出基础限流配额请发送电子邮件至 modelstudio@service.aliyun.com ...
使用成本优化功能实现降本增效
MaxCompute为您提供成本优化（计算资源优化推荐）功能，可基于实际作业请求量和资源配置期望，对包年包月一级Quota类型的计算资源生成更优的资源配置方案，帮助您进一步优化计算成本。本文通过典型场景案例介绍如何通过成本优化（计算资源...
QueryFpShotJobList-查询DNA作业结果
查询DNA作业结果，本接口支持查询所有类型的DNA作业结果。接口说明 提交 DNA 作业后，DNA 服务会进行 DNA 对比，通过本接口可以查询作业结果。查询文本 DNA 作业目前仅支持华东 2（上海）地域使用。QPS 限制 本接口的单用户 QPS 限制为 100...
通用文本向量模型
另外，为了避免大量突发的作业占据太多资源，限制并发的作业数为3个，即任意时间，单个用户最多只有3个通用文本向量的异步作业在并发运行，其他的作业只能在队列中等待。text-embedding-async-v2 如果您熟悉编程语言，推荐您使用SDK或API...
ListAIJob-查询智能标签或视频DNA作业
调用ListAIJob查询智能标签或视频DNA作业。在提交智能标签或视频DNA作业后，会进行异步处理，通过此接口可以实时查询作业信息。接口说明 视频 DNA 支持的服务地域：华北 2（北京）、华东 2（上海）、新加坡。智能标签支持的服务地域：华北 ...
2023年
当您遇到作业运行较长时间仍未结束、或当作业运行结束后发现 作业运行时长不达预期（作业运行慢）时，您可以通过作业分析的资源消耗页签查看是否为计算资源紧张、多作业资源抢占导致，然后依据实际业务情况优化任务执行情况，进行作业优先...
- 产品推荐
- 这些文档可能帮助您