开发ODPS Spark任务
MaxCompute Spark支持使用Java、Scala和Python语言进行开发，并通过Local、Cluster模式运行任务，在DataWorks中运行MaxCompute Spark离线作业时采用Cluster模式执行。更多关于MaxCompute Spark运行模式的介绍，详情请参见 运行模式。准备...
开发ODPS Spark任务
MaxCompute Spark支持使用Java、Scala和Python语言进行开发，并通过Local、Cluster模式运行任务，在DataWorks中运行MaxCompute Spark离线作业时采用Cluster模式执行。更多关于MaxCompute Spark运行模式的介绍，详情请参见 运行模式。准备...
Python
前提条件 确保本地已部署 Python 语言运行环境。Python 3.x 连接 OceanBase 数据库 Python 3.x 需要 PyMySQL 驱动进行 OceanBase 数据库连接及使用。步骤一：获取数据库连接参数 参考 获取连接参数 文档，获取相应的租户连接参数，例如：$...
使用WebIDE打包函数第三方依赖
Python Python运行时已经内置部分第三方库。更多信息，请参见 Python内置模块。如果您需要安装其他第三方库，可以在终端默认的/code 目录执行以下命令。pip install-t.flask#或 pip install-t.-r requirements.txt 使用上述方式，您的代码...
使用WebIDE打包函数第三方依赖
Python Python运行时已经内置部分第三方库。更多信息，请参见 Python内置模块。如果您需要安装其他第三方库，可以在终端默认的/code 目录执行以下命令。pip install-t.flask#或 pip install-t.-r requirements.txt 使用上述方式，您的代码...
环境说明
本文介绍在 函数计算 中使用Python语言编写函数的运行环境信息。Python运行时 函数计算 目前支持的Python运行时环境如下。版本 标识符 操作系统 架构 Python 3.10 python3.10 Debian 10 x86_64 Python 3.9 python3.9 Debian 9 x86_64 ...
环境说明
本文介绍在 函数计算 中使用Python语言编写函数的运行环境信息。Python运行时 函数计算 目前支持的Python运行时环境如下。版本 标识符 操作系统 架构 Python 3.10（公测中）python3.10 Debian 10 x86_64 Python 3.9 python3.9 Debian 9 x86...
mysqlclient 连接 OceanBase 数据库
db.py 代码介绍 db.py 文件是一个 Python 语言编写的封装数据库操作的模块，主要用于实现数据库的增删改查操作。该文件中主要包括以下几个部分：导入 MySQLdb 模块和导入数据库连接参数。代码如下：import MySQLdb from config import ...
使用NVIDIA GPU部署AI容器镜像Qwen-7B-Chat
本文聊天机器人为例，介绍如何使用Alibaba Cloud AI Containers（简称AC2）提供的AI容器镜像在NVIDIA GPU上部署通义千问Qwen-7B-Chat。...dnf install-y python-einops \ python3-datasets \ python3-gradio \ python3-mdtex2...
K8s任务
Python脚本 如果想通过Pod运行Python脚本，不需要自己构建镜像，只需要在任务管理创建一个K8s任务，资源类型选择Python-Script，镜像默认是Python（也可以替换为自己的镜像）。单击 运行一次，在Kubernetes集群中可以看到Pod启动，Pod名称...
Python SDK
云网管Python SDK支持Python3.6及以上的Python运行环境，您可以执行python-version命令检查您已安装的Python版本。如果未安装，可以从 Python官方网站 下载安装包并完成安装。SDK安装 使用pip安装云网管Python SDK，如未安装pip请参考：...
使用Python依赖
vvr-6.x及以上版本 python.executable:venv.zip/venv/bin/python python.client.executable:venv.zip/venv/bin/python vvr-6.x以下版本 python.executable:venv.zip/venv/bin/python 使用第三方Python包 说明 下述内容中的 Zip Safe、PyPI ...
使用Python3 Kernel运行EMR PySpark
在E-MapReduce的JupyterHub中，您可以直接运行Python任务，也可以通过Python3 Kernel中的魔术命令PySpark和SQL运行任务。本文通过示例为您介绍如何运行Python3 Kernel任务，以及Python3 Kernel中的魔术命令PySpark和SQL中的参数。前提条件 ...
自定义Python组件上架
AICS组件根据来源分为平台组件和自定义组件。平台组件为系统内置的组件，用户不可编辑；自定义组件是用户自己编辑上架的组件。目前AICS支持Python脚本、Python组件...运行Python组件。将自定义Python脚本拖入画布，单击画布左上角的运行图标。
在DataWorks上运行PySpark作业的最佳实践
PySpark可直接调用Python的API运行Spark作业，PySpark作业需在特定Python环境中运行。EMR默认支持使用Python，若EMR支持的Python版本无法运行PySpark作业，则您可参考本实践配置可用的Python环境并在DataWorks上运行PySpark作业。前提条件 ...
Python 3 UDTF
def process(self,arg):props=arg.split(',')for p in props:self.forward(p)说明 Python 2 UDTF与Python 3 UDTF区别在于底层Python语言版本不一致，请您根据对应版本语言支持的能力编写UDTF。使用限制 Python 3与Python 2不兼容。在您使用...
Python 3 UDAF
Python 2 UDAF迁移 Python 2官方即将停止维护，建议您根据项目类型执行迁移操作：全新项目：新MaxCompute项目，或第一次使用Python语言编写UDAF的MaxCompute项目。建议所有的Python UDAF都直接使用Python 3语言编写。存量项目：创建了大量...
配置任务监控报警规则
实例在定时运行时间后仍未完成：对于受监控的小时/分钟调度任务的指定监控周期，在定时运行时间后的指定时间仍未运行完成，将会触发告警。监控周期范围支持快捷选择 全部、第一个周期、最后一个周期 或 自定义 勾选需要监控的周期范围。...
配置任务监控报警规则
实例在定时运行时间后仍未完成：对于受监控的小时/分钟调度任务的指定监控周期，在定时运行时间后的指定时间仍未运行完成，将会触发告警。监控周期范围支持快捷选择 全部、第一个周期、最后一个周期 或 自定义 勾选需要监控的周期范围。...
配置项目监控报警规则
实例在定时运行时间后仍未完成：对于受监控的小时/分钟调度任务的指定监控周期，在定时运行时间后的指定时间仍未运行完成，将会触发告警。监控周期范围支持快捷选择 全部、第一个周期、最后一个周期 或 自定义 勾选需要监控的周期范围。...
配置项目监控报警规则
实例在定时运行时间后仍未完成：对于受监控的小时/分钟调度任务的指定监控周期，在定时运行时间后的指定时间仍未运行完成，将会触发告警。监控周期范围支持快捷选择 全部、第一个周期、最后一个周期 或 自定义 勾选需要监控的周期范围。...
UDF开发（Python3）
Python 2 UDF迁移 Python 2官方已于2020年初停止维护，建议您根据项目类型执行迁移操作：全新项目：新MaxCompute项目，或第一次使用Python语言编写UDF的MaxCompute项目。建议所有的Python UDF都直接使用Python 3语言编写。存量项目：创建了...
按量计费
计费标准与智能阈值的报警精度有关，目前云监控仅提供标准精度（分钟级监控指标）的智能阈值服务，单价为 0.0025元（一个监控指标时间序列/小时）。一个监控指标的时间序列数量与监控指标自身维度信息有关。监控指标所有维度唯一且有意义的...
规则管理
自定义监控规则帮助您根据实际业务需求，自定义监控规则，监控任务运行状态或资源使用情况，以便及时发现并处理异常。本文为您介绍如何在规则管理页面自定义报警规则，以及添加钉钉群机器人获取Webhook地址。使用限制 自定义监控规则仅对...
配置实时监控报警规则
为了及时发现并处理任务运行过程中的异常，Dataphin支持批量为任务配置报警规则，便于您及时发现并处理异常，同时提高了为任务配置监控报警规则的效率。本文为您介绍如何为实时任务配置监控告警规则。背景信息 Dataphin支持批量配置监控...
配置实时监控报警规则
为了及时发现并处理任务运行过程中的异常，Dataphin支持批量为任务配置报警规则，便于您及时发现并处理异常，同时提高了为任务配置监控报警规则的效率。本文为您介绍如何为实时任务配置监控告警规则。背景信息 Dataphin支持批量配置监控...
查看自定义监控数据
您可以通过自定义监控功能将采集到的监控数据上报至云监控，在云监控中查看其监控数据。操作步骤 登录 云监控控制台。在左侧导航栏，选择 接入中心>自定义监控。在 自定义监控 的 时间序列 页签，选择应用分组和时间序列，单击 维度。在 ...
在函数中配置官方公共层
scipy=1.9.0 numpy=1.23.2 README.md Python36-SciPy1x Python 3.6 Custom 一款开源的科学计算库 scipy-1.5.4 numpy-1.19.5 README.md Python39-PyTorch1x Python 3.9 Custom Custom.Debian10 一款开源机器学习框架（CPU版）torch=1.12.1+...
版本说明
增加Uptime指标，用于查看系统从上次启动到当前的运行时间。修复问题 解决云监控插件Windows版本无动态链接库等问题。3.4.10 分类 说明 发布时间 2021-03-11 新特性 无 修复问题 解决云监控中非阿里云主机接入后读取AccessKey路径错误的...
配置官方公共层
pandas=1.4.3 numpy=1.23.2 README.md Python39-SciPy1x Python 3.9 Custom 一款开源的科学计算库 scipy=1.9.0 numpy=1.23.2 README.md Python36-SciPy1x Python 3.6 Custom 一款开源的科学计算库 scipy-1.5.4 numpy-1.19.5 README.md ...
为什么阈值报警规则触发延迟？
首先您需要明确以下两个概念：监控指标的Period 表示监控指标数据点的间隔时间及聚合时间，例如：大多数监控指标的Period为60秒，表示每60秒产生一个监控指标数据点，这个监控数据是过去60秒所有监控值的聚合值，或最后一个监控值。...
操作流程
使用全景监控服务时，首先进行监控相关的基础设置，然后再监控管理配置监控任务关联告警配置，按照业务视角配置业务链路。配置完成后，可以在监控明细、业务链路和监控概览中查看监控信息。本文介绍全景监控的业务操作基本流程。全景监控的...
安装和卸载云监控插件
当您需要通过云监控采集主机操作系统层面的监控指标，并对重要监控指标设置报警规则，以便及时关注其动态时，需要为主机安装云监控插件。当您不再需要通过云监控来监控某台主机时，可以登录目标主机卸载云监控插件。本文为您介绍为主机自动...
API概览
DescribeMonitoringAgentStatuses 查询云监控插件运行状态 调用DescribeMonitoringAgentStatuses接口查询云监控插件运行状态。ModifyHostInfo 修改非阿里云的主机显示信息 调用ModifyHostInfo接口修改非阿里云的主机显示信息。...
智能基线概述
您可以将重要任务添加到基线上，设置基线 承诺时间 和 预警余量 后：DataWorks会将 承诺时间-预警余量 作为 预警时间，结合监控范围内任务的历史平均运行时长，基线实例 依次推算得出监控范围内各任务的最晚完成时间和最晚开始运行时间。...
使用Remote Read和Remote Write地址以实现开源与云上...
步骤四：查看开源 Prometheus 的监控数据 运行开源 Prometheus 监控后，您可以在 Grafana 大盘上查看监控数据。登录 ARMS控制台。在左侧导航栏选择 Prometheus监控>实例列表，进入可观测监控 Prometheus 版的实例列表页面。在页面的顶部...
为什么应用实例会缺少一段时间的监控数据？
问题现象 如下图所示，某个应用实例缺少一段时间的监控数据。排查方案 由于ARMS探针和应用在同一个进程，您需要检查这个时间段是否有长时间重启和FullGC出现。在 应用总览 页面的 应用相关事件 区域查看是否存在以下类似事件：容器重启事件...
如何处理云监控插件异常停止问题？
当某个主机的云监控插件的状态为 已停止 时，云监控将不能对该主机进行监控。您需要判断该主机的云监控插件的停止原因，并恢复其运行状态。问题分析 云监控插件默认每3分钟一次心跳。如果15分钟没有心跳，则主机判断插件已停止运行。云监控...
常见问题概述
为什么应用实例会缺少一段时间的监控数据？排查池化、接口等部分监控看不到数据的情况 排查JDK 17应用接入后看不到数据的情况？网络相关 如何测试网络连通性？ARMS探针安装成功，但IP显示不正确或不显示怎么办？探针通用问题 ARMS探针和...
Python SDK
机器翻译 SDK GitHub 地址如下：https://github.com/aliyun/aliyun-openapi-python-sdk/tree/master/aliyun-python-sdk-alimt，同时需要下载阿里云 aliyun-python-sdk-core。安装说明 阿里云Python SDK支持 Python 2.6.x,2.7.x 和 3.x及...
- 产品推荐
- 这些文档可能帮助您