Tunnel SDK示例汇总引导
本文向您引导介绍使用Tunnel SDK的典型示例，您可在本文查看典型场景SDK示例的文档链接，如不在本文罗列的典型场景中，您也可以前往开源Tunnel SDK文档中查看更多其他示例。注意事项 MaxCompute提供了两个服务地址供您选择：Tunnel服务地址...
快速开始
大语言模型 Qwen2 Qwen2是Qwen开源大语言模型的新系列。参数范围包括0.5B到72B，包括Mixture-of-Experts模型。与最先进的开源语言模型（包括之前发布的 Qwen1.5）相比，Qwen2在一系列针对语言理解、语言生成、多语言能力、编码、数学、推理...
开源对比
云消息队列 RabbitMQ 版 是一款基于高可用分布式存储架构实现的AMQP 0-9-1协议的消息产品，能够兼容开源RabbitMQ客户端，与开源RabbitMQ相比，能够解决各种稳定性痛点（例如消息堆积、脑裂等问题），同时具备高并发、分布式、灵活扩缩容等...
客户端
开源社区提供了多种语言的TSDB For InfluxDB®客户端SDK，列举如下。Elixir Instream(instream)Erlang Erlang InfluxDB UDP Writer Go InfluxDB Client Haskell influxdb-haskell Java influxdb-java JavaScript/Node.js node-influx Lisp ...
自定义标量函数（UDSF）
说明 python_demo-master 属于第三方搭建的网站，访问时可能会存在无法打开或访问延迟的问题。在PyCharm中，单击 file>open，打开刚才解压缩完成的 python_demo-master。双击打开 \python_demo-master\udx\udfs.py 后，根据您的业务，修改 ...
快速开始
大语言模型 说明 支持的领域/任务：aigc Qwen2 Qwen2是Qwen开源大语言模型的新系列。参数范围包括0.5B到72B，包括Mixture-of-Experts模型。与最先进的开源语言模型（包括之前发布的 Qwen1.5）相比，Qwen2在一系列针对语言理解、语言生成、...
功能特性
管理外部集群 Notebook笔记本 通过EMR Notebook可以完成对SQL、Python、Markdown等多种语言程序的代码的编写、调试和执行。管理笔记本 用户管理 EMR Notebook中的用户有权限管理当前工作空间及其内容。管理用户 EMR Workflow 工作空间管理 ...
开源自建对比
Web场景 对比项 Web应用+ECS Web应用+K8s集群 SAE 多语言运行环境 不支持，基于开源自建，探索集成解决方案。不支持，基于开源自建，探索集成解决方案。支持PHP-FPM结合Nginx的在线应用。远程调试 不支持，基于开源自建，探索集成解决方案...
Python脚本
Designer 提供自定义Python脚本的功能，您可以使用Python脚本组件自定义安装依赖包及运行自定义的Python函数。本文为您介绍Python脚本组件的配置方法及使用示例。背景信息 Python脚本 组件位于 Designer 组件的 自定义算法组件 文件夹下。...
概述
访问步骤 针对不同的语言，操作有所不同。请按需参见以下文档实现社区版SDK访问阿里云 云消息队列 RocketMQ 版：社区版TCP协议Java SDK接入说明 社区版TCP协议C++ SDK接入说明 暂不支持通过社区版TCP协议的Go SDK和Python SDK访问阿里云 云...
集成WAF日志到Syslog系统
本文介绍了如何使用Python Program将Web应用防火墙（WAF）的日志集成到Syslog日志系统中，以实现合规、审计等要求，也方便您在安全操作中心统一管理所有相关日志。背景信息 该方案的整体集成架构如下图所示：阿里云日志服务为日志数据提供...
支持的检测规则
依赖包漏洞检测 现代企业常用开源组件，开源依赖提供方通常没有较多的预算进行安全性测试，黑客的主要攻击目标也是开源包内的漏洞。为了杜绝安全隐患，企业需要做到以下三点：了解工程都使用了哪些依赖包；删除不需要的依赖包；检测并修复...
消息收发功能
终端SDK示例代码 说明 针对不同的使用场景，本文提供的示例代码所覆盖的语言并不代表该场景下仅支持该语言，您可以参照Java的示例代码完成其余语言的参数填写。消息收发 终端SDK消息收发示例 语言 下载地址 Java mqtt.demo.java C mqtt....
Python作业开发
本文为您介绍Flink Python API作业开发的背景信息、使用限制、开发方法、调试方法和连接器使用等。背景信息 Flink Python作业需要您在本地完成开发工作，Python作业开发完成后，再在Flink开发控制台上部署并启动才能看到业务效果。整体的...
自定义表值函数（UDTF）
Flink Python UDX示例中包含了Python UDF、Python UDAF和Python UDTF的实现。本文以Windows操作系统为例，为您介绍如何进行UDTF开发。下载并解压 python_demo-master 示例到本地。在PyCharm中，单击 file>open，打开刚才解压缩完成的 ...
自定义聚合函数（UDAF）
使用限制 由于Flink全托管产品受部署环境和网络环境等因素的影响，所以开发Python自定义函数时，需要注意以下限制：仅支持开源Flink V1.12及以上版本。Flink全托管集群上已预装了Python 3.7.9，因此需要您在Python 3.7.9版本开发代码。...
安装
安装方式介绍。无论您要使用哪个产品的开发工具包，都必须安装 aliyun-python-sdk-...通过pip来安装项目依赖 安装核心库：pip install aliyun-python-sdk-core 安装云产品的 SDK，例如安装 Ecs 产品的 SDK：pip install aliyun-python-sdk-ecs
安装HBase Java SDK
如果客户端是开源HBase 1.x版本，您可以在Maven项目的 pom.xml 文件中添加以下依赖来安装HBase Java SDK。groupId>...
安装
CentOS、Red Hat Enterprise Linux：yum-y install python3-pip Ubuntu、Debian：apt-get-y install python3-pip OpenSUSE、SUSE：zypper-n install python3-pip 安装SDK 安装阿里云SDK前，请确保您已下载并在项目中引入 Extension....
EMR Workbench
多语言支持：允许使用Python、SQL等多种语言进行数据分析任务。协同开发：支持多用户同时访问，每个用户的开发环境是独立的，互不影响，实现高效协作。数据处理能力：集成了Apache Spark、Hive、StarRocks等强大的数据处理框架。EMR ...
Python语言迁移
Python是一种解释型脚本语言，Python代码与平台无关，各大操作系统都已经支持了ARM平台的Python。在ARM平台可以直接使用Python，应用代码无需编译，可直接运行。以Alibaba Cloud Linux 3为例，可以使用yum命令进行安装。sudo yum install ...
Flink概述
背景信息 EMR Flink完全兼容开源Flink，相关内容请参见社区文档。例如：DataStream API Table API&SQL Python API 使用场景 Flink广泛应用于大数据实时化的场景，本文从技术领域和企业应用场景进行介绍。技术领域 从技术领域的角度，Flink...
导出开源引擎任务
DataWorks提供任务搬站功能，支持将Oozie、Azkaban、Airflow、DolphinScheduler等开源调度引擎的任务快速迁移至DataWorks。本文为您介绍导出任务的文件要求等相关信息。背景信息 您需要先导出开源调度引擎的任务至本地或OSS，再导入至...
HBase Thrift Server
背景信息 Thrift是一个可伸缩，跨语言服务RPC框架，集成了强大的软件堆栈及代码生成引擎，使得各种语言做到无障碍，高效通信，目前支持C++、Java、Python、PHP、Ruby、Erlang、Perl、Haskell、C#、Go、Cocoa、JavaScript、Node.js和...
使用Python依赖
vvr-6.x及以上版本 python.executable:venv.zip/venv/bin/python python.client.executable:venv.zip/venv/bin/python vvr-6.x以下版本 python.executable:venv.zip/venv/bin/python 使用第三方Python包 说明 下述内容中的 Zip Safe、PyPI ...
概述
MaxCompute Spark是MaxCompute提供的兼容开源Spark的计算服务。它在统一的计算资源和数据集权限体系之上，提供Spark计算框架，支持您以熟悉的开发使用方式提交运行Spark作业，满足更丰富的数据处理分析需求。使用限制 MaxCompute Spark支持...
编辑作业
如未创建项目，请创建新项目，详情请参见 管理项目。项目管理的集群名为emr_openapi_demo，集群ID为C-69CB0546800F*。说明 通过CreateFlowJob创建作业时，可以在返回结果中找到项目ID。通过ListFlowProject可以查询该Region下所有数据开发...
使用WebIDE打包函数第三方依赖
Python Python运行时已经内置部分第三方库。更多信息，请参见 Python内置模块。如果您需要安装其他第三方库，可以在终端默认的/code 目录执行以下命令。pip install-t.flask#或 pip install-t.-r requirements.txt 使用上述方式，您的代码...
Spark作业配置
前提条件 已创建好项目，详情请参见 项目管理。操作步骤 进入数据开发的项目列表页面。通过阿里云账号登录 阿里云E-MapReduce控制台。在顶部菜单栏处，根据实际情况选择地域 和资源组。单击上方的 数据开发 页签。单击待编辑项目所在行的 ...
使用WebIDE打包函数第三方依赖
Python Python运行时已经内置部分第三方库。更多信息，请参见 Python内置模块。如果您需要安装其他第三方库，可以在终端默认的/code 目录执行以下命令。pip install-t.flask#或 pip install-t.-r requirements.txt 使用上述方式，您的代码...
连接并使用实例
引擎类型 连接方式 参考文档 宽表引擎 通过Lindorm宽表SQL连接宽表引擎 基于Java JDBC接口的应用开发 基于Python DB-API的应用开发 通过Lindorm-cli连接并使用宽表引擎 通过HBase API连接宽表引擎 基于HBase Java API的应用开发 基于HBase...
使用Python读文件
Dataphin仅支持开发基于Python的脚本，不支持开发依赖第三方组件的脚本。开发基于第三方组件的脚本，需要通过pip install下载第三方组件。本文为您介绍基于Dataphin如何通过构建Shell任务调用Python读取第三方文件。前提条件 添加访问地址...
Python容器型
python-sdk-iot=7.8.0 \ aliyun-python-sdk-ecs=4.10.1 \ aliyun-python-sdk-vpc=3.0.2 \ aliyun-python-sdk-rds=2.1.4 \ aliyun-python-sdk-kms=2.5.0 \ aliyun-python-sdk-imm=1.3.4 \ aliyun-log-python-sdk=0.6.38 \ aliyun-python-sdk...
创建PYTHON计算任务
为了满足丰富的Python应用场景，Dataphin支持创建可以使用Python语法的PYTHON计算任务。本文为您介绍如何基于Dataphin新建PYTHON计算任务。使用限制 Python 3.7无法向下兼容Python 2.7，无法直接升级历史的Python 2任务。2.9.3版本后，...
Flink SQL参考
Flink SQL是为了简化计算模型、降低您使用Flink门槛而设计的一套符合标准SQL语义的开发语言。本文通过以下方面，为您介绍Flink SQL的使用方法。操作 文档 关键字 关键字 创建数据视图 创建数据视图 DML数据操作语句（INSERT INTO）INSERT ...
Flink（VVR）作业配置
EMR-3.27.x及之前版本使用Flink社区开源版本，EMR-3.27.x之后版本使用完全兼容开源Flink的企业版（VVR）。本文介绍如何配置Flink（VVR）类型的作业。背景信息 Flink企业版由Apache Flink创始团队官方出品，拥有全球统一商业化品牌。VVR提供...
安装和使用EMR Serverless Spark SDK
阿里云EMR Serverless Spark SDK支持Java、TypeScript、Go、PHP、Python、C#、C++、Swift语言SDK开发，封装了2023-08-08版本API，以访问密钥（AccessKey）识别调用者身份，提供自动签名等功能。安装EMR Serverless Spark SDK 各语言SDK的...
Python计算型
核心：将要部署的内容全部打包到项目根目录的 code.zip 压缩包，云开发平台只认项目根目录的 code.zip 压缩包进行部署 requirements.txt 配置项目依赖文件（如果有）如果项目有依赖，则需要打开 CloudIDE 的「终端」输入以下命令进行安装，...
内置镜像
内置镜像说明如下：功能分类 镜像名称 内置三方包及版本信息 编程语言及版本 说明 基础镜像 common numpy=1.21.6 pandas=1.3.5 Python 3.7 基础镜像，包含Pandas、NumPy等基础第三方包。numpy=1.26.4 pandas=2.2.2 Python 3.11 科学计算 ...
安装AIACC-Training
{python_version} 为Python的版本号，需要去除版本号中的半角句号（.），例如Python 3.6对应 python_version=36。对于Python 3.8或以上版本的whl包，请使用如下的下载地址模板：...
- 产品推荐
- 这些文档可能帮助您