Python 2 UDTF
本文为您介绍如何通过Python 2语言编写UDTF。UDTF代码结构 您可以通过 MaxCompute Studio 工具使用Python 2语言编写UDTF代码，代码中需要包含如下信息：编码声明：可选。固定声明格式为#coding:utf-8 或#-*-coding:utf-8-*-，二者等效。当...
开源软件迁移
PyTorch PyTorch是一个开源的Python机器学习库，基于Torch，用于自然语言处理等应用程序。在倚天云服务器上，建议您使用以下两种方式使用PyTorch。使用官方版本构建PyTorch的Docker镜像。更多信息，请参见 PyTorch for AArch64。构建时，...
示例代码
不涉及 Golang Websocket Node.js10 Websocket Node.js12 Websocket Python37 Websocket Golang Websocket Node.js14 Websocket Python3.9 Websocket 自定义框架 不涉及 Java8-SpringBoot Ruby example PowerShell example F#example ...
PAI-TF概述
背景 TensorFlow是Google最新的开源深度学习计算框架，支持CNN、RNN及LSTM等多种神经网络模型，对语音、图像及文本等领域的模型训练效率极佳。TensorFlow的功能丰富且强大，并拥有高度灵活的API，受到业界的高度关注。PAI-TF是人工智能平台...
运行时介绍
64 Node.js 10.x Linux（Debian 9）x86_64 Node.js 8.x Linux（Debian 9）x86_64 Python运行时 版本 标识符 操作系统 架构 Python 3.10 python3.10 Debian 10 x86_64 Python 3.9 python3.9 Debian 9 x86_64 Python 3.6 python3 Debian 9 x...
开源支持
Python SDK PyODPS是MaxCompute的Python版本的SDK，提供对MaxCompute对象的基本操作和DataFrame框架，让您可以轻松地在MaxCompute上进行数据分析。更多详情请参见GitHub项目 aliyun-odps-python-sdk 和包括所有接口、类的细节等详细内容的 ...
功能特性
EMR on ECS 功能集 功能 功能描述 参考文档 集群管理 创建集群 您可以轻松构建和运行Hadoop、Spark、Hive、Presto等开源大数据框架，以进行大规模数据处理和分析等操作。创建集群 释放集群 在完成EMR集群任务后及时释放集群，可以释放资源...
客户端
开源社区提供了多种语言的TSDB For InfluxDB®客户端SDK，列举如下。Elixir Instream(instream)Erlang Erlang InfluxDB UDP Writer Go InfluxDB Client Haskell influxdb-haskell Java influxdb-java JavaScript/Node.js node-influx Lisp ...
PAI官方镜像
阿里云PAI为您提供了基于不同框架、不同CUDA版本的官方镜像，您可以在使用 DLC、EAS、DSW 时直接选择适用的镜像，即可快速基于官方镜像构建AI开发环境。本文为您介绍PAI预置的官方镜像能力和核心镜像列表。认识官方镜像 阿里云PAI为您提供...
开源自建对比
Web场景 对比项 Web应用+ECS Web应用+K8s集群 SAE 多语言运行环境 不支持，基于开源自建，探索集成解决方案。不支持，基于开源自建，探索集成解决方案。支持PHP-FPM结合Nginx的在线应用。远程调试 不支持，基于开源自建，探索集成解决方案...
AliOS Things 概述
更正文档 AliOS Things 发布于 2017年杭州云栖大会，是 AliOS 家族旗下的、面向IoT领域的、高可伸缩的物联网操作系统，于2017年10月20号宣布在 github 上开源，当前的版本是 AliOS Things 3.3。架构总览 AliOS Things 支持多种CPU架构，...
连接方式概述
ORM 框架 ORM 对象关系映射（Object Relational Mapping，简称 ORM），是一种程序技术，用于实现面向对象编程语言里不同类型系统的数据之间的转换。从效果上说，它其实是创建了一个可在编程语言里使用的"虚拟对象数据库。在连接 OceanBase ...
JindoFS实战演示
Fluid+JindoFS对HDFS上的数据进行训练加速 Fluid+JindoFS对HDFS上的数据进行训练加速 2021-07-13 在AI训练场景中处理HDFS数据面临很多问题，例如计算存储分离，数据读取性能较差，无法满足AI训练作业的IO性能、很多深度学习训练框架并不...
概述
MaxCompute Spark是MaxCompute提供的兼容开源Spark的计算服务。它在统一的计算资源和数据集权限体系之上，提供Spark计算框架，支持您以熟悉的开发使用方式提交运行Spark作业，满足更丰富的数据处理分析需求。使用限制 MaxCompute Spark支持...
通过SkyWalking上报Python应用数据
说明 如果应用部署于阿里云生产环境，则选择阿里云VPC网络接入点，否则选择公网接入点。背景信息 SkyWalking是一款广受欢迎的国产APM（Application Performance Monitoring，应用性能监控）产品，主要针对微服务、Cloud Native和容器化...
通过SkyWalking上报Python应用数据
说明 如果应用部署于阿里云生产环境，则选择阿里云VPC网络接入点，否则选择公网接入点。背景信息 SkyWalking是一款广受欢迎的国产APM（Application Performance Monitoring，应用性能监控）产品，主要针对微服务、Cloud Native和容器化...
概述
访问步骤 针对不同的语言，操作有所不同。请按需参见以下文档实现社区版SDK访问阿里云 云消息队列 RocketMQ 版：社区版TCP协议Java SDK接入说明 社区版TCP协议C++ SDK接入说明 暂不支持通过社区版TCP协议的Go SDK和Python SDK访问阿里云 云...
支持的检测规则
依赖包漏洞检测 现代企业常用开源组件，开源依赖提供方通常没有较多的预算进行安全性测试，黑客的主要攻击目标也是开源包内的漏洞。为了杜绝安全隐患，企业需要做到以下三点：了解工程都使用了哪些依赖包；删除不需要的依赖包；检测并修复...
数据采集概述
日志服务支持采集服务器与应用、开源软件、物联网、移动端、标准协议、阿里云产品等多种来源的数据。本文列举了日志服务所支持的数据来源。数据来源 日志服务支持的数据来源如下：类别 来源 接入方式 更多 应用 程序输出 Logtail 查询分析...
全面兼容和支持 Seata
GTS 已经全面兼容和支持开源分布式事务 Seata，实现与 Seata 的协议兼容，支持使用 Seata 的应用无缝迁移到云上，基于 GTS 提供的服务高效运行。Seata 简介 Simple Extensible Autonomous Transaction Architecture（Seata）是一款开源的...
什么是图计算服务
Graph Compute 与其他开源图计算相比的优势 问题一：查询性能为什么能比开源好很多 图计算服务内核引擎iGraph在分区并发查询的基础上，通过自研的协程异步框架并发召回，将同步串行磁盘访问改造为异步并行，极大的提高了查询性能；...
消息收发功能
终端SDK示例代码 说明 针对不同的使用场景，本文提供的示例代码所覆盖的语言并不代表该场景下仅支持该语言，您可以参照Java的示例代码完成其余语言的参数填写。消息收发 终端SDK消息收发示例 语言 下载地址 Java mqtt.demo.java C mqtt....
Python SDK使用手册
查看语言版本 执行命令 python-V 查看Python语言版本。管控API SDK 安装SDK 执行以下命令安装Python SDK。pip install alibabacloud_eventbridge20200401=2.0.1 执行以下命令安装打印端口。pip install alibabacloud_tea_console SDK示例 ...
安装PyODPS
PyODPS是MaxCompute的Python版本的SDK，提供对MaxCompute对象的基本操作及DataFrame框架，帮助您在MaxCompute上使用Python进行数据分析，支持在DataWorks或本地环境上使用。本文为您介绍在本地环境上使用PyODPS时，如何安装PyODPS。前提...
什么是EMR Serverless Milvus
阿里云向量检索Milvus版是一款Serverless全托管服务，确保了与开源Milvus的完全兼容性，并支持无缝迁移。它在开源版本的基础上增强了可扩展性，能提供大规模AI向量数据的相似性检索服务。凭借其开箱即用的特性、灵活的扩展能力和全链路监控...
Python SDK
本文介绍安装云网管Python SDK及使用Python SDK完成常见操作的相关步骤。前提条件 已开通云网管。更多信息，请参见 开通使用云网管。已创建并获取AccessKey。更多信息，请参见 访问密钥。已安装Python开发环境。云网管Python SDK支持Python...
概述
Flink（VVR）完全兼容开源Flink，相关内容请参见如下文档：DataStream API Table API&SQL Python API 使用场景 Flink广泛应用于大数据实时化的场景，本文从技术领域和企业应用场景进行介绍。技术领域 从技术领域的角度，Flink主要用于以下...
E-MapReduce支持倚天云服务器
阿里云E-MapReduce（简称EMR）支持使用倚天云服务器构建开源大数据集群。与现有X86架构实例体验完全相同的情况下，具有更高的性价比，帮助您降低成本并提高效率。本文为您介绍倚天云服务器的特性、优势，以及在E-Mapreduce上倚天云服务器的...
Python语言迁移
Python是一种解释型脚本语言，Python代码与平台无关，各大操作系统都已经支持了ARM平台的Python。在ARM平台可以直接使用Python，应用代码无需编译，可直接运行。以Alibaba Cloud Linux 3为例，可以使用yum命令进行安装。sudo yum install ...
基础术语
中文 英文 释义 Dubbo Dubbo Dubbo 是一个分布式服务框架，致力于提供高性能和透明化的 RPC 远程服务调用方案，是阿里巴巴 SOA 服务化治理方案的核心框架，每天为 2,000+个服务提供 3,000,000,000+次访问量支持，并被广泛应用于阿里巴巴...
导出开源引擎任务
DataWorks提供任务搬站功能，支持将Oozie、Azkaban、Airflow、DolphinScheduler等开源调度引擎的任务快速迁移至DataWorks。本文为您介绍导出任务的文件要求等相关信息。背景信息 您需要先导出开源调度引擎的任务至本地或OSS，再导入至...
解压Snappy压缩文件
投递成功后，您可以通过C++ Lib、Java Lib、Python Lib、Linux工具等方式解压OSS文件。使用C++ Lib解压 下载Snappy Lib。使用 Snappy.Uncompress 解压。使用Java Lib解压 选择以下任意一种方式下载Java Lib。说明 1.1.2.1版本存在Bug，可能...
StarRocks概述
说明 本文部分内容来源于开源StarRocks的 什么是StarRocks。StarRocks特性 StarRocks的架构设计融合了MPP数据库，以及分布式系统的设计思想，其特性如下所示。架构精简 StarRocks内部通过MPP计算框架完成SQL的具体执行工作。MPP框架能够...
使用WebIDE打包函数第三方依赖
Python Python运行时已经内置部分第三方库。更多信息，请参见 Python内置模块。如果您需要安装其他第三方库，可以在终端默认的/code 目录执行以下命令。pip install-t.flask#或 pip install-t.-r requirements.txt 使用上述方式，您的代码...
使用WebIDE打包函数第三方依赖
Python Python运行时已经内置部分第三方库。更多信息，请参见 Python内置模块。如果您需要安装其他第三方库，可以在终端默认的/code 目录执行以下命令。pip install-t.flask#或 pip install-t.-r requirements.txt 使用上述方式，您的代码...
概述
Alluxio是一个面向基于云的数据分析和人工智能的开源的数据编排技术。Alluxio为数据驱动型应用和存储系统构建了桥梁，将数据从存储层移动到距离数据驱动型应用更近的位置，从而能够更容易被访问，同时使得应用程序能够通过一个公共接口连接...
Hive概述
Hive是一个基于Hadoop的数据仓库框架，在大数据业务场景中，主要用来进行数据提取、转化和加载（ETL）以及元数据管理。背景信息 E-MapReduce（简称EMR）版本中，Hadoop、Hive版本和EMR集群的配套情况，请参见 版本概述。Hive结构 名称 说明...
连接并使用实例
引擎类型 连接方式 参考文档 宽表引擎 通过Lindorm宽表SQL连接宽表引擎 基于Java JDBC接口的应用开发 基于Python DB-API的应用开发 通过Lindorm-cli连接并使用宽表引擎 通过HBase API连接宽表引擎 基于HBase Java API的应用开发 基于HBase...
SmartData 3.4.x版本简介
SmartData组件是EMR Jindo引擎的存储部分，为EMR各个计算引擎提供统一的存储、缓存、计算优化以及功能扩展。SmartData组件主要包括JindoFS、...JindoFS生态支持 新增Python版本的Jindo OSS SDK，支持基本的OSS操作，兼容OSS2 Python库。
通过SSH隧道方式访问开源组件Web UI
在E-MapReduce（简称EMR）集群中，为了确保集群安全，Hadoop、Spark和Flink等开源组件的Web UI的端口均未对外开放。鉴于此安全机制，您无法直接访问这些组件的管理界面。EMR提供了控制台和SSH隧道两种方式进行安全访问。本文为您介绍如何...
- 产品推荐
- 这些文档可能帮助您