MaxCompute UDF（Python）常见问题
本文为您介绍使用Python语言编写的MaxCompute UDF的常见问题。类或资源问题 调用MaxCompute UDF运行代码时的常见类或资源问题如下：问题现象一：运行报错描述为 function 'xxx' cannot be resolved。产生原因：原因一：调用MaxCompute UDF...
Python SDK快速入门
本文介绍如何快速使用日志服务Python SDK完成常见操作，包括创建项目（Project）、创建日志库（Logstore）、写入日志和查询日志等。前提条件 已创建RAM用户并完成授权。具体操作，请参见 创建RAM用户并完成授权。已配置环境变量 ALIBABA_...
概述
Web应用防火墙WAF（Web Application Firewall）日志服务帮助您采集并存储接入...集成WAF日志到Syslog系统 您可以使用Python Program将WAF日志集成到Syslog日志系统中，以实现合规、审计等要求，也方便您在安全操作中心统一管理所有相关日志。
使用Syslog协议上传日志
使用Syslog协议上传日志时，需配置日志上传地址，格式为 Project名称.日志服务Endpoint:Syslog协议端口，例如 test-project-1.cn-hangzhou-intranet.log.aliyuncs.com:10009 。请根据您的日志服务Project所在地域选择Endpoint。更多信息，...
UDAF概述
MaxCompute支持您通过Java、Python语言编写代码创建UDAF，扩展MaxCompute的函数能力，满足个性化业务需求。本文为您介绍UDAF类型、使用限制、注意事项、开发流程及使用说明等信息。背景信息 UDAF为用户自定义聚合函数，适用于多进一出业务...
安装Python SDK
使用Python SDK进行日志服务各类操作前，您需要安装Python SDK。本文介绍Python SDK的安装方法。前提条件 已开通日志服务。更多信息，请参见 开通日志服务。已创建并获取AccessKey。更多信息，请参见 访问密钥。阿里云账号AccessKey拥有...
采集Python日志
本文介绍如何通过Logtail采集Python日志。背景信息 Python的logging模块提供通用的日志系统，可供第三方模块或者应用使用。logging模块定义了不同的日志级别和记录日志的方式。logging模块包括logger、handler、filter、formatter四个组件...
Python 3 UDTF
Python 2 UDTF迁移 Python 2官方即将停止维护，建议您根据项目类型执行迁移操作：全新项目：新MaxCompute项目，或第一次使用Python语言编写UDTF的MaxCompute项目。建议所有的Python UDTF都直接使用Python 3语言编写。存量项目：创建了大量...
SDK参考概述
日志服务Java SDK：使用GetLogs接口查询日志 使用Java SDK管理日志库Logstore 通过消费组消费数据 使用Aliyun Log Java Producer写入日志数据 日志服务Python SDK：使用GetLogs接口查询日志 使用Python SDK管理日志库Logstore 使用...
Python 3 UDAF
Python 2 UDAF迁移 Python 2官方即将停止维护，建议您根据项目类型执行迁移操作：全新项目：新MaxCompute项目，或第一次使用Python语言编写UDAF的MaxCompute项目。建议所有的Python UDAF都直接使用Python 3语言编写。存量项目：创建了大量...
UDF开发（Python3）
Python 2 UDF迁移 Python 2官方已于2020年初停止维护，建议您根据项目类型执行迁移操作：全新项目：新MaxCompute项目，或第一次使用Python语言编写UDF的MaxCompute项目。建议所有的Python UDF都直接使用Python 3语言编写。存量项目：创建了...
Java SDK快速入门
本文介绍如何快速使用日志服务Java SDK完成常见操作，包括创建项目（Project）、创建日志库（Logstore）、写入日志和查询日志等。前提条件 已创建RAM用户并完成授权。具体操作，请参见 创建RAM用户并完成授权。已配置环境变量 ALIBABA_...
集成WAF日志到Syslog系统
本文介绍了如何使用Python Program将Web应用防火墙（WAF）的日志集成到Syslog日志系统中，以实现合规、审计等要求，也方便您在安全操作中心统一管理所有相关日志。背景信息 该方案的整体集成架构如下图所示：阿里云日志服务为日志数据提供...
解析Syslog标准格式数据
Syslog日志消息既可以记录在本地文件中，也可以通过网络发送到接收Syslog的服务器。服务器可以对多个设备的Syslog消息进行统一的存储，或者解析其中的内容做相应的处理。问题 长期以来，没有一个标准来规范Syslog的格式，导致Syslog的格式...
使用SDK创建跟踪
本文为您介绍如何使用SDK创建跟踪，将操作事件投递到日志服务SLS，并配置日志服务报表。前提条件 请确保您已安装 Python 和 pip。请确保您已安装Python编辑工具。本文以 Visual Studio Code 为例进行介绍。请确保您已获取阿里云账号或RAM...
如何获取Nacos-Client的日志？
Python Nacos-Client Python语言的Nacos-Client使用Python的Logging模块，会和应用的Logging模块保持一致并输出到应用的日志中。C++ Nacos-Client C++语言的Nacos-Client的日志默认在应用所在目录下，文件名为 nacos-sdk-cpp.log,可通过 ...
update_logstore
调用CLI命令修改Logstore基本信息。注意事项 在使用CLI命令之前，您需要注意以下事项：已开通日志服务。具体操作，请参见 如何开始使用日志服务？...更多信息，请参见 使用Java SDK管理日志库Logstore 和 使用Python SDK管理日志库Logstore。
采集脚本执行日志
本文介绍如何通过日志服务控制台创建Logtail采集配置来采集脚本执行日志。前提条件 已在服务器上安装Linux Logtail 1.7.1及以上版本。具体操作，请参见 安装Logtail（Linux系统）。功能说明 Logtail通过配置的用户，调用配置的脚本命令，...
create_logstore
调用CLI命令创建Logstore。注意事项 在使用CLI命令之前，您需要注意以下事项：已开通日志服务。具体操作，请参见 如何开始使用日志服务？...更多信息，请参见 使用Java SDK管理日志库Logstore 和 使用Python SDK管理日志库Logstore。
通过DaemonSet方式采集容器文本日志
如果需要只使用一个Logtail实例收集Kubernetes节点上所有容器的日志，可以使用DaemonSet方式在Kubernetes集群上部署Logtail。本文介绍DaemonSet方式采集容器文本日志的工作原理、使用限制、前提条件、操作步骤等信息。工作原理 DaemonSet...
宣布阿里云 Python SDK 即将终止 Python 2.7 和 ...
Python 软件基金会(PSF)即 Python 语言管理机构，会发布 Python 各个版本的终止时间表。当社区宣布不再支持某个语言的某个版本后，我们后续在【一年左右】时间也必然会对该版本进行下线操作。本次对 Python 2.7 和 Python 3.6 的停止维护...
简介
日志服务支持将日志投递到SIEM，以确保阿里云上的所有法规、审计与其他相关日志能够导入到您的安全运维中心（SOC）中。名词解释 SIEM：安全信息与事件管理系统（Security Information and Event Management），如Splunk，IBM QRadar等。...
Python SDK使用手册
查看语言版本 执行命令 python-V 查看Python语言版本。管控API SDK 安装SDK 执行以下命令安装Python SDK。pip install alibabacloud_eventbridge20200401=2.0.1 执行以下命令安装打印端口。pip install alibabacloud_tea_console SDK示例 ...
术语表
数据加工 术语 说明 DSL（Domain Specific Language）DSL是日志服务数据加工使用的一种Python兼容的脚本语言。更多信息，请参见 语言简介。加工规则 数据加工脚本，日志服务DSL编排的逻辑代码的集合。更多信息，请参见 语法简介。消费与...
基本概念
SLS DSL SLS DSL（Domain Specific Language）是日志服务数据加工使用的一种Python兼容的脚本语言。SLS DSL基于Python提供内置两百多个函数，简化常见的数据加工模式。也支持用户自定义的扩展Python脚本。更多信息，请参见 语言简介。加工...
Python语言迁移
Python是一种解释型脚本语言，Python代码与平台无关，各大操作系统都已经支持了ARM平台的Python。在ARM平台可以直接使用Python，应用代码无需编译，可直接运行。以Alibaba Cloud Linux 3为例，可以使用yum命令进行安装。sudo yum install ...
打印函数日志
如您需要调试和验证您的代码是否正常工作，可以使用编程语言的标准日志记录功能输出日志。函数计算 运行时会将函数输出到STDOUT和STDERR的日志上传至您配置的logstore中，日志主题为serviceName，您可以通过_topic_:serviceName 搜索当前...
打印函数日志
如您需要调试和验证您的代码是否正常工作，可以使用编程语言的标准日志记录功能输出日志。函数计算 运行时会将函数输出到STDOUT和STDERR的日志上传至您配置的logstore中，日志主题为functionName，您可以通过_topic_:"FCLogs:functionName...
Python 2 UDAF
MaxCompute使用的Python 2版本为2.7。本文为您介绍如何通过Python 2语言编写UDAF。UDAF代码结构 您可以通过 MaxCompute Studio 工具使用Python 2语言编写UDAF代码，代码中需要包含如下信息：编码声明：可选。固定声明格式为#coding:utf-8 ...
数据加密
日志服务支持通过密钥管理服务KMS（Key Management Service）对数据进行加密存储，提供数据静态保护能力。日志服务同时支持基于SSL/TLS的HTTPS加密传输，有效防止数据在云端的潜在安全风险。服务器端加密 日志服务支持如下两种加密类型机制...
对接JDBC
本文以实际案例演示如何使用JDBC连接日志服务、读取日志数据，及使用MySQL协议和SQL语法来计算日志。前提条件 已创建RAM用户并完成授权。具体操作，请参见 创建RAM用户并完成授权。已配置环境变量 ALIBABA_CLOUD_ACCESS_KEY_ID 和 ALIBABA_...
采集Syslog
本文介绍如何通过日志服务控制台创建Logtail配置来采集Syslog。前提条件 已在服务器上安装Linux Logtail 0.16.13及以上版本或Windows Logtail 1.0.0.8及以上版本。具体操作，请参见 安装Logtail（Linux系统）或 安装Logtail（Windows系统）...
数据采集概述
Log4J Appender 1.x 2.x 无 LogBack Appender LogBack 无 C Log Service C SDK 无 Python Log Service Python SDK 无 Python Logging Python Logging Handler 无 PHP Log Service PHP SDK 无.Net Log Service csharp SDK 无 C++ Log ...
加工原理
日志服务提供的数据加工功能，通过编排内置的两百多个函数，使用协同消费组对日志数据进行消费，实现对日志数据的加工处理。本文档主要介绍进行数据加工时日志数据的调度原理，以及加工规则引擎的工作原理。调度原理 日志服务的数据加工...
Python SDK概述
日志服务Python SDK封装了日志服务的大部分API接口。您可以通过日志服务Python SDK方便地调用日志服务的大部分API接口。版本说明 更多信息，请参见 Aliyun Log Python Release。示例代码 日志服务Python SDK提供丰富的示例代码，方便您参考...
SDK采集
使用前须知 不同语言的日志服务SDK具体实现细节会有所不同，但是它们都是日志服务API在不同语言上的封装，实现的功能也基本一致。具体包括如下几个方面：实现对日志服务API接口的统一封装，让您不需要关心具体的API请求构建和响应解析。...
Flink Python参考
使用Python依赖 通过以下场景为您介绍如何使用Python依赖：使用自定义的Python虚拟环境 使用第三方Python包 使用JAR包 使用数据文件 使用自定义的Python虚拟环境 方式一：在DataFlow集群中的某个节点创建Python虚拟环境 在DataFlow集群的...
通过消费组消费日志
本文通过Python代码介绍如何使用消费组消费日志。前提条件 已创建RAM用户并完成授权。具体操作，请参见 创建RAM用户并完成授权。已配置环境变量 ALIBABA_CLOUD_ACCESS_KEY_ID 和 ALIBABA_CLOUD_ACCESS_KEY_SECRET。具体操作，请参见 配置...
SPL概述
本文介绍 日志服务 SPL语言的基本信息，包括工作原理、语法、指令表达式等。工作原理 日志服务SPL支持在实时消费、扫描查询和Logtail采集三个日志服务场景中使用，工作原理如下图：关于SPL在各个场景中的功能定义，请参见 SPL在不同场景的...
使用Python依赖
背景信息 本文通过以下场景为您介绍如何使用Python依赖：使用自定义的Python虚拟环境 使用第三方Python包 使用JAR包 使用数据文件 使用自定义的Python虚拟环境 说明 VVR 4.x仅支持3.7版本的Python虚拟环境，VVR 6.x及以上的版本无此限制，...
- 产品推荐
- 这些文档可能帮助您