日志投递MaxCompute后,如何检查数据完整性

投递成功,但MaxCompute表数据有缺失,应如何解决 MaxCompute投递任务状态成功,但表中数据缺失,一般有以下原因:表分区列映射的日志服务字段的名称不存在。此时投递过去的列值为null,而MaxCompute表不允许分区列值为null。表分区列映射...

RetryShipperTask

调用RetryShipperTask接口重新执行失败的日志投递任务。接口说明 请求语法中Host由Project名称和日志服务Endpoint构成,您需要在Host中指定Project。已创建并获取AccessKey。更多信息,请参见 访问密钥。阿里云账号AccessKey拥有所有API的...

时区列表

本文介绍OSS投递(新版)所涉及的时区格式以及常见的时区列表。该时区主要用于格式化时间。时区格式设置 OSS投递(新版)中的时区格式为 {±偏移小时数}{分钟数}。偏移小时数的取值范围:[-12,+14]。分钟数的取值范围:00、30、45。整体...

通过自定义角色读取Logstore数据

MaxCompute投递任务(新版)运行时,需要读取Logstore中的数据,您可以使用自定义角色完成该操作。本文介绍如何对自定义角色进行授权。前提条件 已创建RAM角色(例如MaxcomputeShipRole)。具体操作,请参见 创建RAM角色。操作步骤 授予RAM...

实时日志服务关联角色

在实时日志投递任务列表中,删除所有投递至阿里云日志服务SLS的实时日志投递任务。删除服务关联角色。登录 RAM控制台。在左侧导航栏,单击 身份管理>角色。在 角色名称 列下,找到需要删除的服务关联角色...

通过自定义RAM角色访问数据(跨账号场景)

OSS-HDFS投递任务运行时,将读取Logstore中数据并投递到OSS Bucket中。您可以授权OSS-HDFS投递任务扮演自定义RAM角色完成上述操作。如果Logstore和OSS Bucket不属于同一个阿里云账号,您可参考本文档完成授权操作。前提条件 已在阿里云账号...

通过自定义角色访问数据(跨账号场景)

OSS投递任务(新版)运行时,将读取Logstore中数据并投递到OSS Bucket中。您可以授予OSS投递任务使用自定义角色来完成以上操作。如果Logstore和OSS Bucket不属于同一个阿里云账号,您可参考本文档完成授权操作。前提条件 已在阿里云账号A下...

通过自定义角色访问数据(同账号场景)

OSS投递任务(新版)运行时,将拉取Logstore中的数据并投递到OSS Bucket中,您可以使用自定义角色来完成以上操作。本文介绍如何对自定义角色进行授权。前提条件 已创建RAM角色。具体操作,请参见 创建可信实体为阿里云服务的RAM角色。重要 ...

创建实时日志投递任务

不同套餐的支持情况 每种日志类型下可创建的推送任务数量由购买的套餐决定,不同的套餐支持的实时日志投递任务如下。基础版 标准版 高级版 企业版 实时日志投递任务数 不支持 1个 3个 5个 使用场景 实时日志提供了高度的灵活性,可以根据...

CSV格式

参数配置 在 创建OSS投递任务(新版)时,选择 存储格式 为 csv,对应的参数配置如下所示。参数说明如下所示。更多信息,请参见 CSV标准 和 postgresql CSV说明。参数 说明 CSV字段 在 原始日志 页签中查看日志字段,将需要投递到OSS的字段...

JSON格式

参数配置 在 创建OSS投递任务(新版)时,如果选择 存储格式 为 json,对应的参数配置如下所示。参数 说明 是否投递tag 是否投递日志tag字段,例如_tag_:abc。OSS文件地址 投递到OSS后,OSS文件地址样例如下所示。说明 在创建OSS投递任务时...

DeleteShipper-删除日志投递任务

删除Logstore的日志投递任务。接口说明 请求语法中 Host 由 Project 名称和日志服务 Endpoint 构成,您需要在 Host 中指定 Project。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer...

DeleteOSSExport-删除OSS投递任务

删除指定的oss投递任务。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 DELETE/ossexports/{...

StopOSSExport-停止OSS投递任务

停止指定的OSS投递任务。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 PUT/ossexports/{ossExportName...

StartOSSExport-启动OSS投递任务

启动指定的OSS投递任务。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 PUT/ossexports/{ossExportName...

OSS-HDFS投递任务操作授权

当您操作OSS-HDFS投递任务时,需对RAM用户进行授权。前提条件 已创建RAM用户。具体操作,请参见 创建RAM用户。操作步骤 使用阿里云账号登录 RAM控制台。创建权限策略。在左侧导航栏中,选择 权限管理>权限策略。单击 创建权限策略。在 创建...

通过日志服务迁移日志数据至MaxCompute

MaxCompute投递新版说明请参见 创建MaxCompute投递任务(新版)。配置完成后,单击 确定,启动投递。启动投递功能后,日志服务后台会定期启动离线投递任务。在 提示 对话框,单击 确定,返回日志服务控制台查看投递运行状态。执行如下语句...

将Prometheus数据投递至云上或自建Prometheus实例

如果您已有自建的Prometheus实例,需要将当前云上的Prometheus数据导入至自建实例,或者需要对云上云下的多个Prometheus实例集中管理,您可以使用数据投递功能。通过Remote Write方式将Prometheus数据投递至云上或自建Prometheus实例,可以...

DeleteOSSHDFSExport-删除OSS-HDFS投递任务

删除指定的OSS-HDFS投递任务。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 DELETE/osshdfsexports/{...

StopOSSHDFSExport-停止OSS-HDFS投递任务

停止指定的OSS-HDFS投递任务。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 PUT/osshdfsexports/{...

StartOSSHDFSExport-启动OSS-HDFS投递任务

启动指定的OSS-HDFS投递任务。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 PUT/osshdfsexports/{...

将Prometheus数据投递至云上或自建Prometheus实例

如果您已有自建的Prometheus实例,需要将当前云上的Prometheus数据导入至自建实例,或者需要对云上云下的多个Prometheus实例集中管理,您可以使用数据投递功能。通过Remote Write方式将Prometheus数据投递至云上或自建Prometheus实例,可以...

ORC格式

参数配置 在 创建OSS投递任务(新版)时,选择 存储格式 为 orc,对应的参数配置如下所示。相关参数说明如下表所示。参数 说明 Key名称 您可以在 原始日志 页签中查看日志字段,将需要投递到OSS的字段名有序填入。OSS投递任务将按照此顺序...

MaxCompute投递任务(新版)常见报错与问题

本文介绍MaxCompute投递任务(新版)的常见报错与问题。出现用户不存在错误时,如何解决?如果MaxCompute投递(新版)的执行记录中显示 ODPS-0420095:Access Denied-Authorization Failed[4002],You don't exist in project*.Context ID:...

使用前须知

资产详情 自定义的Project和Logstore 重要 在删除投递任务前,请勿删除相关的日志服务Project和Logstore,否则将导致无法正常投递日志到日志服务。创建自定义Logstore时,将根据计费模式不同产生不同的计费项,具体信息,可参见 计费项。专...

GetOSSExport-获取OSS投递任务

获取指定的OSS投递任务。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 GET/ossexports/{ossExportName...

监控与日志

当您需要分析最近90天的跟踪历史,或者因审计要求需要下载最近90天的跟踪历史时,您可以创建跟踪历史投递任务,将跟踪历史投递到日志服务SLS。具体操作,请参见 创建跟踪历史投递任务。日志服务 全球加速集成了阿里云日志服务SLS,您可以...

功能特性

Prometheus告警规则模板 数据投递 创建数据投递任务 该功能可以将数据从一个Prometheus实例远程写入(Remote Write)到另一个Prometheus实例中,还可以轻松将数据流转至各云产品中,例如Kafka和MaxCompute等。创建数据投递任务

功能特性

Prometheus告警规则模板 数据投递 创建数据投递任务 该功能可以将数据从一个Prometheus实例远程写入(Remote Write)到另一个Prometheus实例中,还可以轻松将数据流转至各云产品中,例如Kafka和MaxCompute等。创建数据投递任务

GetOSSHDFSExport-获取OSS-HDFS投递任务

获取指定的OSS-HDFS投递任务。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 GET/osshdfsexports/{...

CreateSubmission-创建投递

创建投递,通过创建投递可以批量创建任务。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句...

创建多账号跟踪

您可以创建数据回补投递任务,将最近90天的事件一次性补投递到您跟踪指定的地址,最大限度、最大范围满足您的需求。具体操作,请参见 创建数据回补投递任务。选择 将事件投递到日志服务SLS 选择 投递到本账号,设置如下参数。参数 描述 ...

监控与日志

如果需要跟踪历史事件,您可以创建跟踪历史投递任务,将跟踪历史投递到日志服务SLS。具体操作,请参见 创建跟踪历史投递任务。流日志功能 专有网络VPC提供流日志功能,可以记录VPC网络中弹性网卡ENI(Elastic Network Interface)传入和...

创建单账号跟踪

您可以创建数据回补投递任务,将最近90天的事件一次性补投递到您跟踪指定的地址,最大限度、最大范围满足您的需求。具体操作,请参见 创建数据回补投递任务。选择 将事件投递到日志服务SLS 选择 投递到本账号,设置如下参数。参数 描述 ...

将Prometheus数据投递至大数据计算服务MaxCompute

当您需要将某个Prometheus实例的数据导出,进行自定义业务处理时,可以使用Prometheus数据投递功能,将Prometheus实例数据投递至大数据计算服务MaxCompute处理。MaxCompute能帮助您结合其他的数据源执行大数据计算服务,加工后用于报表分析...

将Prometheus数据投递至大数据计算服务MaxCompute

当您需要将某个Prometheus实例的数据导出,进行自定义业务处理时,可以使用Prometheus数据投递功能,将Prometheus实例数据投递至大数据计算服务MaxCompute处理。MaxCompute能帮助您结合其他的数据源执行大数据计算服务,加工后用于报表分析...

操作审计支持查询历史事件的时间范围说明

首次使用操作审计时,您可以创建跟踪将后续新产生的事件投递到日志服务SLS或对象存储OSS,然后创建数据回补投递任务将最近90天的事件投递到SLS,以便长期存储完整的事件。如果不创建跟踪,您将无法追溯90天以前的操作事件。详细信息 在操作...

Parquet格式

参数配置 在 创建OSS投递任务(新版)时,选择 存储格式 为 parquet,对应的参数配置如下所示。相关参数说明如下表所示。参数 说明 Key名称 您可以在 原始日志 页签中查看日志字段,将需要投递到OSS的字段名有序填入。OSS投递任务将按照此...

功能简介

阿里云 可观测监控 Prometheus 版 通过数据投递功能,实现了监控数据管理的灵活性和扩展性。您不仅可以将数据从一个Prometheus实例远程写入(Remote Write)到另一个Prometheus实例,还可以轻松将数据流转至各云...请参见 创建数据投递任务

将Prometheus数据投递至Kafka

当您需要将某个Prometheus实例的数据导出,进行自定义业务处理时,您可以选择Prometheus数据投递服务。本文介绍如何使用Prometheus数据投递功能将实例数据投递至Kafka并进行消费处理。前提条件 已接入Prometheus实例,具体操作,请参见:...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云工作流 性能测试 云数据库 RDS 邮件推送 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用