系统类故障排查

按下 p,即可查看到是哪个端口消耗的流量较大。进程 ps 命令用来列出系统中“当前正在运行”的相关进程,使用该命令可以确定有哪些进程正在运行和对应运行的状态、进程是否结束、进程有没有僵死、哪些进程占用了过多的资源等等。输入以下...

trace

可以完整的深入观察一个应用程序运行时的行为,它揭示了在任务运行中发生了什么,哪个中断触发了任务切换,中断和任务调用了哪个底层系统的API函数。SystemView 不但可以实时分析和展示数据,而且可以帮助用户进行系统调试和问题诊断,尤其...

持续架构优化

云原生架构与传统架构的对比 应用容器化 软件交付的困难在于公司环境到客户环境之间的差异,以及软件交付和运维人员的技能差异,填补这些差异的是一大堆的用户手册、安装手册、运维手册和培训文档。容器就像集装箱一样,以一种标准的方式对...

消息队列Kafka

背景信息 Apache Kafka是一款开源的分布式消息队列系统,广泛用于高性能数据处理、流式分析、数据集成等大数据领域。Kafka连接器基于开源Apache Kafka客户端,为阿里云实时计算Flink提供高性能的数据吞吐、多种数据格式的读写和精确一次...

如何监控开源Apache Kafka?

本文为您介绍监控开源Apache Kafka的解决方案。如果您需要监控开源Apache Kafka,请参见以下解决方案:Monitoring Kafka Monitoring Kafka performance metrics

StartK8sAppPrecheck-开始K8s应用变更预检

c37aec2a-bcca-4ec1-*-*Namespace string 是 K8s 集群的命名空间,它将决定您的应用部署在哪个 K8s 命名空间。默认为 default。default AppId string 否 应用 ID。af58edcf-f7eb-*-*-db4e425f*AppName string 否 应用名称。必须以字母开头...

数据导入常见问题

如何配置以访问高可用(HA)模式下的Apache HDFS集群?如何配置Hadoop ViewFS Federation?访问Kerberos认证的集群时,报错“Can't get Kerberos realm”,该如何处理?INSERT INTO 使用INSERT INTO语句导入数据时,SQL每插入一条数据大约...

Apache模式解析

Logtail Apache模式解析插件支持根据Apache日志配置文件中的定义将日志内容结构化,解析为多个键值对形式。Apache日志简介 Apache服务器会根据Apache日志配置文件中指定的日志打印格式、日志文件路径和名称输出Apache日志。例如 CustomLog...

Apache Nifi

本文以一个示例为您介绍Apache Nifi如何连接Hologres。背景信息 Apache NiFi 是一个易用、可靠的数据处理与分发系统,Apache NiFi的设计目标是自动化管理系统间的数据流。Apache Nifi是一个基于WEB-UI用户界面,具有很强交互性和易用性,为...

Apache服务的80端口被占用

问题描述 Apache服务无法正常启动。问题原因 Apache服务的80端口被占用。解决方案 阿里云提醒您:如果您对实例或数据有修改、变更等风险操作,务必注意实例的容灾、容错能力,确保数据安全。如果您对实例(包括但不限于ECS、RDS)等进行...

基于CentOS系统镜像快速部署Apache服务

本文以CentOS 7.6系统镜像为例,介绍如何快速配置Apache服务。背景信息 更多搭建网站和部署开发环境的最佳实践,请参见 最佳实践概览。步骤一:创建轻量应用服务器 登录 轻量应用服务器管理控制台。在左侧导航栏,单击 服务器。在页面左上...

数据服务集群

DataServing是阿里云E-MapReduce提供的基于Apache HBase的数据服务集群类型。本文为您介绍数据服务集群支持的特性,适用场景以及技术架构。特性介绍 Apache HBase是具有高可靠性、高性能、列存储、可伸缩、实时读写的开源NoSQL分布式系统。...

产品优势

以下介绍Confluent的业界优势:Confluent是Apache Kafka的原创者开发的产品。Confluent团队撰写提交了80%的Kafka代码,并且拥有超过100万小时的Kafka技术经验。Confluent平台扩展了Apache Kafka,使其成为一个安全的、企业级的平台。...

在文件存储 HDFS 版上使用Apache HBase

本文主要介绍在 文件存储 HDFS 版 上使用Apache HBase的方法。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK,且JDK版本不低于1.8。已部署...

开源Flink写入OSS-HDFS服务

关于Apache Flink的安装包及版本说明,请参见 Apache Flink。配置JindoSDK 登录已创建的ECS实例。具体操作,请参见 连接ECS实例。下载并解压最新版本JindoSDK JAR包。下载地址,请参见 GitHub。将JindoSDK解压缩后的 plugins/flink/目录下...

概述

Navicat Apache Nifi Apache NiFi是一个易用、可靠的数据处理与分发系统,Apache NiFi的设计目标是自动化管理系统间的数据流。Apache Nifi是一个基于WEB-UI用户界面,具有很强的交互性和易用性,为不同系统间或系统内提供数据流管理与处理...

漏洞公告|Apache Hadoop FileUtil.unTar命令注入漏洞

2022年8月4日,Apache Hadoop官方披露修复了一个Shell命令注入漏洞CVE-2022-25168。由于Apache Hadoop的FileUtil.unTar API在传递Shell之前未对输入的文件名进行转义,攻击者可以利用该漏洞注入任意命令,从而对集群造成破坏。漏洞影响 ...

使用Nginx或.htaccess文件以及ASP屏蔽IP地址访问

Order指令可以决定Allow规则和Deny规则的生效顺序,即哪个规则排在最后,哪个规则就有最终决定权。其中,Allow表示允许,Deny表示拒绝。关于使用.htaccess文件屏蔽IP地址的生效规则信息,请参见 步骤6 中的屏蔽规则示例。Order Deny,Allow ...

Hive概述

Hive是一个基于Hadoop的数据仓库框架,在大数据业务场景中,主要用来进行数据提取、转化和加载(ETL)以及元数据管理。背景信息 E-MapReduce(简称EMR)版本中,Hadoop、Hive版本和EMR...关于Apache Hive的更多介绍,请参见 Apache Hive官网。

快速入门

MySQL快速入门 SQL Server快速入门 PostgreSQL快速入门 MariaDB快速入门 数据库引擎 以下是对四种数据库引擎的介绍:云数据库RDS MySQL MySQL是全球受欢迎的开源数据库之一,作为开源软件组合LAMP(Linux+Apache+MySQL+Perl/PHP/Python)中...

概览

借助该SDK,Apache Hadoop的计算分析应用(如MapReduce、Hive、Spark等)可以使用 文件存储 HDFS 版 作为defaultFS,从而获得 文件存储 HDFS 版 带来的超越原始HDFS的功能和性能优势。更多信息,请参见 安装文件系统SDK、SDK示例。

【产品/功能变更】Apache Log4j2 JNDI漏洞(CVE-2021-...

近日,阿里云计算有限公司发现Apache Log4j2组件存在远程代码执行漏洞,并将漏洞情况告知Apache软件基金会。云数据库RDS技术团队确认该漏洞对云数据库RDS无影响。更多信息,请参见【漏洞通告】Apache Log4j2 远程代码执行漏洞(CVE-2021-...

【产品/功能变更】Apache Log4j2 JNDI漏洞(CVE-2021-...

近日,阿里云计算有限公司发现Apache Log4j2组件存在远程代码执行漏洞,并将漏洞情况告知Apache软件基金会。云数据库RDS技术团队确认该漏洞对云数据库RDS无影响。更多信息,请参见【漏洞通告】Apache Log4j2 远程代码执行漏洞(CVE-2021-...

【产品/功能变更】Apache Log4j2 JNDI漏洞(CVE-2021-...

近日,阿里云计算有限公司发现Apache Log4j2组件存在远程代码执行漏洞,并将漏洞情况告知Apache软件基金会。云数据库RDS技术团队确认该漏洞对云数据库RDS无影响。更多信息,请参见【漏洞通告】Apache Log4j2 远程代码执行漏洞(CVE-2021-...

【产品/功能变更】Apache Log4j2 JNDI漏洞(CVE-2021-...

近日,阿里云计算有限公司发现Apache Log4j2组件存在远程代码执行漏洞,并将漏洞情况告知Apache软件基金会。云数据库RDS技术团队确认该漏洞对云数据库RDS无影响。更多信息,请参见【漏洞通告】Apache Log4j2 远程代码执行漏洞(CVE-2021-...

常见问题

解决方法:您需要在执行查询Hudi表的命令时,添加上 set hive.input.format=org.apache.hudi.hadoop.hive.HoodieCombineHiveInputFormat。Spark查询Hudi表分区裁剪不生效?问题原因:可能是在分区字段包含/(正斜线)的情况下,分区字段...

什么是Databricks数据洞察

Databricks数据洞察(简称DDI)是基于Apache Spark的全托管大数据分析平台。产品内核引擎使用Databricks Runtime,并针对阿里云平台进行了优化。DDI为您提供了高效稳定的阿里云Spark服务,您无需关心集群服务,只需专注在Spark作业的开发上...

Iceberg概述

Read√Write√Compaction x x 计算引擎 Apache Spark 读取√写入√Apache Hive 读取√写入√Apache Flink 读取√写入√PrestoDB或Trino 读取√写入√编程语言 Java 无√Python 无√高级功能 原生接入阿里云OSS 无 x√原生接入阿里云DLF 无 ...

Paimon外部表

关于Apache Paimon的详细信息,请参见 Apache Paimon。前提条件 当前执行操作的账号已具备创建MaxCompute表(CreateTable)的权限。更多表权限信息,请参见 MaxCompute权限。已创建MaxCompute项目。具体操作,请参见 创建MaxCompute项目。...

计算设置概述

Apache Flink Apache Flink是一个分布式处理引擎,用于对无界和有界数据流进行有状态计算。Fusioninsight Flink Fusioninsight Flink 是一种基于Apache Flink的流式处理引擎,可以实现高速数据流的实时计算和分析。Blink独享版 Blink是阿里...

产品优势

兼容开源:云消息队列 Kafka 版 100%兼容开源Apache Kafka,您可以直接使用开源Apache Kafka客户端与 云消息队列 Kafka 版 通讯。云消息队列 Kafka 版 目前支持0.10.x~2.6.x的开源版本。无缝迁移:云消息队列 Kafka 版 基于现有的开源...

Quick BI中如何使用原始的HttpClient调用产品提供的...

概述 本文介绍主要如何使用Apache原始的HttpClient调用Quick BI产品提供的API接口。详细信息 Quick BI提供了SDK包调用产品开放的API接口。具体代码实现时需要同时安装Quick BI SDK和阿里云核心库。其中独立部署版本生成客户端需要引用Quick...

导入概述

导入方式 支持的格式 Broker Load Parquet、ORC、CSV、GZIP Stream Load CSV、GZIP、JSON Routine Load CSV、JSON 导入说明 Apache Doris的数据导入有以下共性特征。导入的原子性保证 Doris的每一个导入作业,不论是使用Broker Load进行...

通用软件漏洞收集及奖励计划第三期

I JeecgBoot 北京敲敲云科技有限公司 I Apache-Struts2 Apache I Apache-Tapestry Apache I Django 开源软件 I Flask 开源软件 I Laravel 开源软件 I RichFaces RedHat I SpringBoot VMware I ThinkPHP 上海顶想信息科技有限公司 I Apache-...

使用Flume写入JindoFS

Apache Flume是一个分布式、可靠和高可用的系统,用于从大量不同的数据源有效地收集、聚合和移动大量日志数据,进行集中式的数据存储。Flume的核心是Agent,Agent中包含Source、Channel和Sink。本文为您介绍如何使用HDFS Sink写入数据至...

多语言API访问

说明 一些语言提供了管理依赖的方法,可以遵循这些语言的使用习惯来安装thrift,如Python语言可以通过 pip install thrift 来安装,Go语言可以直接在代码里 import {"github.com/apache/thrift/lib/go/thrift"}。下载 HBase Thrift2定义...

CPU Burst性能优化策略

Alibaba Cloud Linux 2 全部关闭 全部开启 apache RT-p99 107.37 ms 67.18 ms(-37.4%)CPU Throttled Ratio 33.3%0%Pod CPU平均利用率 31.8%32.6%CentOS 7 全部关闭 全部开启 apache RT-p99 111.69 ms 71.30 ms(-36.2%)CPU Throttled ...

存储引擎对比

项目 云存储 Local存储 底层算法 阿里云云盘算法 原生Apache Kafka的ISR复制算法 实例版本要求 无 副本机制 分布式3副本机制 标准版:如果您购买300 GB磁盘,则实际存储业务的磁盘大小为100 GB,其余200 GB为备份容量。专业版:如果您购买...

EMR旧版数据开发迁移公告

EMR Workflow是一个全托管的工作流和任务调度服务,100%兼容开源Apache DolphinScheduler。它提供了易于使用的调度服务,您可以通过可视化的操作界面轻松地管理工作流和任务,高效构建数据仓库,并为生产任务的稳定运行提供保障。EMR ...

【Dubbo安全漏洞通告】-CVE-2021-25641-Hessian2协议...

Apache Dubbo包含了一个可远程利用的漏洞。Hessian2协议反序列化漏洞,攻击者以篡改协议的方式绕过反序列化黑/白名单。漏洞描述 在Apache Dubbo的默认通信方式中,Dubbo会在传输报文中使用 serialization id 来传递数据体使用的序列化协议...
共有50条 < 1 2 3 4 ... 50 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云消息队列 Kafka 版 实时计算 Flink版 企业级分布式应用服务 云数据库 RDS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用