OpenLDAP
Hive：使用LDAP认证 Spark：管理LDAP认证 Impala：管理LDAP认证 Trino：管理LDAP认证 Presto：管理LDAP认证 Kafka：使用LDAP用户鉴权 如果某个服务没有提供一键开启LDAP认证的功能，则需要参考开源软件的社区文档来配置开启LDAP认证。...
开源软件迁移
当前大部分应用系统都基于开源软件构建，并且大部分的开源软件在倚天ARM平台上已经提供较好的应用生态，您可以直接使用操作系统提供的开源生态软件来安装部署。本文介绍Nginx、MySQL、Redis、TensorFlow、PyTorch等开源软件如何在倚天...
应用市场
概述 应用市场的软件应用包括应用目录，应用目录中的软件是容器服务ACK基于开源软件做了适配和二次开发，其中包含了运行一个应用所需要的镜像、依赖和资源定义等。应用目录中有简介、安装步骤、参数配置项、注意事项等信息。您可以通过Helm...
产品架构
从上图可以看出EMR由四部分组成：社区开源产品 集成Apache社区开源大数据组件，例如Hadoop、Hive和HBase，随着EMR版本更新，开源软件也会相应的升级，详情请参见 版本概述 下各版本的版本说明。注意 已经创建好的EMR集群不支持组件升级。...
通过OSS SDK接入开源生态
开源生态 说明 使用Hadoop或者Hive访问OSS 此系列文档由开源软件Apache社区提供。使用Flink访问OSS 将HBase快照保存在OSS 将Kafka数据导入OSS 此系列文档由面向开源项目的托管平台GitHub提供。使用Logstash将日志导入OSS 使用Fluentd访问...
管理LDAP认证
EMR-5.11.0及之前版本，EMR-3.45.0及之前版本 重要 如果您的EMR版本较低，没有相应的LDAP认证配置按钮，则需要参考开源软件的社区文档进行手动配置，以启用LDAP认证功能。在 组件列表 区域，选择 SparkThriftServer 操作列的>enableLDAP。...
E-MapReduce支持倚天云服务器
丰富的生态：倚天云服务器支持主流开源软件以及多款阿里云主流PaaS产品。最新网络架构：基于2*50 GB网络架构提供大带宽以及超强转发能力，对比上一代CIPU架构，网络带宽提升1倍。安全增强：支持vTPM特性，依托TPM/TCM芯片，实现从服务器到...
管理LDAP认证
EMR-5.11.0及之前版本，EMR-3.45.0及之前版本 重要 如果您的EMR版本较低，没有相应的LDAP认证配置按钮，则需要参考开源软件的社区文档进行手动配置，以启用LDAP认证功能。在 组件列表 区域，选择 TrinoMaster 操作列的>enableLDAP。在弹出...
Spark对接Kafka
背景信息 E-MapReduce上的Hadoop集群和Kafka集群都是基于纯开源软件，相关编程使用方法可参见官方相应文档。Spark官方文档：streaming-kafka-integration 和 structured-streaming-kafka-integration。E-MapReduce-demo：github地址。访问...
迁移场景
软件迁移主要包含以下两种场景：自研软件：指开发者开发的或者基于开源软件增强开发的软件。自研软件使用的编程语言主要包含以下两类：编译型语言：以C++/Go为代表的编译型语言，这些语言会将源代码编译成架构相关的二进制文件，因此迁移后...
自助建站方式汇总
搭建Hadoop环境 Hadoop是一款由Apache基金会用Java语言开发的分布式开源软件框架，用户可以在不了解分布式底层细节的情况下，开发分布式程序，充分利用集群的能力进行高速运算和存储。环境类型 部署方式 说明 搭建Hadoop环境 手动搭建...
迁移概述
其中，软件迁移支持迁移自研软件和开源软件：自研软件：指开发者开发的或者基于开源软件增强开发的软件。具体操作，请参见 源码迁移。开源软件：指开发者从开源社区下载未做源码修改的软件或者所使用操作系统生态中默认携带的软件。更多...
异常：java插件安装不成功解决方式
适用范围 当操作Java类软件时，rpa需要安装Java插件，当安装不成功时，可使用此文档安装插件。适用版本 4.3.X及以上版本新引擎 操作步骤 打开“任务管理器”，点击详细信息。打开方式：1.快捷键：Ctrl+Shift+Esc。2.鼠标移入任务栏，右键...
Java SDK
Java SDK 软件包，然后在自己的 Java 项目中直接引用本地软件包。从 这里 克隆 Java SDK 包，需要配合 下载 最新版阿里云SDK（版本会定期更新，如需使用最新版本请使用Maven）。解压完整下载的包到指定的目录即可。Java SDK 是一个软件开发...
Java版本SDK
Java版本开源的SDK源码请参见 开源Java库。LedaConfig 类名全称：com.aliyun.linkedge.sdk.LedaConfig 类声明：public class LedaConfig Java方法说明：限定符和类型 方法和说明 static String getDriverConfig()获取驱动配置。static ...
产品优势
同步刷盘参数，Compaction等等 建表语句 建表语句托管，用户透明 需要运维人员静态建表语句 监控报警体系 完整的自监控链路 依赖外部搭建 功能 数据模型 同时支持多值模型和单值模型 仅支持单值模型 SDK Java SDK 开源SDK不支持查询 数据...
基础术语
Log4j Log4j Apache Log4j，即 log for Java（Java 的日志），是 Apache 的一个开源项目，可以控制日志信息输送的目的地，也可以控制每一条日志的输出格式，通过定义每一条日志信息的级别，能够更加细致地控制日志的生成过程。Log4j 2 Log4...
开源Sentinel与商业化AHAS流量防护对比
AHAS流量防护是开源框架Sentinel的商业化产品，是阿里巴巴双十一技术体系中的核心组件。它在Sentinel的基础上，支持更多的业务功能。本文对比AHAS流量防护与开源Sentinel，并介绍AHAS流量防护的优势。应用侧 核心能力 功能描述 AHAS流量...
Java应用CPU使用率高
edas busy-threads-current 使用开源工具诊断 show-busy-java-threads 在非ECS集群的环境中，可以使用show-busy-java-threads开源脚本来找到占用指定进程中排名前几位CPU高的线程。执行以下命令，下载并使用show-busy-java-threads脚本。...
开源客户端首次连接配置
本文以Java SDK为例介绍开源MQTT客户端首次连接服务端时如何初始化客户端和配置自动重连功能。开源客户端Java SDK下载地址 paho.mqtt.java SDK版本 SDK依赖如下，建议使用最新版本。groupId>org.eclipse.paho</groupId>...
数据上云工具
Fluentd（DataHub通道系列）Fluentd是一个开源的软件，用来收集各种源头日志（包括Application Log、Sys Log及Access Log），允许您选择插件对日志数据进行过滤，并存储到不同的数据处理端（包括MySQL、Oracle、MongoDB、Hadoop、Treasure ...
创建EMR Studio集群
高级设置 软件自定义配置：可指定JSON文件对集群中的基础软件（例如Hadoop、Spark和Hive等）进行配置，详细使用方法请参见 软件配置。默认不开启。硬件配置。区域 配置项 描述 付费类型 付费类型 默认包年包月。当前支持的付费类型如下：...
产品优势
阿里云 可观测监控 Prometheus 版 全面对接开源Prometheus生态，支持类型丰富的组件监控，覆盖绝大部分开源基础设施软件指标采集能力。提供多种开箱即用的预置监控大盘，并集成丰富的Kubernetes基础监控以及常用服务预设看板，且提供全面...
产品优势
阿里云 可观测监控 Prometheus 版 全面对接开源Prometheus生态，支持类型丰富的组件监控，覆盖绝大部分开源基础设施软件指标采集能力。提供多种开箱即用的预置监控大盘，并集成丰富的Kubernetes基础监控以及常用服务预设看板，且提供全面...
Java语言迁移
lz4软件从1.4.0版本起已更名为lz4-java。starting Analysis=./lz4-1.3.0/win32/amd64/liblz4-java.so:PE32+executable(DLL)(console)x86-64,for MS Windows./lz4-1.3.0/linux/amd64/liblz4-java.so:ELF 64-bit LSB shared object,x86-64,...
Trino概述
Trino（即原PrestoSQL）是一个开源的分布式SQL查询引擎，适用于交互式分析查询。EMR-3.44.0和EMR-5.10.0版本开始改用社区正式名称Trino，之前各版本控制台显示为Presto，内核其实是Trino，使用时请注意区分。基本特性 Trino使用Java语言...
Presto概述
基本特性 Presto使用Java语言进行开发，具备易用、高性能和强扩展能力等特点，具体如下：完全支持ANSI SQL。支持丰富的数据源，例如，Hive、Hudi、Iceberg、Delta Lake、MySQL和PostgreSQL。支持高级数据结构，具体如下：数组和Map数据 ...
常见问题
DataFlow集群中的Hadoop YARN的软件安装目录是/opt/apps/YARN/yarn-current，配置文件的目录是/etc/taihao-apps/hadoop-conf/，您需要将 yarn-current 目录及 hadoop-conf 目录下载到提交Flink作业的客户端上。然后，在提交Flink作业的客户...
使用JindoFS作为HBase的底层存储
java.lang.IllegalArgumentException:Wrong FS:jfs:/emr-jfs/tmp/.,expected:hdfs:/emr-header-1.cluster-*:9000 at org.apache.hadoop.fs.FileSYstem.checkPath(FileSystem.java:666)at org.apache.hadoop.hbase.regionServer....
支持的检测规则
规则说明 规则包名称 适用语言 规则介绍 Java开发规范 Java 阿里巴巴Java开发规约基于《阿里巴巴 Java 开发手册》，是阿里内部 Java 工程师所遵循的开发规范，涵盖编程规约、单元测试规约、异常日志规约、MySQL 规约、工程规约、安全规约等...
概述
Paho-MQTT Java接入示例 基于开源的 Paho-Java，提供了基础的连接和消息收发功能，适用于以使用基础功能为主的用户。用户可以根据 Alink协议 按需对接高阶功能。Link SDK实现了物联网平台的全部基础功能以及多数高阶功能，适用于需要使用高...
安装Tomcat服务及Java环境
Tomcat作为一个开源且免费的Java Web服务器，常用来作为Web开发的工具。它可以托管由Servlet、JSP页面（动态内容）、HTML页面、JavaScript、样式表、图片（静态内容）组成的Java Web应用程序。您可根据实际需要，选择合适的方式进行部署。...
通过开源Solr API（Java）访问搜索引擎
本文介绍通过开源Solr API（Java）访问Lindorm搜索引擎的步骤和示例说明。前提条件 安装Java环境，使用JDK1.6或更高版本。已将本机IP添加至白名单，具体操作，请参见 设置白名单。注意事项 不支持通过 公网 访问。步骤一：下载solr-solrj ...
开源SDK接入（主子账号授权）
阿里云的 云消息队列 RabbitMQ 版 支持AMQP 0-9-1协议，兼容开源的RabbitMQ客户端，您可以使用开源的客户端SDK接入 云消息队列 RabbitMQ 版 服务端进行消息收发。前提条件 创建实例 创建Vhost 背景信息 借助访问控制RAM的RAM用户，您可以...
部署方式概述
Tomcat作为一个开源且免费的Java Web服务器，常用来作为Web开发的工具。它可以托管由Servlet、JSP页面（动态内容）、HTML页面、JavaScript、样式表、图片（静态内容）组成的Java Web应用程序。您可根据实际需要，选择合适的方式进行部署。...
开源支持
MaxCompute提供的SDK如下：Java SDK Java SDK使用说明请参见 Java SDK介绍。服务支持方式：您可通过访问官方文档获取支持。Python SDK PyODPS是MaxCompute的Python版本的SDK，提供对MaxCompute对象的基本操作和DataFrame框架，让您可以轻松...
生命周期策略
背景信息 产品的更新换代是基础技术软件领域的常态。在开源大数据社区蓬勃发展的今天，新版本带来了更丰富、强大和易用的产品特性。随着引擎重构、计费计量、云原生部署等多种形态的不断涌现，已经投入使用的产品版本和形态会逐渐老化，...
生命周期策略
背景信息 产品的更新换代是基础技术软件领域的常态。在开源大数据社区蓬勃发展的今天，新版本带来了更丰富、强大和易用的产品特性。随着引擎重构、计费计量、云原生部署等多种形态的不断涌现，已经投入使用的产品版本和形态会逐渐老化，...
扩容集群
EMR Serverless StarRocks不仅无缝兼容开源StarRocks，并且具备自动升级软件版本的功能，可省去手动管理版本的繁琐与风险。迁移方案详情，请参见 迁移StarRocks数据至EMR Serverless StarRocks。操作步骤 重要 集群扩容操作不会重启存量...
Hive作业异常排查及处理
1:value]at org.apache.hadoop.hive.ql.exec.tez.TezProcessor.initializeAndRunProcessor(TezProcessor.java:296)at org.apache.hadoop.hive.ql.exec.tez.TezProcessor.run(TezProcessor.java:250)原因分析：Hive开源版本缺陷。...
- 产品推荐
- 这些文档可能帮助您