业务接口定义规范
接口定义规范涉及三类定义：内部支持数据类规范：已支持的 Java 原生类和包装类。用户接口类规范：用户定义的 interface，包含 API 调用的 method 声明。用户定义实体类规范：用户定义的实体 class（包含 field 声明），接口类中 method ...
SerDeInfo
名称 类型 描述 示例值 object SerDeInfo Name string 名称 name Parameters Parameters 参数。键值对形式 SerializationLib string SerDe 的实现类 org.apache.hadoop.hive.serde2.OpenCSVSerde
SerDeInfo
名称 类型 描述 示例值 object SerDeInfo Name string 名称 name Parameters Parameters 参数。键值对形式 SerializationLib string SerDe的实现类 org.apache.hadoop.hive.serde2.OpenCSVSerde
如何兼容Hbase 1.0以前的版本
Connection 接口 HBase 1.0.0 及以上的版本中废除了 HConnection 接口，并推荐使用 org.apache.hadoop.hbase.client.ConnectionFactory 类，创建一个实现 Connection 接口的类，用 ConnectionFactory 取代已经废弃的 ConnectionManager 和 ...
生态对接
本文为您介绍MaxCompute支持连接的商业智能BI工具、数据库管理工具及ETL工具。MaxCompute的生态架构如...工具 接入方法 Kettle 使用Kettle调度MaxCompute Apache Airflow 使用Apache Airflow调度MaxCompute Azkaban 使用Azkaban调度MaxCompute
概述
BI工具 是否支持分析外部表 Apache Superset 是 Apache Zeppelin 是 Dataiku 是（有限支持）DataV 是 DataWorks数据服务 是 Davinci 是（有限支持）FineBI 是 FineReport 是 Grafana 是 IBM Cognos Analytics 是 Metabase 是 Power BI 是...
API概览
图片聚类 图片聚类 CreateSimilarImageClusteringTask 创建相似图片聚类任务 相似图片聚类功能，可以将您已索引到数据集内的图片按照相似度生成聚类，用于图片去重、选优等场景，例如可以通过该功能筛选相册中连拍的图片。...
安装软件包
当您添加Linux软件源并知晓目标软件包名称之后，您可以使用Linux系统提供的软件包管理工具，安装所需要的软件包。本文以在CentOS、Debian、Ubuntu和OpenSUSE操作系统上安装阿里云软件源中的Apache软件包为例，为您介绍如何在不同Linux发行...
配额与限制
限制项 说明 Apache RocketMQ Admin工具兼容性 云消息队列 RocketMQ 版 暂不支持使用Apache RocketMQ的Admin API以及CLI管理实例、Topic和Group资源。若您有API管理需求，建议使用阿里云提供的OpenAPI。阿里云OpenAPI支持多语言SDK和CLI...
Airflow调度DLA Spark作业
Airflow是比较流行的开源调度工具，可以实现各类工作负载的DAG编排与调度。您可以通过Spark-Submit和Spark-SQL命令行来实现Airflow调度Spark任务。DLA Spark提供了命令行工具包，支持通过Spark-Submit和Spark-SQL方式来提交Spark作业。您...
在Ubuntu系统下的Apache2安装SSL证书
本文介绍如何在Ubuntu系统下的Apache2服务器配置SSL证书，具体包括下载和上传证书文件的方法，在Apache2上配置证书文件、证书链和证书密钥等参数介绍，以及安装证书后效果的验证。成功配置SSL证书后，您将能够通过HTTPS加密通道安全访问...
常见问题
下面罗列热修复接入和使用过程中的一些常见...如果一定要修复内部类，最简单的方式是反编译成 smali，smali 的文件名就是内部类的类名。RPC 调用相关 如果通过 RPC 请求进行资源调用的过程中出现异常，请参考 无线保镖结果码说明 进行排查。
在Apache服务器上安装SSL证书
本文介绍如何在Apache服务器配置SSL证书，具体包括下载和上传证书文件，在Apache上配置证书文件、证书链和证书密钥等参数，以及安装证书后结果的验证。成功配置SSL证书后，您将能够通过HTTPS加密通道安全访问Apache服务器，确保数据传输的...
Apache Tomcat及httpd服务器安装SSL证书教程
观看以下视频，快速了解如何在Apache Tomcat 7、Apache Tomcat 8、Apache httpd 2服务器上安装SSL证书。准备工作及测试环境介绍 本视频包含Apache Tomcat 7安装SSL证书、Apache Tomcat 8安装SSL证书、Apache httpd 2安装SSL证书三个部分。...
自建Apache RocketMQ触发器
Apache RocketMQ作为事件源通过 事件总线EventBridge 与 函数计算 集成后，通过Apache RocketMQ触发器能够触发关联函数执行，通过函数可以对发布到Apache RocketMQ的消息进行自定义处理。本文介绍如何在 函数计算 控制台创建Apache ...
选择连接工具
DataWorks 使用DataWorks连接 MaxCompute Studio MaxCompute Studio 数据库管理 DBeaver连接MaxCompute DataGrip连接MaxCompute SQL Workbench/J连接MaxCompute ETL工具 使用Kettle调度MaxCompute 使用Apache Airflow调度MaxCompute 使用...
JindoData版本说明
JindoData 4.2.x版本 版本概要 JindoData 4.2.0版本大幅完善JindoFSx存储加速系统，添加对Apache HDFS和阿里云NAS存储产品的缓存加速，增强和提供JindoFuse、JindoDistCp和JindoTable等工具。主要功能 JindoFSx存储加速系统 支持对阿里云...
数据湖元数据配置
固定值为 org.apache.iceberg.spark.extensions.IcebergSparkSessionExtensions。说明 Iceberg 0.11.0开始引入，仅Spark 3.x支持。spark.sql.catalog.iceberg.<catalog-name>Catalog名称。固定值为 org.apache.iceberg.spark.SparkCatalog...
安装Java SDK
访问Maven官方下载页面（Download Apache Maven）下载对应操作系统的Maven工具，手动配置Maven工具。访问 阿里云开发工具包（SDK），获取阿里云的 SDK核心库 以及 无影云桌面 的Maven项目依赖。通过以下任一方式创建Maven项目。方式一：在...
（CVE-2021-44228/CVE-2021-45046）-Apache Log4j2...
对于大于2.10版本的Log4j，可设置 log4j2.formatMsgNoLookups 为True，或者将 JndiLookup 类从 classpath 中去除，例如 zip-q-d log4j-core-*.jar org/apache/logging/log4j/core/lookup/JndiLookup.class。相关链接 如果您的应用无法及时...
（CVE-2021-44228/CVE-2021-45046）-Apache Log4j2...
对于大于2.10版本的Log4j，可设置 log4j2.formatMsgNoLookups 为True，或者将 JndiLookup 类从 classpath 中去除，例如 zip-q-d log4j-core-*.jar org/apache/logging/log4j/core/lookup/JndiLookup.class。相关链接 如果您的应用无法及时...
其他常见问题
但 SOFABoot 使用的是 Spring 4，而 Spring 4 不支持 iBATIS，在使用过程中可能会遇到类似“SqlMapClientDAOSupport 类找不到”的问题。因此，您可以在对应的 pom.xml 中添加如下 iBATIS 提供的依赖：<dependency><groupId>org.mybatis...
数据上云工具
MaxCompute平台支持丰富的数据上传和下载工具（其中大部分工具已经在GitHub公开源代码，以开源社区的方式进行维护）。您可以根据实际应用场景，选择合适的工具进行数据的上传和下载。阿里云数加产品 MaxCompute客户端（Tunnel通道系列）...
使用Apache Airflow调度MaxCompute
背景信息 Apache Airflow是Airbnb开源的、基于Python编写的调度工具，基于有向无环图（DAG），可以定义一组有依赖的作业，并按照依赖顺序依次执行作业。还支持通过Python定义子作业，并支持各种Operators操作器，灵活性大，能满足用户的...
示例代码
import org.apache.rocketmq.acl.common.AclClientRPCHook;import org.apache.rocketmq.acl.common.SessionCredentials;import org.apache.rocketmq.client.AccessChannel;import org.apache.rocketmq.client.exception.MQClientException;...
安装Java SDK
操作步骤 使用IDEA中集成的Maven项目管理工具或访问Maven官方下载页面（Downloading Apache Maven）下载对应操作系统的Maven工具来手动配置Maven工具。创建Maven项目。在项目目录下的pom.xml文件中，添加阿里云核心库tea-openapi、5G互联...
常见问题
42)at OSSManagerImpl.main(OSSManagerImpl.java:63)错误原因是OSS Java SDK使用了Apache HttpClient 4.4.1，而您的工程使用了与Apache HttpClient 4.4.1冲突的Apache HttpClient或commons-httpclient jar包。要查看工程使用的jar包及版本...
SQL常见问题
为什么使用POJO类作为UDTF返回类型时字段会出现“错位”?为什么数据在LocalGroupAggregate节点中长时间卡住，无输出？运行拓扑图中显示的Low Watermark、Watermark以及Task InputWatermark指标显示的时间和当前时间有时差？开发报错 报错：...
收发顺序消息
背景信息 顺序消息分为两类：全局顺序：对于指定的一个Topic，所有消息按照严格的先入先出FIFO（First In First Out）的顺序进行发布和消费。分区顺序：对于指定的一个Topic，所有消息根据Sharding Key进行区块分区。同一个分区内的消息...
收发事务消息
消息队列RocketMQ版发送事务消息本地Check接口实现类。public class LocalTransactionCheckerImpl implements TransactionCheckListener {/*本地事务Checker。更多信息，请参见事务消息。Override public LocalTransactionState ...
JAR作业开发
The service transformer is needed to merge META-INF/services files-><transformer implementation="org.apache.maven.plugins.shade.resource.ServicesResourceTransformer"/><transformer implementation="org.apache.maven.plugins....
概述
Apache Druid是一个分布式内存实时分析系统，用于解决如何在大规模数据集下快速的、交互式的查询和分析问题。基本特点 Apache Druid具有如下特点：支持亚秒级的交互式查询。例如，多维过滤、Ad-hoc的属性分组和快速聚合数据。支持实时的...
通过缓存优化性能
概要 下表总结了Delta和Apache Spark缓存之间的主要区别，以便您选择最合适工作流的工具：功能 Delta 缓存 Apache Spark 缓存 储存格式 工作节点上的本地文件。In-memory blocks,但它取决于存储级别。适用对象 WASB和其他文件系统上存储...
使用OSS Java SDK时报NoClassDefFoundError或...
问题描述 使用OSS Java SDK时，报类NoClassDefFoundError或NoSuchFieldError错误，说明工程中可能有包冲突，详细报错如下：Exception in thread"main"java.lang.NoClassDefFoundError:org/apache/...268)at com.aliyun.oss.OSSClient.<init>...
基于CentOS系统镜像快速部署Apache服务
阿里云轻量应用服务器提供了Windows Server系统镜像和主流的Linux系统镜像，您可以通过该类镜像创建纯净、安全、稳定的运行环境。本文以CentOS 7.6系统镜像为例，介绍如何快速配置Apache服务。背景信息 更多搭建网站和部署开发环境的最佳...
概述
工具集：提供相关的工具集，例如Jindo tool和迁移工具Jindo DistCp。各种Connectors：包括Hadoop connector、Flink connector和TensorFlow connector，支持Kite SDK、Apache Beams、Flume、Sqoop和Kafka。SmartData目前通过JindoFS和...
数据迁移
使用OSS作为中间存储 spark-submit-class org.apache.kudu.backup.KuduBackup kudu-backup2_2.11-1.10.0.jar \-kuduMasterAddresses master1-host,master-2-host,master-3-host \-rootPath oss:/{your_BucketName}/kudu-backups {...
部署LAMP环境（Ubuntu）
sudo systemctl start apache2 sudo systemctl enable apache2 运行以下命令，查看Apache服务状态。sudo systemctl status apache2 返回结果类似如下所示，表示Apache已启动。步骤二：安装并配置MySQL 安装MySQL。运行以下命令，安装MySQL...
提交Spark作业
apiVersion:"sparkoperator.k8s.io/v1beta2"kind:SparkApplication metadata:name:spark-pi-simple spec:type:Scala sparkVersion:3.2.1 mainClass:org.apache.spark.examples.SparkPi mainApplicationFile:"local:/opt/spark/examples/...
JindoData概述
JindoData主要组件如下：JindoFS存储系统 JindoFSx存储加速系统 生态支持和工具 JindoFS存储系统 基于阿里云OSS的云原生存储系统，二进制兼容Apache HDFS，并且与Apache HDFS基本功能对齐，提供优化的HDFS使用和平迁体验。JindoFS存储系统...
- 产品推荐
- 这些文档可能帮助您