CreateTable-新增元数据表
注：表支持的数据格式 创建表时用户必须指定数据格式，参数示例如下 avro 格式：table.Parameters:{"classification":"avro"} table.Sd:"InputFormat":"org.apache.hadoop.hive.ql.io.avro.AvroContainerInputFormat""OutputFormat":"org....
使用Hive访问
nohup/usr/local/apache-hive-2.3.7-bin/bin/hive-service metastore&nohup/usr/local/apache-hive-2.3.7-bin/bin/hive-service hiveserver2&验证Apache Hive 在hive Shell中创建一张表。create table test(f1 INT,f2 STRING);在表中写入...
CentOS 7 自建安装Apache+Mysql环境+PHP环境
步骤一：安装Apache 运行以下命令安装Apache服务及扩展包。yum-y install httpd httpd-manual mod_ssl mod_perl 运行 httpd-v 命令可查看Apache的版本号。依次运行以下命令启动Apache服务并设置服务开机自启动。systemctl start httpd ...
【SAE安全漏洞通告及解决方案】Apache Tomcat AJP漏洞
背景 Apache Tomcat是由Apache软件基金会下Jakarta项目开发的Servlet容器。在默认情况下，Apache Tomcat会开启AJP连接器，便于与其他Web服务器通过AJP协议进行数据传输。由于Apache Tomcat AJP协议的缺陷，攻击者可以通过Tomcat AJP ...
收发定时消息和延时消息
重要 社区版的Apache RocketMQ和阿里云 云消息队列 RocketMQ 版 配置方式不同，实现效果也有所差异。社区版的Apache RocketMQ支持延时消息，但不支持定时消息，因此没有专门的定时消息接口。阿里云 云消息队列 RocketMQ 版 不仅同时支持...
基于CentOS系统镜像快速部署Apache服务
本文以CentOS 7.6系统镜像为例，介绍如何快速配置Apache服务。背景信息 更多搭建网站和部署开发环境的最佳实践，请参见 最佳实践概览。步骤一：创建轻量应用服务器 登录 轻量应用服务器管理控制台。在左侧导航栏，单击 服务器。在页面左上...
自定义Source
2021-07-16 14:44:27,620(conf-file-poller-0)[INFO-org.apache.flume.node.Application.startAllComponents(Application.java:169)]Starting Channel c1 2021-07-16 14:44:27,700(lifecycleSupervisor-1-0)[INFO-org.apache.flume....
在文件存储 HDFS 版上使用Apache Spark
本文主要介绍如何在挂载 文件存储 HDFS 版 的Hadoop集群上安装及使用Apache Spark。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK，且JDK...
系统检查点或作业快照
报错：org.apache.flink.util.SerializedThrowable 报错：You are using the new V4 state engine to restore old state data from a checkpoint 报错：No space left on device 报错：java.lang.IllegalArgumentException:Illegal ...
【EDAS K8s 集群】关于Apache Tomcat AJP漏洞（2020年...
由于Apache Tomcat默认开启AJP连接器，攻击者可以通过Tomcat AJP Connector读取含Apache Tomcat在内其下所有 webapp 目录下的任何文件，存在恶意攻击风险。这里对该安全漏洞进行说明并提供解决方案。背景 Apache Tomcat是由Apache 软件基金...
Apache服务器mod_ssl.so模块如何安装？
在Apache服务器上安装SSL证书时，需提前安装mod_ssl.so模块以启用SSL功能。您可以在服务器执行 httpd-M|grep 'ssl' 检查mod_ssl.so模块是否安装成功。如未安装，请执行 yum install-y mod_ssl 命令安装。安装后，将会在etc/httpd/conf.d...
部署LAMP环境（Ubuntu）
sudo systemctl start apache2 sudo systemctl enable apache2 运行以下命令，查看Apache服务状态。sudo systemctl status apache2 返回结果类似如下所示，表示Apache已启动。步骤二：安装并配置MySQL 安装MySQL。运行以下命令，安装MySQL...
其他常见问题
at com.sun.org.apache.xerces.internal.util.ErrorHandlerWrapper.createSAXParseException(ErrorHandlerWrapper.java:203)at com.sun.org.apache.xerces.internal.util.ErrorHandlerWrapper.fatalError(ErrorHandlerWrapper.java:177)at ...
部署LAMP环境（Ubuntu）
sudo systemctl start apache2 sudo systemctl enable apache2 运行以下命令，查看Apache服务状态。sudo systemctl status apache2 返回结果类似如下所示，表示Apache已启动。步骤二：安装并配置MySQL 安装MySQL。运行以下命令，安装MySQL...
Dataphin 即席sql...apache.hadoop.hive.common.type....
问题描述 Dataphin 即席sql报错Could not initialize class org.apache.hadoop.hive.common.type.HiveDate。问题原因 插入数据后，查询表报错，表结构有date字段，输入类型有问题。解决方案 把表字段改成string类型，然后重新插入数据查询...
使用JDBC Connector导入
package org.myorg.example import org.apache.flink.streaming.api.scala._import org.apache.flink.table.sources._import org.apache.flink.table.api.scala.StreamTableEnvironment import org.apache.flink.table.api._import org....
SSL接入点PLAIN机制收发消息
Licensed to the Apache Software Foundation(ASF)under one or more#contributor license agreements.See the NOTICE file distributed with#this work for additional information regarding copyright ownership.#The ASF licenses this...
JAR作业开发
The service transformer is needed to merge META-INF/services files-><transformer implementation="org.apache.maven.plugins.shade.resource.ServicesResourceTransformer"/><transformer implementation="org.apache.maven.plugins....
漏洞公告|Apache Log4j2安全问题（CVE-2021-44228）
阿里云已关注到关于Apache Log4j2的安全问题（CVE-2021-44228），并已第一时间启动安全风险的治理。针对受漏洞影响的Ubuntu和CentOS镜像云电脑，无影云电脑 已于2021年12月30日完成升级修复。对于在此时间之前创建的Ubuntu和CentOS镜像云...
数据服务集群
DataServing是阿里云E-MapReduce提供的基于Apache HBase的数据服务集群类型。本文为您介绍数据服务集群支持的特性，适用场景以及技术架构。特性介绍 Apache HBase是具有高可靠性、高性能、列存储、可伸缩、实时读写的开源NoSQL分布式系统。...
使用Flink访问
本文介绍使用自建的Apache Flink访问文件引擎。准备工作 开通文件引擎，详情请参见 开通指南。在计算节点上安装JDK，版本不能低于1.8。在计算节点上安装Scala。Scala下载地址为 官方链接，其版本要与使用的Apache Spark版本相兼容。下载...
【漏洞预警】Apache Log4j2远程代码执行漏洞
近日，阿里云计算有限公司发现Apache Log4j2组件存在远程代码执行漏洞，并将漏洞情况告知Apache软件基金会。本文为您介绍该漏洞的影响范围及相应的修复方案。漏洞影响 具体漏洞详情，请参见【漏洞通告】Apache Log4j2远程代码执行漏洞（CVE...
Apache配置多域名访问不同网站
sudo vi/usr/local/apache/conf/extra/httpd-vhosts.conf 按 i 键进入编辑模式，修改配置信息。您需要注释掉配置文件中默认的配置信息（即*:80>标签中的配置信息），并手动添加您的多个域名的配置信息。本示例中，需要进行以下操作：如下图...
Apache Log4j2 远程代码执行漏洞（CNVD-2021-95914）...
例如，如下版本就是 2.12.1：[INFO]org.example:Demo1:jar:1.0-SNAPSHOT[INFO]\-org.apache.logging.log4j:log4j-core:jar:2.12.1:compile[INFO]\-org.apache.logging.log4j:log4j-api:jar:2.12.1:compile 查看服务器上的 Jar 包 您可以...
为什么采样日志中报java.net.SocketException:Socket ...
498)at org.apache.jmeter.threads.JMeterThread.processSampler(JMeterThread.java:424)at org.apache.jmeter.threads.JMeterThread.run(JMeterThread.java:255)at java.lang.Thread.run(Thread.java:766)查看采样日志的 Timing瀑布流 页...
为什么采样日志中报java.net.SocketException:Socket ...
498)at org.apache.jmeter.threads.JMeterThread.processSampler(JMeterThread.java:424)at org.apache.jmeter.threads.JMeterThread.run(JMeterThread.java:255)at java.lang.Thread.run(Thread.java:766)查看采样日志的 Timing瀑布流 页...
使用Spark访问
本文介绍在文件引擎上搭建及使用Apache Spark的方法。运行环境准备 开通文件引擎，详情请参见 开通指南。在计算节点上安装JDK，版本不能低于1.8。在计算节点上安装Scala。Scala下载地址：官方链接，其版本要与使用的Apache Spark版本相兼容...
Low Level REST Client(5.x)
pom依赖<dependency><groupId>org.elasticsearch.client</groupId><artifactId>rest</artifactId><version>5.5.3</version></dependency><dependency><groupId>org.apache.logging.log4j</groupId><artifactId>log4j-core</artifactId>...
漏洞公告|Apache Hadoop FileUtil.unTar命令注入漏洞
2022年8月4日，Apache Hadoop官方披露修复了一个Shell命令注入漏洞CVE-2022-25168。由于Apache Hadoop的FileUtil.unTar API在传递Shell之前未对输入的文件名进行转义，攻击者可以利用该漏洞注入任意命令，从而对集群造成破坏。漏洞影响 ...
PHP
打开Apache2配置文件/etc/apache2/apache2.conf，找到如下片段进行相应修改。Options Indexes FollowSymLinks AllowOverride All Require all granted在/var/www/html/aliyun-oss-appserver-php 目录下，新建一个....
基础使用
impl=org.apache.iceberg.aliyun.dlf.hive.DlfCatalog \ EMR-5.5.x版本 spark-sql-conf spark.sql.extensions=org.apache.iceberg.spark.extensions.IcebergSparkSessionExtensions \-conf spark.sql.catalog.dlf=org.apache.iceberg.spark...
在文件存储 HDFS 版上使用Presto
mv presto-server-0.265.1/plugin/hive-hadoop2/hadoop-apache2-2.7.4-9.jar presto-server-0.265.1/plugin/hive-hadoop2/hadoop-apache2-2.7.4-9.jar.bak 将编译后的hadoop-apache2-2.7.4-9.jar依赖包拷贝到对应目录下。cp presto-hadoop-...
Hive作业异常排查及处理
787)at org.apache.hadoop.hive.ql.exec.Operator.forward(Operator.java:897)at org.apache.hadoop.hive.ql.exec.SelectOperator.process(SelectOperator.java:95)at org.apache.hadoop.hive.ql.exec.Operator.forward(Operator.java:897)...
数据湖元数据配置
固定值为 org.apache.iceberg.spark.extensions.IcebergSparkSessionExtensions。说明 Iceberg 0.11.0开始引入，仅Spark 3.x支持。spark.sql.catalog.iceberg.<catalog-name>Catalog名称。固定值为 org.apache.iceberg.spark.SparkCatalog...
开发代码示例
https://mvnrepository.com/artifact/org.apache.httpcomponents/httpclient --> <dependency> <groupId>org.apache.httpcomponents</groupId> <artifactId>httpclient</artifactId> <version>4.5.2</version> </dependency> <!...
MapReduce开发手册
groupId>org.apache.hadoop</groupId><artifactId>hadoop-mapreduce-client-common</artifactId><version>2.8.5</version></dependency><dependency><groupId>org.apache.hadoop</groupId><artifactId>hadoop-common...
漏洞公告|Apache Log4j2远程代码执行漏洞
近日，阿里云计算有限公司发现Apache Log4j2组件存在远程代码执行漏洞，并将漏洞情况告知Apache软件基金会。本文为您介绍该漏洞的影响范围及相应的修复方案。漏洞影响 具体漏洞详情，请参见【漏洞通告】Apache Log4j2 远程代码执行漏洞...
使用Flink SQL消费实时变更数据示例
groupId>org.apache.flink</groupId><artifactId>flink-java</artifactId><version>1.13.2</version></dependency><dependency><groupId>org.apache.flink</groupId><artifactId>flink-streaming-java_2.12</artifactId>...
Dataphin中字段设置脱敏规则之后，数据查询报错...
FUNC_(string)_FUNC_(string)at org.apache.hive.jdbc.Utils.verifySuccess(Utils.java:241)at org.apache.hive.jdbc.Utils.verifySuccessWithInfo(Utils.java:227)at org.apache.hive.jdbc.HiveStatement.execute(HiveStatement.java:247...
HBase
spark/使用org.apache.phoenix.spark读写spark表 val url="your zkUrl"val dbtable="us_population"val df=spark.read.format("org.apache.phoenix.spark").options(Map("table"->dbtable,"zkUrl"->url)).load()/数据展示；df.show()数据...
- 产品推荐
- 这些文档可能帮助您