概述
背景信息 在大数据生态系统中，Alluxio位于数据驱动框架或应用（例如Apache Spark、Presto、TensorFlow、Apache Flink和Apache Hive等）和各种持久化存储系统（例如HDFS和阿里云OSS）之间，使得上层的计算应用可以通过统一的客户端API和...
如何将其他服务商的网站迁入阿里云
之后核实运行网站需要的环境，环境方面在Linux系统上可以使用Apache、Nginx和Tomcat等，Windows系统上可以用IIS、Apache、Nginx、Tomcat等。根据程序开发的代码进行选择，例如：PHP之前的几种环境都支持，ASP使用IIS最好，JAVA可以使用...
如何将应用从HSF迁移到Dubbo3
无需依赖EDAS容器，使用apache-tomcat部署即可。提供Dubbo服务。detail-dubbo：原生Dubbo方式（WAR包）声明服务的服务消费者。无需依赖EDAS容器，使用apache-tomcat部署即可。调用Dubbo服务。itemcenter-dubbo-spring-boot：原生Dubbo方式...
Parquet
本文为您介绍Parquet格式的使用方法和类型映射。使用限制 Parquet 格式允许读写Parquet数据。仅对象存储OSS连接器（实时计算引擎VVR 6.0.7及以上版本）支持读取Parquet格式的数据。使用示例 利用OSS和Parquet格式创建表的示例如下。CREATE ...
进程监控
云监控通过安装在阿里云主机（ECS实例）和非阿里云主机上的云监控插件，为您采集最近一段时间内活跃进程的CPU使用率、内存使用率和文件打开数。您还可以添加进程监控，查看其进程数，并为这些进程设置报警规则，及时关注进程数的变化，确保...
DataWorks V3.0
E-MapReduce：E-MapReduce（Elastic MapReduce，简称EMR）构建在阿里云云服务器ECS上，基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其它周边系统（例如Hive），来分析和处理自己的数据的大数据...
服务器数据采集方案概述
通过Filebeat采集Apache日志数据 您可以使用Filebeat采集日志数据，并通过Logstash过滤采集的日志数据，最后传输到Elasticsearch中进行分析。通过Metricbeat收集系统数据及Nginx服务数据 您可以通过阿里云Metricbeat采集器收集系统数据和...
2023年功能发布记录
2023年11月 功能名称 变更类型 功能描述 相关文档 计费项降价 优化 自2023年11月01日0时起，函数计算 中vCPU使用量、内存使用量和磁盘使用量三个计费项进行降价调整，其中vCPU使用量将实行阶梯累计计费模式。【产品变更】函数计算计费项...
2023年功能发布记录
2023年11月 功能名称 变更类型 功能描述 相关文档 计费项降价 优化 自2023年11月01日0时起，函数计算 中vCPU使用量、内存使用量和磁盘使用量三个计费项进行降价调整，其中vCPU使用量将实行阶梯累计计费模式。【产品变更】函数计算计费项...
Doris概述
Apache Doris是一个高性能、实时的分析型数据库，能够较好的满足报表分析、即席查询、数据湖联邦查询加速等使用场景。本文为您介绍Apache Doris。背景信息 关于更多Apache Doris信息，详情请参见 Doris介绍。使用场景 数据源经过各种数据...
接入Http Client
若要将Apache HttpClient接入AHAS流量防护，您只需通过以下方式使用 SentinelApacheHttpClientBuilder 构造 CloseableHttpClient：HttpClientBuilder builder=new SentinelApacheHttpClientBuilder(config);使用方式同正常的builder，可以...
功能特性
使用Charles录制压测场景 JMeter录制压测脚本 JMeter是Apache的开源压测工具，支持参数化、断言等功能。其丰富的开源生态提供了各种协议和控制器的扩展。使用JMeter轻松录制压测脚本 接口测试 接口压测 接口压测作为PTS统一管理HTTP接口的...
2023-06-21版本
本文为您介绍2023年6月21日发布的Flink全托管版本的重大功能变更和主要缺陷修复。重要 本次版本将在两周内在全网进行分步骤的灰度。如果您未能在控制台上找到相关新功能，说明您的平台暂未完成灰度。如果您需要尽快升级，请 提交工单 告知...
文件存储HDFS版
借助该SDK，Apache Hadoop的计算分析应用（如MapReduce、Hive、Spark、Flink等）可以无需修改代码和编译，直接使用文件存储HDFS版作为defaultFS，从而获得超越原始HDFS的功能和性能优势。如果您更习惯使用图形化的Web应用程序，可以使用...
使用HBase Shell
创建HBase集群后，您可以使用HBase Shell连接HBase，并进行读取和写入数据等操作。本文为您介绍如何连接HBase，以及常用的HBase Shell命令。前提条件 已创建数据服务场景（DataServing）的集群，详情请参见 创建集群。连接HBase 通过SSH...
安装Kafka单机版
背景信息 Apache Kafka是一个开源流处理平台，使用Scala和Java语言编写。Kafka作为一种高吞吐量的分布式发布订阅消息系统，可以处理消费者模式网站中的所有动作流数据。模板示例 Kafka 单机版（已有VPC）在已有专有网络、交换机和安全组等...
AutoMQ for Kafka On-Prem版服务使用文档
在保持与Apache Kafka完全兼容前提下，AutoMQ可以为用户提供高达10倍的成本优势以及百倍的弹性优势，同时支持秒级分区迁移和流量自动重平衡，解决运维痛点。AutoMQ for Kafka On-Prem版服务使用阿里云计算巢私有化部署方案，将AutoMQ Kafka...
证书格式说明
Root CA机构颁发的证书 Root CA机构颁发的证书是唯一的，一般包括Apache、IIS、Nginx和Tomcat。阿里云 全站加速 DCDN 使用的证书是Nginx，包含后缀为.crt（证书）和后缀为.key（私钥）的这两个文件。进入Nginx文件夹，使用文本编辑器打开....
应用部署时的默认启动命令参数
部署应用时，EDAS会默认添加启动命令参数，用于优化应用性能，保证应用可以使用中间件和应用管理相关功能。配置项 配置值 解析 类别 alicloud.deployment.mode EDAS_MANAGED 添加该配置后，会自动将中间件组件的服务端地址替换为EDAS提供的...
UNLOAD
本文中的命令您可以在如下工具平台执行：MaxCompute客户端 使用SQL分析连接 使用云命令行（odpscmd）连接 使用DataWorks连接 MaxCompute Studio 功能介绍 MaxCompute支持使用 unload 命令将MaxCompute的数据导出至 OSS、Hologres 外部存储...
UNLOAD
本文中的命令您可以在如下工具平台执行：MaxCompute客户端 使用SQL分析连接 使用云命令行（odpscmd）连接 使用DataWorks连接 MaxCompute Studio 功能介绍 MaxCompute支持使用 unload 命令将MaxCompute的数据导出至 OSS、Hologres 外部存储...
dbcp 连接池连接示例
initialSize=30#最大活跃数 maxTotal=30#最大idle数 maxIdle=10#最小idle数 minIdle=5#最长等待时间(毫秒)maxWaitMillis=1000#程序中的连接不使用后是否被连接池回收(该版本要使用removeAbandonedOnMaintenance和removeAbandonedOnBorrow)#...
注册EMR集群至DataWorks
EMR基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理数据。EMR还可以与阿里云其他的云数据存储系统和数据库系统（例如，阿里云OSS和RDS等）进行数据传输。阿里云EMR提供了on ...
Python SDK使用说明
本文介绍视频直播服务端Python SDK的使用方法和示例代码。以查询导播台列表接口为例，帮助您快速掌握视频直播接口的使用方法。前提条件 已安装Python 2.7或以上版本。已下载服务端Python SDK，详细信息，请参见 SDK下载。操作步骤 安装SDK...
常见问题
本文汇总了YARN使用时的常见问题。集群问题汇总 集群有状态重启包括哪些内容？如何启用RM HA？如何检查ResourceManager服务是否正常？如何了解应用运行状况？应用问题排查流程 单任务/容器（Container）最大可用资源由哪些配置项决定？资源...
SpringJDBC 连接 OceanBase 数据库
本文将介绍如何使用 Spring JDBC 框架、MySQL Connector/J 和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入和查询数据等。点击下载 spring-jdbc-mysql-client 示例工程 前提条件 您已安装 OceanBase 数据库...
勒索事件综合防护方案
推荐使用：专有网络VPC、ECS安全组、安全管家服务、安全加固服务 基础安全运维 制定并实施IT软件安全配置，对操作系统（Windows、Linux）和软件（FTP、Apache、Nginx、Tomcat、Mysql等服务）进行初始化安全加固，并定期核查其有效性。...
通过EMR运行基于OSS-HDFS服务的TPC-DS Benchmark
使用场景 大数据性能评估 当您希望评估使用OSS-HDFS服务作为Hadoop数据存储时的大数据处理性能，特别是对于大规模数据分析和查询优化工作负载，TPC-DS可以作为标准的决策支持系统基准测试工具。数据湖架构验证 如果您正在构建或已经拥有...
多租户和资源划分
Doris的多租户和资源隔离方案，主要目的是为了多用户在同一Doris集群内进行数据操作时，减少相互之间的干扰，能够将集群资源更合理的分配给各用户。该方案主要分为两部分，一是集群内节点级别的资源组划分，二是针对单个查询的资源限制。...
通过Maven插件自动部署应用
插件会使用此应用进行部署，如果未填入则使用namespaceId和appname来查找应用进行部署。version:#部署版本号，默认使用日时分秒格式。jdk:#部署的包依赖的JDK版本，支持以下6个选项：OpenJDK 8、OpenJDK 7、Dragonwell 11、Dragonwell 8、...
快速入门
本文描述如何使用Tablestore HBase Client实现一个访问表格存储读写数据的简单程序。说明 当前示例程序使用了HBase API访问表格存储服务，完整的示例程序位于Github的 hbase 项目中，目录位置为 src/test/java/samples/HelloWorld.java。...
Spark使用OSS Select加速数据查询
本文介绍如何配置Spark使用OSS Select加速数据查询，以及使用OSS Select查询数据的优势。背景信息 本文所有操作基于 Apache Impala(CDH6)处理OSS数据 搭建的CDH6集群及配置。说明 文中所有${} 的内容为环境变量，请根据您实际的环境修改。...
配置回源HTTP响应头
例如对于Apache和Nginx，您可以使用以下命令重启服务器。对于Apache：sudo service apache2 restart 对于Nginx：sudo service nginx restart 浏览器验证响应头。使用开发者工具的“网络”面板访问您的资源，检查是否在响应头中看到 Access-...
消息队列Kafka
类别 详情 支持类型 源表和结果表 运行模式 流模式 数据格式 CSV JSON Apache Avro Confluent Avro Debezium JSON Canal JSON Maxwell JSON Raw 说明 以上支持的数据格式都有其对应的配置项，可直接在WITH参数中使用，详情请参见 Flink社区...
Hudi连接器
Hudi是一种数据湖的存储格式，在Hadoop文件系统之上提供了更新数据和删除数据的能力，以及消费变化数据的能力。EMR Trino已经将相关JAR包集成至独立的Hudi Plugin里面，EMR Hudi连接器目前支持查询COW和MOR表。背景信息 EMR Hudi的详细信息...
EMR旧版数据开发迁移公告
迁移流程 通过使用EMR Workflow，您可以轻松将在EMR旧版数据开发中的工作流和任务导出为兼容Apache Dolphinscheduler的工作流描述JSON文件，通过EMR Workflow的导入功能，您可以快速导入工作流和任务，实现快速的迁移，从而节省大量的迁移...
自定义函数迁移指南
POM依赖 POM中依赖的Flink版本需要和作业使用的引擎版本相同。因此您可以按照以下步骤进行。在Flink全托管开发控制台查看VVR镜像中的Flink版本信息。在 SQL开发 页面右侧 更多配置 的 引擎版本 中，查看VVR镜像版本。例如下图中的引擎版本...
使用ECI弹性调度Flink作业
checkpoints metrics.reporter.prom.factory.class:org.apache.flink.metrics.prometheus.PrometheusReporterFactory#通过配置Label，Flink的JobManager和TaskManager使用ECI。kubernetes.jobmanager.labels:alibabacloud....
性能压测
进行测试和数据分析：执行测试脚本并记录测试结果，包括对系统的响应时间、吞吐量、并发用户数、CPU和内存使用率等指标进行监测和记录，然后对测试数据进行分析和评估，确定系统的性能瓶颈和优化方案。性能优化和再次测试：根据测试结果...
数据上云工具
阿里云数加产品 MaxCompute客户端（Tunnel通道系列）客户端基于 批量数据通道 的SDK，实现了内置的Tunnel命令，可对数据进行上传和下载，Tunnel命令的使用请参见 Tunnel命令的基本使用介绍。客户端的安装和基本使用方法请参见 客户端介绍。...
- 产品推荐
- 这些文档可能帮助您