HDFS数据源
类型分类 数据库数据类型 整数类 TINYINT、SMALLINT、INT和BIGINT 浮点类 FLOAT和DOUBLE 字符串类 CHAR、VARCHAR和STRING 布尔类 BOOLEAN 日期时间类 DATE和TIMESTAMP 数据同步任务开发 HDFS数据同步任务的配置入口和通用配置流程指导可...
创建Hive数据源
重要 此处填写的配置优先级高于core-site.xml中配置的AccessKey。开启Kerberos Kerberos是一种基于对称密钥技术的身份认证协议，可以为其他服务提供身份认证功能，且支持SSO（即客户端身份认证后，可以访问多个服务，例如HBase和HDFS）。...
应用开发概述
您可直接将应用部署到EDAS上，无须修改代码、添加配置，即可获取EDAS企业级的应用托管、微服务治理（服务查询、金丝雀发布、离群实例摘除、无损下线）、监控报警和应用诊断等能力，帮助您全面提升应用的稳定性和安全性。Spring Cloud概述 ...
错误编码：HSF-0021
问题描述 使用HSF开发应用时，提示以下报错。java.lang.IllegalArgumentException:ConsumerBean中指定的接口类不存在[com.taobao.hsf.jar.test.HelloWorldService1]解决方案...具体的使用方法请参见 API手册。适用于 企业级分布式应用服务EDAS
VPN配置
您可从VPN服务器配置目录下的 client.ovpn 文件中获取VPN配置文件内容。单击 提交。完成新建VPN网关操作后，在VPN配置列表定位到新创建的VPN网关，单击其操作栏的 启用，使该配置生效。VPN服务器配置信息会实时同步到已注册的终端设备。在...
VPN配置指导
您可从VPN服务器配置目录下的 client.ovpn 文件中获取VPN配置文件内容。单击 提交。完成新建VPN网关操作后，在VPN配置列表定位到新创建的VPN网关，单击其操作栏的 启用，使该配置生效。VPN服务器配置信息会实时同步到已注册的终端设备。在...
错误编码：HSF-0038
问题描述 实例在多网卡的场景下，HSF服务端绑定到错误的IP地址。解决方案 您可以在JVM启动参数中添加-Dhsf.server.ip=XXX.XXX.XXX.XXX 参数，指定HSF服务端绑定到期望的IP地址上。如果您需要在EDAS控制台中...适用于 企业级分布式应用服务EDAS
从自建HDFS迁移数据
修改Hadoop 配置信息，详情请参见 使用开源HDFS客户端访问。检查自建的Hadoop集群和Lindorm文件引擎的连通性。在自建的Hadoop 集群上执行以下命令测试集群的连通性。hadoop fs-ls hdfs:/${实例Id}/其中${实例Id}请根据您的实际情况进行修改...
为Dubbo服务动态配置超时时间
超时配置优先级关系参考：相较于其他配置优先级：EDAS超时配置 的方法级配置>客户端及其他来源的方法级配置>EDAS超时配置 的接口级配置>客户端及其他来源的接口级配置。相较于自身配置优先级：指定服务方法的配置>所有服务方法（即选择星号...
在非EMR集群中部署JindoSDK
vim/usr/local/hadoop/etc/hadoop/core-site.xml 将OSS/OSS-HDFS实现类配置到Hadoop的 core-site.xml 中。property><name>fs.AbstractFileSystem.oss.impl</name><value>...
复制自定义镜像
您将一台源服务器配置完成后，先创建自定义镜像，再将该镜像复制到其他任一目标地域，即可在该目标地域通过复制后的自定义镜像创建相同配置的轻量应用服务器。重要 复制镜像时，阿里云需要在目标地域创建快照用于生成自定义镜像。该快照您...
网络准入配置
本教程指引您配置并启用网络实例。...配置流程 注意事项 已经购买套装的AP只需要绑定企业账号，创建好的网络实例自动...企业IT管理员在交换机或者AP上配置RADIUS认证服务器信息。icmsDocProps={'productMethod':'created','language':'zh-CN',};
ALB配置会话保持
（可选）步骤二：后端服务器配置Cookie 当服务器组开启会话保持，并且选择的Cookie处理方式为重写Cookie时，才需要在后端服务器中配置对应的Cookie。远程登录ECS。具体操作，请参见 ECS远程连接操作指南。根据不同的Web服务器配置Cookie。...
ZKFC Mismatched address异常
8021 问题原因 该问题通常说明高可用集群中的ZKFC在ZooKeeper中存储的NameNode的信息与Hadoop配置文件中的不匹配，导致HDFS无法选出Active NameNode。存储在ZKFC中的端口是8020，而实际的NameNode ServiceRPC的端口是8021。早期部分EMR版本...
在本地搭建 ACM 服务器
对比项 ACM 云服务器 ACM 本地服务器 配置操作 支持 支持 历史版本 支持 不支持 监听查询 支持 不支持 推送轨迹 支持 不支持 命名空间 支持 不支持 在本地部署 ACM 服务器 下载 acm-server 包到本地。链接为 acm-server.tar.gz。解压文件。...
Paimon数据源
SelectDB会优先读取conf目录下的Hadoop配置文件，再读取环境变量 HADOOP_CONF_DIR 的相关配置文件。当前适配的Paimon版本为0.5.0。创建Catalog Paimon Catalog支持基于两种Metastore类型创建Catalog：Filesystem（默认）：元数据和数据均...
管理应用（适用于应用镜像）
以LAMP信息为例，您可以：单击 首页地址 后的链接，查看服务器配置是否正常。如下图所示，表示Apache服务运行正常。在 数据库密码 信息后，单击，然后单击 远程连接，在远程连接的命令行中粘贴并运行命令，查询服务器中数据库的管理员登录...
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
ES-Hadoop是Elasticsearch推出的专门用于对接Hadoop生态的工具，可以让数据在Elasticsearch和Hadoop之间双向移动，无缝衔接Elasticsearch与Hadoop服务，充分使用Elasticsearch的快速搜索及Hadoop批处理能力，实现交互式数据处理。...
联系我们
如果您在使用企业级分布式应用服务EDAS（Enterprise Distributed Application Service）的过程中有任何疑问或建议，欢迎使用钉钉搜索钉钉群号加入钉钉群进行反馈。EDAS Spring Cloud和Dubbo交流群 如果您在部署Spring Cloud或Dubbo应用至...
从OSS迁移数据
建议您使用的Hadoop版本不低于2.7.3，本文档中使用的Hadoop版本为Apache Hadoop 2.7.3，修改Hadoop 配置信息，详情参见 使用开源HDFS客户端访问。在Hadoop集群所有节点上安装JDK，本操作要求JDK版本不低于1.8。在Hadoop集群安装OSS客户端...
常见问题
hadoop jar<HADOOP_HOME>/share/hadoop/mapreduce/hadoop-mapreduce-examples-x.x.x.jar wordcount \-Dalluxio.user.file.writetype.default=CACHE_THROUGH \-libjars/<PATH_TO_ALLUXIO>/client/alluxio-x.x.x.-client.jar \<path1><path2>...
YARN高安全特性使用指南
YARN服务管理权限 默认高安全配置为 yarn.admin.acl=hadoop，其中 hadoop 前有单个空格，表示授权给hadoop组（EMR的服务启动Linux用户通常都是使用hadoop组）作为服务管理员。Hadoop中用户默认的组映射来自节点操作系统的组信息。说明 yarn...
部署高可用架构应用集群
本示例中服务器配置如下：说明 在实际环境作为数据库服务器时，建议选择内存相对较高的套餐，以提高服务器的数据处理能力。实例类型：选择 服务器实例。地域和可用区：单击 中国 页签，然后选择 华东1（杭州）。镜像：单击 应用镜像 页签，...
手动搭建FTP站点（Ubuntu）
因此，如无特殊需求，建议您将FTP服务器配置为被动模式。FTP支持以下三种认证模式：匿名用户模式：任何人无需密码验证就可以直接登录到FTP服务器。这种模式最不安全，一般只用来保存不重要的公开文件，不推荐在生产环境中使用。本地用户...
EDAS应用无法访问页面及RPC服务无法调用
本文主要介绍企业级分布式应用服务EDAS应用无法访问页面及RPC服务无法调用的处理方案。问题描述 通过HTTP方式无法访问页面，RPC服务无法调用。问题原因 服务消费者与服务提供者之间的网络存在问题、应用配置路径错误、应用本身错误等。...
基于eRDMA增强型实例部署Spark集群
驱动安装 具体操作，请参见 在企业级x86实例上配置eRDMA。网络配置 执行以下命令，打开 hosts 文件。vim/etc/hosts 按 i 键进入编辑模式，在配置文件中修改以下内容。192.168.201.83 poc-t5m0 master1 192.168.201.84 poc-t5w0 192.168.201...
搭建FTP站点（Alibaba Cloud Linux 3）
因此，如无特殊需求，建议您将FTP服务器配置为被动模式。FTP支持以下三种认证模式：匿名用户模式：任何人无需密码验证就可以直接登录到FTP服务器。这种模式最不安全，一般只用来保存不重要的公开文件，不推荐在生产环境中使用。本地用户...
手动搭建FTP站点（CentOS 8）
因此，如无特殊需求，建议您将FTP服务器配置为被动模式。FTP支持以下三种认证模式：匿名用户模式：任何人无需密码验证就可以直接登录到FTP服务器。这种模式最不安全，一般只用来保存不重要的公开文件，不推荐在生产环境中使用。本地用户...
通过ES-Hadoop实现Spark读写阿里云Elasticsearch数据
Spark是一种通用的大数据计算框架，拥有Hadoop MapReduce所具有的计算优点，能够通过内存缓存数据为大型数据集提供快速的迭代功能。与MapReduce相比，减少了中间数据读取磁盘的过程，进而提高了处理能力。本文介绍如何通过ES-Hadoop实现...
配置EDAS的私服地址和轻量级配置及注册中心
背景信息 目前Spring Cloud for Aliware的第三方包只发布在 EDAS 的私服中，所以需要在Maven中配置 EDAS 的私服地址。本地开发调试时，需要启动轻量级配置注册中心。轻量级配置及注册中心包含了服务发现和配置管理功能。在Maven中配置 EDAS...
搭建FTP站点（CentOS 7）
因此，如无特殊需求，建议您将FTP服务器配置为被动模式。FTP支持以下三种认证模式：匿名用户模式：任何人无需密码验证就可以直接登录到FTP服务器。这种模式最不安全，一般只用来保存不重要的公开文件，不推荐在生产环境中使用。本地用户...
通过ES-Hadoop将HDFS中的数据写入Elasticsearch
ES-Hadoop是Elasticsearch推出的专门用于对接Hadoop生态的工具，可以让数据在Elasticsearch和Hadoop之间双向移动，无缝衔接Elasticsearch与Hadoop服务，充分使用Elasticsearch的快速搜索及Hadoop批处理能力，实现交互式数据处理。...
产品优势
阿里云E-MapReduce（简称EMR）为您提供相对方便可控的企业级开源大数据服务。您可以快速搭建开源大数据服务，例如Hadoop、Spark、Flink、Kafka和HBase服务。稳定可靠的开源组件 100%采用社区开源组件，随开源版本升级迭代，详情请参见 版本...
配置网络实例
企业在进行终端设备注册之前需要创建并完成网络实例的配置。本文档介绍配置企业网络实例的操作步骤。...企业IT管理员在交换机或者AP上配置RADIUS认证服务器信息。icmsDocProps={'productMethod':'created','language':'zh-CN',};
管理Hive Catalog
配置Hive Catalog后，您可以在Flink开发控制台直接读取Hive元数据，无需再手动注册Hive表，提高作业开发的效率且保证数据的正确性。本文为您介绍如何配置Hive元数据、创建和使用Hive Catalog等。背景信息 您可以将Hive Catalog配置文件和...
打通非阿里云业务的网络通道
是 说明 连接器所安装部署的虚拟机或者服务器的配置要求：虚拟机或服务器配置：CPU：4核 内存：8 GB 磁盘：40 GB 操作系统：CentOS 7版本及以上 网络配置：可以访问公网。如果存在防火墙配置，需要放行部署的服务器或虚拟机出方向443、8000...
Cron
Cron是一款类Unix的操作系统下的...高级配置参数说明如下：配置名称 意义 时间偏移 数据时间相对于调度时间的偏移，可以在调度时从上下文获取该值。时区 可以根据实际情况选择不同时区，包括一些常用国家或地区，也包括标准的GMT表达方式。
任务管理高级配置参数说明
本文介绍任务管理中的高级配置参数。任务管理高级配置参数说明如下：参数 适用的执行模式 解释 默认值 实例失败重试次数 通用 任务运行失败自动重试的次数。0 实例失败重试间隔 通用 每次失败重试的间隔。单位：秒。30 实例并发数 通用 同...
什么是应用配置管理ACM？
凭借配置变更、配置推送、历史版本管理、灰度发布、配置变更审计等配置管理工具，ACM能帮助您集中管理所有应用环境中的配置，降低分布式系统中管理配置的成本，并降低因错误的配置变更造成可用性下降甚至发生故障的风险。迁移到MSE Nacos ...
主机规则管理
如果原防暴力破解策略的生效服务器配置了新防暴力破解策略，则原防暴力破解策略的生效服务器数量会相应减少。管理系统规则 系统规则为防暴力破解策略被触发后自动生成的IP拦截规则，以下步骤介绍如何查看、启用和禁用系统规则。登录云安全...
- 产品推荐
- 这些文档可能帮助您