搭建Hadoop环境
前提条件 搭建Hadoop环境时，已有的ECS实例必须满足以下条件：公网IP：实例已分配公网IP地址或绑定弹性公网IP（EIP）。操作系统：Linux操作系统。实例安全组的入方向规则已放行22、443、8088（Hadoop YARN默认的Web UI端口）、9870（Hadoop...
自助建站方式汇总
环境类型 部署方式 说明 搭建Hadoop环境 手动搭建Hadoop环境 本教程介绍如何在Linux操作系统的ECS实例上快速搭建Hadoop伪分布式环境。更换镜像部署Windows环境 云市场镜像集成了操作系统和应用程序，您可以使用阿里云市场镜像快速部署ECS...
Dataphin在Hadoop环境上传的资源JAR包，存放的HDFS...
概述 本文主要介绍Dataphin在Hadoop环境上传的资源JAR包，存放的HDFS路径是什么。详细信息 Dataphin在Hadoop环境上传的资源JAR包，存放的HDFS路径是什么？介绍如下：所有用户上传的资源JAR包，以及安全包的资源，都是默认放在/tmp/dataphin...
常见问题排查
例如：执行 hadoop 命令或者任务出现如下错误时，表明 org/apache/hadoop/fs/PathFilter 相关的类不在Hadoop的运行环境中，该类所属的Jar包为 hadoop-common-x.x.x.jar，需要您下载该Jar包的正确版本，并将其置于所有Hadoop环境下的...
环境准备
使用Hive/HadoopMR来访问表格存储中的表前，您需要完成JDK、Hadoop环境、Hive环境、表格存储Java SDK和阿里云EMR SDK的安装。使用Hive/HadoopMR来访问表格存储中的表 通过 表格存储 及 E-MapReduce 官方团队发布的依赖包，可以直接使用Hive...
通过开源HDFS客户端连接并使用文件引擎
tar-zxvf hadoop-2.7.3.tar.gz 添加Hadoop环境变量。export HADOOP_HOME=${Hadoop安装目录}/hadoop-2.7.3 执行以下命令进入 hadoop 目录。cd$HADOOP_HOME 将Java环境变量 JAVA_HOME 添加至 etc/hadoop/目录下的 hadoop-env.sh 文件中，假设...
UserGroupsMapping
前提条件 已创建Hadoop环境、Hadoop集群或者Hadoop客户端。具体操作，请参见 创建Hadoop运行环境。已开通OSS-HDFS服务。具体操作，请参见 开通并授权访问OSS-HDFS服务。已配置4.5.0及以上版本JindoSDK。具体操作，请参见 非EMR集群接入OSS-...
ProxyUser
前提条件 已创建Hadoop环境、Hadoop集群或者Hadoop客户端。具体操作，请参见 创建Hadoop运行环境。已开通OSS-HDFS服务。具体操作，请参见 开通并授权访问OSS-HDFS服务。已配置4.5.0及以上版本JindoSDK。具体操作，请参见 非EMR集群接入OSS-...
HBase使用OSS-HDFS服务作为底层存储
已创建Hadoop环境。具体步骤，请参见 创建Hadoop运行环境。已部署Apache HBase。具体步骤，请参见 Apache HBase。已开通并授权访问OSS-HDFS服务。具体操作，请参见 开通并授权访问OSS-HDFS服务。操作步骤 连接ECS实例。具体操作，请参见 ...
Spark使用JindoSDK查询OSS-HDFS服务中的数据
已创建Hadoop环境。具体步骤，请参见 创建Hadoop运行环境。已部署Apache Spark。具体步骤，请参见 Apache Spark。已开通并授权访问OSS-HDFS服务。具体操作，请参见 开通并授权访问OSS-HDFS服务。操作步骤 连接ECS实例。具体操作，请参见 ...
智能语音唤醒
如下所示：涉及知识点 模拟MIC声音采样 喇叭播放mp3 本地唤醒AI推理引擎运用 OLED绘图 开发环境准备 硬件 开发用电脑一台 HAAS EDU K1 开发板一块 模拟MIC一个 喇叭一个 USB2TypeC 数据线一根 软件 AliOS Things开发环境搭建 开发环境的...
通过RootPolicy访问
前提条件 已创建Hadoop环境、Hadoop集群或者Hadoop客户端。具体操作，请参见 创建Hadoop运行环境。已开通OSS-HDFS服务。具体操作，请参见 开通并授权访问OSS-HDFS服务。已配置4.5.0及以上版本JindoSDK。具体操作，请参见 非EMR集群接入OSS-...
Impala使用JindoSDK查询OSS-HDFS服务中的数据
已创建Hadoop环境。具体步骤，请参见 创建Hadoop运行环境。已开通并授权访问OSS-HDFS服务。具体操作，请参见 开通并授权访问OSS-HDFS服务。操作步骤 连接ECS实例。具体操作，请参见 连接ECS实例。配置JindoSDK。下载最新版本的JindoSDK JAR...
概述
详细操作，请参见 环境搭建。注意 边缘网关控制台文档内容，仅适用于v2.4.7及以上版本的Link IoT Edge，因此选择产品规格时，边缘版本请选择v2.4.7及以上版本。设置证书、密码，登录边缘网关控制台。详细操作，请参见 登录边缘网关控制台。...
无代理备份并高效克隆MySQL环境
说明 阿里云快照服务是一种无代理（Agentless）的数据备份方式，可以为单个云盘或者云盘组上的数据块创建某个时刻的完整拷贝，用于数据恢复、开发测试环境搭建，或者自定义镜像的制作以进行业务批量部署。更多信息，请参见 快照概述。灵活...
Trino使用JindoSDK查询OSS-HDFS服务中的数据
已创建Hadoop环境。具体步骤，请参见 创建Hadoop运行环境。已部署Trino。具体操作，请参见 部署Trino。已开通并授权访问OSS-HDFS服务。具体操作，请参见 开通并授权访问OSS-HDFS服务。操作步骤 连接ECS实例。具体操作，请参见 连接ECS实例...
边缘模拟器环境搭建常见问题
本文汇总了边缘模拟器环境搭建的常见问题以及解决方式。错误一：docker daemon is not running 错误现象：解决方法：在 cmd.exe 中执行，开启守护进程即可，具体命令如下：cd C:\Program Files\Docker\Docker DockerCli.exe-SwitchDaemon ...
Flume使用JindoSDK写入OSS-HDFS服务
已创建Hadoop环境。具体步骤，请参见 创建Hadoop运行环境。已部署Apache Flume。具体步骤，请参见 Apache Flume。已开通并授权访问OSS-HDFS服务。具体操作，请参见 开通并授权访问OSS-HDFS服务。操作步骤 连接ECS实例。具体操作，请参见 ...
概述
本指南基于金融行业常见的转账和积分场景，指导您从单元化的技术架构和应用架构的规划，到环境搭建和单元化应用的开发部署，再到应用流量调拨和单元化功能的验证，逐步完成 SOFAStack 单元化能力的入门体验。前提条件 已搭建双机房环境。...
python轻应用示例合集
案例实现 4.1 硬件连接 该案例只需要连接电源线以及串口线，如下图所示：4.2 软件实现 AliOS Things开发环境搭建 开发环境的搭建请参考《AliOS Things集成开发环境使用说明之搭建开发环境》，其中详细的介绍了AliOS Things 3.3的IDE集成...
快照概述
阿里云快照服务是一种无代理（Agentless）的数据备份方式，可以为单个云盘或者云盘组（一致性快照组）上的数据块创建某个时刻的完整拷贝，用于数据恢复、开发测试环境搭建，或者自定义镜像的制作以进行业务批量部署。本文主要介绍 快照的...
Snapshot（试用）
前提条件 已创建Hadoop环境、Hadoop集群或者Hadoop客户端。具体操作，请参见 创建Hadoop运行环境。已开通OSS-HDFS服务。具体操作，请参见 开通并授权访问OSS-HDFS服务。已配置4.5.0及以上版本JindoSDK。具体操作，请参见 非EMR集群接入OSS-...
在文件存储 HDFS 版上使用Apache Tez
方式二：安装Tez时使用集群环境中的Hadoop依赖 如果Hadoop环境中已配置 文件存储 HDFS 版 Java SDK，则不需要额外配置。不支持Hadoop集群滚动升级。方式三：安装Tez时使用额外的Hadoop依赖 需要将 文件存储 HDFS 版 Java SDK放到Tez的依赖...
环境搭建
HBase Ganos API基于Ali-Hbase Client客户工具包与GeoTools工具包对数据库进行交互操作，本文介绍导入相关工具包的操作方法。通过以下代码在Maven工程...mvn clean install 成功编译后在target目录下生成Class文件和Jar包，证明环境搭建成功。
基于eRDMA增强型实例部署Spark集群
准备Hadoop环境。如果已有大数据集群，请忽略该步骤。软硬件环境要求 部署该集群需要准备Hadoop、Spark机器，请参考如下版本进行配置。Hadoop版本：Hadoop 3.2.1 Spark版本：Spark 3.2.1 ECS实例：实例规格：请参见 基本规格 vCPU个数：16 ...
非EMR集群接入OSS-HDFS服务快速入门
已创建Hadoop环境。具体步骤，请参见 创建Hadoop运行环境。已开通并授权访问OSS-HDFS服务。具体操作，请参见 开通并授权访问OSS-HDFS服务。操作视频 观看以下视频了解如何通过非EMR集群快速接入OSS-HDFS服务并完成常见操作。操作步骤 连接...
搭建前端开发环境
本文将引导您在不同操作系统下完成环境搭建，另外 Windows 用户需先完成用户配置。在 Windows 操作系统中搭建前端开发环境 完成 Windows 用户配置。按照下图步骤安装 mingw 命令行环境，下载地址：git-scm。下载 并安装 NodeJS v8 版本。...
Ride环境搭建常见问题
Ride环境搭建时，会出现各种问题。本文着重对此做了梳理。一、建议先自查的几个点 如果Ride的测试case没有跑起来，一般都是安装过程中出现了错误。从目前反馈的问题来看，很有可能是以下几个方面出了问题：1、windows环境变量中是否配置了...
微信小程序接入
配置 开发环境搭建完成后，在HBuilderX中打开下载的源码工程，配置以下数据：配置 Appserver 请在 config.js 中配置所需的参数，目前支持配置 AppServer 域名。export default {/AppServer 域名，注意：结尾请勿包含/appServer:'...
微信小程序接入
配置 开发环境搭建完成后，在HBuilderX中打开下载的源码工程，配置以下数据：配置 Appserver 请在 config.js 中配置所需的参数，目前支持配置 AppServer 域名。export default {/AppServer 域名，注意：结尾请勿包含/appServer:'...
JavaScript和Python双引擎运行环境
物料清单 HaaS100 硬件 HaaS 100 硬件规格 案例实现 硬件连接 该案例只需要连接电源线以及串口线，如下图所示：软件实现 AliOS Things开发环境搭建 开发环境的搭建请参考《aos-studio使用说明之搭建开发环境》，其中详细的介绍了AliOS ...
产品规格
Link IoT Edge提供专业版（LE Pro）、标准版（LE Standard）、轻量版（LE Lite）三个版本的产品，本文为您介绍三个版本产品的能力区别以及对软硬件的不同要求...准备完成网关设备后，根据 环境搭建 内容，接入网关到云端，开始您的云端之旅。
JindoFS实战演示
通过JindoFS SDK，您可以在Hadoop环境中直接使用 oss:/bucket/的方式访问阿里云OSS上的内容。本视频为您介绍JindoFS SDK的原理，以及相比开源Hadoop-OSS-SDK的优势。Hadoop/Spark访问OSS加速 Hadoop/Spark访问OSS加速 2021-05-25 与开源的...
使用PyJindo访问阿里云OSS-HDFS
其中，Hadoop配置文件及HADOOP_CONF_DIR不是必须，仅为兼容HADOOP环境中的配置。export JINDOSDK_CONF_DIR=etc/taihao-apps/jindosdk-conf export HADOOP_CONF_DIR=etc/taihao-apps/hadoop-conf 安装和升级pip及PyJindo安装包。python3.8-m...
JindoData版本说明
支持Jindo Sync数据同步工具，您可以不依赖Hadoop环境进行数据同步。JindoSDK支持OSS-HDFS TensorFlow Connector。JindoData 4.5.X版本 JindoData 4.5.1版本 版本概要 4.5.1版本是对4.5.0版本的小幅升级，进行了重要的修复和改进。JindoFS...
将计算巢ECS镜像部署物更新操作加入到软件持续集成
完成持续环境搭建后，需要安装 jq 命令行JSON处理器。在计算巢控制台完成需要加入软件持续集成的部署物创建，更多信息，请参见 创建部署物。创建ECS镜像所需的VPC、vSwitch和安全组。更多信息，请参见 创建和管理专有网络、创建和管理交换...
搭建环境
本文主要向您讲述 SOFABoot 的环境搭建要求。主要涉及 JDK 和 Maven 的安装及配置。安装 JDK 版本要求 SOFABoot 基于 Spring Boot 框架开发，要求 JDK 版本≥8。安装步骤 前往 Oracle 官网下载并安装与您的操作系统相符的 Java SE 安装包。...
将计算巢文件部署物更新操作加入到软件持续集成
完成持续环境搭建后，需要安装 jq 命令行JSON处理器。在计算巢控制台创建需要持续集成的部署物，更多信息，请参见 创建部署物。步骤一：构建文件部署物 在您本地使用命令将服务商的软件打包成文件。此处以打包Spring Boot中的 gs-spring-...
边缘模拟器环境搭建和使用介绍
主要内容：边缘模拟器的环境搭建以及如何运行。使用对象：对接物业一体机的设备厂商。使用场景：物业一体机设备准入测试认证。运行环境：Docker 一、安装Docker环境 1、Linux系统，以ubuntu为例，可以参考：...
新手指引
连接并使用轻量应用服务器 创建轻量应用服务器后，可远程连接轻量应用服务器，并开始快速搭建环境、搭建网站、数据迁移等相关操作。关于远程连接轻量应用服务器的具体操作，请参见 远程连接Linux服务器 或 远程连接Windows服务器。关于如何...
- 产品推荐
- 这些文档可能帮助您