Mac部署spark2.4.4

Mac部署spark2.4.4

欢迎访问我的GitHub这里分类和汇总了欣宸的全部原创(含配套源码):https://github.com/zq2599/blog_demos环境信息操作系统:macOS Mojave 10.14.6JDK:1.8.0_211 (安装位置:/Library/Java/JavaVirtualMachi...

Mac部署hadoop3(伪分布式)

Mac部署hadoop3(伪分布式)

欢迎访问我的GitHub这里分类和汇总了欣宸的全部原创(含配套源码):https://github.com/zq2599/blog_demos环境信息操作系统:macOS Mojave 10.14.6JDK:1.8.0_211 (安装位置:/Library/Java/JavaVirtualMachi...

基于mac构建大数据伪分布式学习环境(十二)-部署DataX+DataX Web

DataX1.下载解压2.自检rm -rf /data/soft/datax/plugin/*/._*datax.py ../job/job.json自检结束部署完成DataX web1.解压2.一键安装./bin/install.sh --force3.输入数据库连接密码和数据库名4.启动服务st...

基于mac构建大数据伪分布式学习环境(十二)-部署Sqoop

1.解压2.修改配置mv sqoop-env-template.sh sqoop-env.sh3.添加环境变量export SQOOP_HOME=/data/soft/sqoop-1.4.7.bin__hadoop-2.6.0export PATH=.:$JAVA_HOME/bin:$HADOOP_...

基于mac构建大数据伪分布式学习环境(十一)-部署Flink1.14.5

1.解压2.修改配置vi flink-conf.yaml jobmanager.rpc.address: bigdataclassloader.check-leaked-classloader: falsevi mastersbigdata:8081vi workersbigdata3.启动验证st...

基于mac构建大数据伪分布式学习环境(十)-部署Redis

1.解压并编译2.安装C语言环境yum install gccmake MALLOC=libc3.修改redis.confdaemonize yeslogfile /data/soft/redis-5.0.9/logbind 127.0.0.1 192.168.78.104.启动redisredis...

基于mac构建大数据伪分布式学习环境(九)-部署Kafka

1.解压2.修改配置broker.id:单机不修改listeners:默认9092端口log.dirs:注意:这个目录不是存储日志的,是存储Kafka中核心数据的目录,这个目录默认是指向的tmp目录,所以建议修改一下zookeeper.connect:kafka依赖的zookeeper如果kafka...

基于mac构建大数据伪分布式学习环境(八)-部署Zookeeper

1.解压2.重命名zoo.cfg并配置dataDir参数mv zoo_sample.cfg zoo.cfgdataDir=/data/soft/apache-zookeeper-3.5.8-bin/data3.修改zookeer AdminServer端口这里主要是因为Spark web会占用808...

基于mac构建大数据伪分布式学习环境(七)-部署Scala及Spark学习环境

1.解压scala 2.12.112.配置环境变量export SCALA_HOME=/data/soft/scala-2.12.11export PATH=.:$JAVA_HOME/bin:$HADOOP_HOME/sbin:$HADOOP_HOME/bin:$SCALA_HOME/bin:$PA...

基于mac构建大数据伪分布式学习环境(六)-部署HBase

官方文档如下:http://hbase.org.cn/docs/32.html1.解压安装包tar -zxvf hbase-2.2.6-bin.tar.gz2.修改配置文件Hbase-env.shexport JAVA_HOME=/data/soft/jdk1.8export HADOOP_HOME...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

社区圈子

开发与运维
开发与运维
集结各类场景实战经验,助你开发运维畅行无忧
6411+人已加入
加入