基于mac构建大数据伪分布式学习环境(九)-部署Kafka

1.解压2.修改配置broker.id:单机不修改listeners:默认9092端口log.dirs:注意:这个目录不是存储日志的,是存储Kafka中核心数据的目录,这个目录默认是指向的tmp目录,所以建议修改一下zookeeper.connect:kafka依赖的zookeeper如果kafka...

基于mac构建大数据伪分布式学习环境(八)-部署Zookeeper

1.解压2.重命名zoo.cfg并配置dataDir参数mv zoo_sample.cfg zoo.cfgdataDir=/data/soft/apache-zookeeper-3.5.8-bin/data3.修改zookeer AdminServer端口这里主要是因为Spark web会占用808...

阿里云大数据工程师ACA认证(2023版)

21 课时 |
807 人已学 |
免费

基于MaxCompute的热门话题分析

8 课时 |
329 人已学 |
免费

独家揭秘当下大数据体系

4 课时 |
331 人已学 |
免费
开发者课程背景图

基于mac构建大数据伪分布式学习环境(六)-部署HBase

官方文档如下:http://hbase.org.cn/docs/32.html1.解压安装包tar -zxvf hbase-2.2.6-bin.tar.gz2.修改配置文件Hbase-env.shexport JAVA_HOME=/data/soft/jdk1.8export HADOOP_HOME...

基于mac构建大数据伪分布式学习环境(五)-部署MySQL8.30

1.下载镜像yum install wgetwget https://dev.mysql.com/get/mysql80-community-release-el7-3.noarch.rpm2.安装镜像rpm -ivh mysql80-community-release-el7-3.noarch.r...

基于mac构建大数据伪分布式学习环境(四)-部署Hive

上传解压 tar -zxvf apache-hive-3.1.2-bin.tar.gz 修改模板 cd apache-hive-3.1.2-bin/conf/ mv hive-env.sh.template hive-env.sh mv hive-default.xml.template hive-...

基于mac构建大数据伪分布式学习环境(三)-配置免密登录并配置Hadoop

上传文件等操作,这里不再赘述前置免密登录操作:ssh-keygen -t rsa ll ~/.ssh/ cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys解压tar -zxvf hadoop-3.2.0.tar.gz配置环境变量vi /etc/...

基于mac构建大数据伪分布式学习环境(七)-部署Scala及Spark学习环境

1.解压scala 2.12.112.配置环境变量export SCALA_HOME=/data/soft/scala-2.12.11export PATH=.:$JAVA_HOME/bin:$HADOOP_HOME/sbin:$HADOOP_HOME/bin:$SCALA_HOME/bin:$PA...

基于mac构建大数据伪分布式学习环境(二)-部署JDK

1.通过sftp上传jdk文件到指定linux目录下2.解压JDK并改名mv jdk1.8.0_202/ jdk1.83.配置环境变量,方便全局访问jdkexport JAVA_HOME=/data/soft/jdk1.8export PATH=.:$JAVA_HOME/bin:$PATH4.jav...

基于mac构建大数据伪分布式学习环境(一)-安装CentOS系统

基于mac构建大数据伪分布式学习环境(一)-安装CentOS系统

选择自定义虚拟机:选择centos7:自定义名称:设置内存:设置硬盘大小选择CD并连接设置时区、密码、并最小化安装查看网段和子网掩码cat /Library/Preferences/VMware\ Fusion/vmnet8/nat.conf设置静态网络tar -zxvf vi /etc/sysco...

构建大数据健康发展的安全生态环境

大数据等颠覆性技术快速发展的同时,大数据安全面临的挑战也日益尖锐。5月26日至28日在贵州贵阳举办的2017中国国际大数据产业博览会上,大数据安全成为业界热议的焦点话题。专家认为,大数据产业的发展与创新必须直面数据安全的严峻挑战,急需打造和构建一个促进大数据健康发展的安全生态环境。 辨识、管控大数据...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

社区圈子

阿里巴巴大数据计算
阿里巴巴大数据计算
阿里大数据官方技术圈
347750+人已加入
加入
相关电子书
更多
开源大数据治理体系构建—助力游戏行业数据化运营
用友助力数据平台构建,驱动企业创新
MongoDB 应用数据平台助力快速构建您的应用
立即下载 立即下载 立即下载