hadoop完全分布模式搭建_电脑知识

创始人

2024-11-24 12:36:32

本次搭建是基于伪分布式进行的，所以配置之前需要搭建好伪分布式

我使用的ubuntu版本见下

虚拟机之前安装过在此不在记录

伪分布式的搭建过程在之前的第一次实验报告上有详细的记录

修改主机名

设置 hosts 文件

ssh 无密码登录

过程不再演示

免密登录成功图

配置集群/分布式环境

配置core-site.xml

配置hdfs-site.xml

配置mapred-site.xml

配置yarn-site.xml

上述 5 个文件全部配置完成后，需要把 master 节点上的 /usr/wjj/hadoop 文件复制到各个节点上如果之前运行过伪分布模式，建议删除之前伪分布模式下生产的临时文件

在此我之前删除过所以提示没有

在 master 节点将配置好的 Hadoop 复制到其他节点

在 master 节点格式化 NameNode

启动 Hadoop 集群