大数据-54 Kafka 安装配置 环境变量配置 启动服务 Ubuntu配置 ZooKeeper
创始人
2024-10-22 09:16:45
0

点一下关注吧!!!非常感谢!!持续更新!!!

目前已经更新到了:

  • Hadoop(已更完)
  • HDFS(已更完)
  • MapReduce(已更完)
  • Hive(已更完)
  • Flume(已更完)
  • Sqoop(已更完)
  • Zookeeper(已更完)
  • HBase(已更完)
  • Redis (已更完)
  • Kafka (正在更新…)

章节内容

上节我们完成的内容:

  • Kafka核心概念介绍
  • Producer
  • Consumer
  • Topic
  • Partition
  • 等等
    在这里插入图片描述

简单介绍

Kafka在3版本以下都是需要ZooKeeper来做协调器的,在3版本以上,Kafka实现了自己的协议去做高可用,但是大家也没有都切换到这个新的方案上,还是比较保守的(如果在生产环境上 )。

ZooKeeper

环境变量

# 我们要确保有ZooKeeper环境,之前已经安装过了。最好确认一下你的ZooKeeper环境是正确的。 vim /etc/profile 

检查你的环境变量是否配置完毕,我这里是 3台云服务器都配置好了。

# zookeeper export ZOOKEEPER_HOME=/opt/servers/apache-zookeeper-3.8.4-bin export PATH=$PATH:$ZOOKEEPER_HOME/bin 

配置的结果大致如下:
在这里插入图片描述
记得刷新环境变量

source /etc/profile 

验证环境

如果你已经启动了ZooKeeper,那么进行下面的服务测试:

zkServer.sh status 

如果你出现下图的样子,你的ZK是没有问题的。
可以从下图中看到,我这台是 Follower 节点。主节点好像是 h122 节点。
在这里插入图片描述

Kafka

下载项目

我这里选择的是 2.7 的版本,你可以到 GitHub 或者 官方下载

https://github.com/apache/kafka/releases/tag/2.7.2 https://kafka.apache.org/downloads 

GitHub是源码,需要自己编译!!!
在这里插入图片描述

官方下载地址是编译的:
在这里插入图片描述

解压配置

下载好之后,上传到服务器上,或者直接在服务器上 wget 进行下载。

tar -zxvf kafka_2.12-2.7.2.tgz 

在这里插入图片描述
按照之前的规范,我们需要进行移动处理:

mv kafka_2.12-2.7.2 ../servers 

环境变量

vim /etc/profile 

写入如下的环境变量内容

# kafka export KAFKA_HOME=/opt/servers/kafka_2.12-2.7.2 export PATH=$PATH:$KAFKA_HOME/bin 

记得刷新环境变量
在这里插入图片描述

启动配置

Kafka是需要连接ZooKeeper的,所以我们需要修改Kafka的配置。

vim /opt/servers/kafka_2.12-2.7.2/config/server.properties 

ZK配置

修改 zookeeper.connet 这一行:

 

在这里插入图片描述

log配置

这里注意修改一下,同时记得把文件夹创建出来
在这里插入图片描述

启动服务

kafka-server-start.sh /opt/servers/kafka_2.12-2.7.2/config/server.properties 

在这里插入图片描述

相关内容

热门资讯

房卡必备教程“微信上玩炸金花详... 金花是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:44346008许多玩家在游戏中会购买房卡来享受...
安卓之父手机系统下载,引领未来... 你有没有听说最近安卓之父推出了一款全新的手机系统?没错,就是那个曾经创造了安卓系统的天才——安迪·鲁...
给大家讲解“微信炸金花如何买房... 微信炸金花是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:86909166许多玩家在游戏中会购买房卡...
给大家讲解“微信炸金花房卡在哪... 微信炸金花是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:86909166许多玩家在游戏中会购买房卡...
终于找到“购买斗牛金花房卡联系... 斗牛是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:160470940许多玩家在游戏中会购买房卡来享...
秒懂教程“斗牛房卡在哪购买,新... 新道游是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:160470940许多玩家在游戏中会购买房卡来...
安卓11系统怎么发短信,轻松掌... 你升级到安卓11系统后,是不是觉得手机更流畅了?不过,有没有发现发短信的方式好像有点不一样呢?别急,...
正版授权“金花大厅链接房卡怎么... 新世界牛牛是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:160470940许多玩家在游戏中会购买房...
一分钟推荐“可以自己开房炸金花... 金花是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:15984933许多玩家在游戏中会购买房卡来享受...
一分钟推荐“金花房卡购买平台推... 金花是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:86909166许多玩家在游戏中会购买房卡来享受...
正版授权“微信牛牛链接金花房卡... 牛牛是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:15984933许多玩家在游戏中会购买房卡来享受...
长安车载系统升级安卓,安卓新版... 你有没有发现,最近你的长安车好像变得聪明多了?没错,就是那个车载系统,它悄悄地进行了安卓升级,简直就...
终于找到“在哪里买炸金花房卡哪... 金花是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:86909166许多玩家在游戏中会购买房卡来享受...
正版授权“炸金花房卡链接怎么买... 金花是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:44346008许多玩家在游戏中会购买房卡来享受...
一分钟了解“微信链接金花房卡如... 新九九牛牛是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:86909166许多玩家在游戏中会购买房卡...
房卡必备教程“微信里面炸金花房... 金花是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:15984933许多玩家在游戏中会购买房卡来享受...
一分钟了解“牛牛金花房卡模式代... 毛豆大厅是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:15984933许多玩家在游戏中会购买房卡来...
ipadmini刷安卓系统教程... 你有没有想过给你的iPad mini来个变身大法,让它从苹果的怀抱跳到安卓的乐园呢?没错,今天就要手...
一分钟了解“金花房卡在哪里能弄... 卡卡大厅是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:44346008许多玩家在游戏中会购买房卡来...
一分钟了解“微信链接斗牛房卡充... 斗牛是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:15984933许多玩家在游戏中会购买房卡来享受...