400-650-7353
您所在的位置：首頁 > IT干貨資料 > 大數(shù)據(jù) > 【大數(shù)據(jù)基礎(chǔ)知識】Kafka集群安裝與和測試如何操作

【大數(shù)據(jù)基礎(chǔ)知識】Kafka集群安裝與和測試如何操作

  • 發(fā)布： 大數(shù)據(jù)培訓(xùn)
  • 來源：大數(shù)據(jù)干貨資料
  • 2020-04-06 22:38:28
  • 閱讀()
  • 分享
  • 手機(jī)端入口

一、 安裝JDK &配置JAVA_HOME

JDK安裝和JAVA_HOME配置，大家都應(yīng)該很熟悉了，我們在此不再贅述。

二、 安裝Zookeeper

參照Zookeeper官網(wǎng)搭建一個(gè)ZK集群， 并啟動(dòng)ZK集群。

三、 解壓Kafka安裝包

1. 修改配置文件config/server.properties

vi server.properties

broker.id=0 //集群中唯一id,依次增長：0、1、2、3、4

log.dirs=/root/kafkaData/ // 設(shè)置Kafka的消息數(shù)據(jù)存儲路徑

zookeeper.connect=node1:2181,node2:2181,node3:2181 //zookeeperServers列表，節(jié)點(diǎn)間以逗號分開

delete.topic.enable=true

listeners=PLAINTEXT:/node1:9092

log.dirs=/root/kafkaData/

num.partitions=3

# 往其他節(jié)點(diǎn)分發(fā)安裝包

for i in 2 3 ; do scp -r kafka_2.11-0.10.2.1/node$i:$PWD ;done

在其它幾臺節(jié)點(diǎn)上，分別修改此配置文件：broker.id依次增長。

【大數(shù)據(jù)基礎(chǔ)知識】大數(shù)據(jù)之Kafka集群安裝與測試

2. 啟動(dòng)Kafka

啟動(dòng)kafka之前，必須要保證在每個(gè)節(jié)點(diǎn)上zookeeper都是啟動(dòng)的。

在每個(gè)節(jié)點(diǎn)上啟動(dòng)Kafka：

bin/kafka-server-start.sh [-daemon] config/server.properties

3. 集群測試

(1)進(jìn)入kafka根目錄，創(chuàng)建test主題(topic)

bin/kafka-topics.sh --create --zookeeper node1:2181,node2:2181,node3:2181 --replication-factor 3 --partitions 1 --topic test

(2)顯示已創(chuàng)建的topic列表

bin/kafka-topics.sh --list --zookeeper node1:2181

文章“【大數(shù)據(jù)基礎(chǔ)知識】Kafka集群安裝與和測試如何操作”已幫助 人

>>本文地址：http://liujunjsxg.cn/zhuanye/2020/48582.html

THE END  

聲明:本站稿件版權(quán)均屬中公教育優(yōu)就業(yè)所有，未經(jīng)許可不得擅自轉(zhuǎn)載。

1 您的年齡

2 您的學(xué)歷

3 您更想做哪個(gè)方向的工作？

獲取測試結(jié)果
  • 大前端大前端
  • 大數(shù)據(jù)大數(shù)據(jù)
  • 互聯(lián)網(wǎng)營銷互聯(lián)網(wǎng)營銷
  • JavaJava
  • Linux云計(jì)算Linux
  • Python+人工智能Python
  • 嵌入式物聯(lián)網(wǎng)嵌入式
  • 全域電商運(yùn)營全域電商運(yùn)營
  • 軟件測試軟件測試
  • 室內(nèi)設(shè)計(jì)室內(nèi)設(shè)計(jì)
  • 平面設(shè)計(jì)平面設(shè)計(jì)
  • 電商設(shè)計(jì)電商設(shè)計(jì)
  • 網(wǎng)頁設(shè)計(jì)網(wǎng)頁設(shè)計(jì)
  • 全鏈路UI/UE設(shè)計(jì)UI設(shè)計(jì)
  • VR/AR游戲開發(fā)VR/AR
  • 網(wǎng)絡(luò)安全網(wǎng)絡(luò)安全
  • 新媒體與短視頻運(yùn)營新媒體
  • 直播帶貨直播帶貨
  • 智能機(jī)器人軟件開發(fā)智能機(jī)器人
 

快速通道fast track

近期開班時(shí)間TIME