■ はじめに

仕事で、Apache Kafka が都度都度でてきており、
色々と調べている。
今回は、環境構築をメモしておく。

Apache Kafka ～環境構築 / Linux編～
https://dk521123.hatenablog.com/entry/2024/02/05/153202

【１】構築手順 - 通常版
　０）前提条件
　１）Kafka のインストール
【２】モジュール起動
　１）zookeeper起動
　２）Kafka broker起動
【３】Quick Start
　１）トピックを作成 & 確認
　２）メッセージを送信
　３）メッセージを受信

【１】構築手順 - 通常版

* すごーい、簡単

０）前提条件

[1] tgz を解凍できる環境
 => Windows の場合、 7zip などをインストールしているといい

https://sevenzip.osdn.jp/download.html

[2] JDK

https://dk521123.hatenablog.com/entry/2023/03/10/193805

１）Kafka のインストール

* 以下の公式サイトから、ダウンロードして任意の場所に解凍する
 => 今回は、v3.4.0 - Scala 2.13 版「kafka_2.13-3.4.0.tgz」をダウンロード

https://kafka.apache.org/downloads

【２】モジュール起動

１）zookeeper起動

Windowsの場合

# Start the ZooKeeper service
.\bin\windows\zookeeper-server-start.bat config\zookeeper.properties

２）Kafka broker起動

Windowsの場合

# Start the Kafka broker service
.\bin\windows\kafka-server-start.bat config\server.properties

【３】Quick Start

* 公式ドキュメントのQuick Startをやってみる
 => Step1-2は、既に上記で行っているので、Step3~Step5。

https://kafka.apache.org/quickstart
日本語版？
http://mogile.web.fc2.com/kafka/kafka200/quickstart.html

１）トピックを作成 & 確認

Windowsの場合

# STEP 3: CREATE A TOPIC TO STORE YOUR EVENTS
bin\windows\kafka-topics.bat --create --topic quickstart-events --bootstrap-server localhost:9092
# 確認
bin\windows\kafka-topics.bat --describe --topic quickstart-events --bootstrap-server localhost:9092

２）メッセージを送信

Windowsの場合

# STEP 4: WRITE SOME EVENTS INTO THE TOPIC
bin\windows\kafka-console-producer.bat --topic quickstart-events --bootstrap-server localhost:9092
>This is my first event << イベントを送るために、←をタイプする（1回目）
>This is my second event << イベントを送るために、←をタイプする（２回目）
>バッチ ジョブを終了しますか (Y/N)? Y << Ctrl+Cで終わらせる

３）メッセージを受信

Windowsの場合

# STEP 5: READ THE EVENTS
bin\windows\kafka-console-consumer.bat --topic quickstart-events --from-beginning --bootstrap-server localhost:9092
This is my first event << 受信できた
This is my second event << 受信できた

参考文献

http://java-study.blog.jp/archives/1075373530.html

プログラムの超個人的なメモ

Memo for Programming.

【Kafka】Apache Kafka ～環境構築 / Windows編～

■ はじめに

目次

【１】構築手順 - 通常版

０）前提条件

１）Kafka のインストール

【２】モジュール起動

１）zookeeper起動

２）Kafka broker起動

【３】Quick Start

１）トピックを作成 & 確認

２）メッセージを送信

３）メッセージを受信

参考文献

関連記事