Category: Kafka

[Kafka] Install kafka and zookeeper cluster on kubernetes.

February 13, 2022April 3, 2022 nim No Comments

Mới đây mình research ra các cái kafka trên k8s khá tiệnhttps://docs.bitnami.com/tutorials/deploy-scalable-kafka-zookeeper-cluster-kubernetes/ Link helm:https://charts.bitnami.com/bitnami Nó gồm 1 phần: – Install zookeeper. – Install Kafka. 1) Install zookeeper values.yaml Nếu bạn có sài lọnghorn thì ko cần quan tâm đến pvc. Khoẻ re. 2) Install kafka on kubernetes. values.yaml Bạn để ý là mình lựu chọn…

Apache Kafka, Kafka

[Kafka] Console Consumer CLI and Consumers in Group

January 31, 2022April 7, 2023 nim No Comments

Giờ chúng ta tìm hiểu về việc read và write vào 1 topic trên kafka bằng CLI 1) Overview 1.1) Consumers 1.3) Consumer Groups What if too many consumers? giờ mình thực hiện mở 2 cửa sổ: – 1 consumer để lắng nghe topic– 1 producer để write data into topic 2) Practice 2.1) Consumer…

Apache Kafka, Kafka

[Kafka] Kafka Console Producer CLI.

January 31, 2022February 27, 2022 nim No Comments

Producers • Producers write data to topics (which is made of partitions) • Producers automatically know to which broker and partition to write to • In case of Broker failures, Producers will automatically recover • Producers can choose to receive acknowledgment of data writes: • acks=0: Producer won’t wait for acknowledgment (possible data loss) •…

Apache Kafka, Kafka, Log, Monitor & Tracing

[Kafka] Kafka Topics CLI

January 31, 2022October 7, 2022 nim No Comments

Ở bài này mình đi tìm hiểu về Kafka CLI, để chạy được kafka bạn tham khảo bài này nhé: 1) kafka-topics 1.1) what is the topic in Kfaka? Vậy Topic trong kafka là gì? Topics: a particular stream of data Similar to a table in a database (without all the constraints) You can have…

Read More “[Kafka] Kafka Topics CLI” »

Apache Kafka, BareMetal, Kafka

[Kafka-Zookeeper] Starting Kafka and Zookeeper

January 30, 2022February 27, 2022 nim No Comments

Hiện tại mình đang tìm hiểu về Kafka and ZookeeperBài này chỉ đơn thuần là start 2 service này lên thôi! Install Java 11 Giờ chúng ta download kafka. https://kafka.apache.org/downloads Bạn cần add cái này vào cuối fileexport PATH=/root/kafka/bin:$PATH sau đó chúng ta mở một cưa số khác,rồi gõ kafka sau đó nhấn tab, nếu…

Apache Kafka, BareMetal, Kafka