February 2022 – NimTechnology

[wordpress] Setuping WordPress becomes a private note web!

February 28, 2022February 28, 2022 nim No Comments

Nếu bạn muốn các user cần phải đăng nhập thì mới view được các bài postThì bạn cài plugin Force Login và active plugin là được! Tiếp theo chúng ta ngăn chăn việc show file ảnh một cách public.Nghĩa là để xem các file ảnh cũng cần phải login thì bạn cài thêm plugin như…

Docker

[Kafka-connect] Single Message Transform: lesson 12 – Community Transformations

February 27, 2022 nim No Comments

Apache Kafka ships with many Single Message Transformations included – but the great thing about it being an open API is that people can, and do, write their own transformations. Many of these are shared with the wider community, and in this final installment of the series I’m going to look at some of the transformations written by Jeremy…

Kafka Connect

[Kafka-connect] Single Message Transform: lesson 11 – Predicate and Filter – filtering topic name and content of the messages.

February 27, 2022 nim No Comments

1) Setup the components. Phần setup kafka, bạn có thể coi lại link này he:Setup the needing components of Kafka Bạn nhớ delele container cũ và run lại docker-compose nhé:docker-compose down -vdocker-compose up -d 2) Practice. reference link:https://github.com/confluentinc/demo-scene/blob/master/kafka-connect-single-message-transforms/day11.adoc Với connector source-voluble-datagen-day11-00 thì nó sẽ sinh ra 2 topic:– day11-sys01– day11-systemBOK bạn cần nhớ điều này…

Kafka Connect

[Kafka-connect] Single Message Transform: lesson 10 – ReplaceField – U can drop, keep and renamed field in kafka message.

February 27, 2022February 27, 2022 nim No Comments

1) Setup the components. Phần setup kafka, bạn có thể coi lại link này he:Setup the needing components of Kafka Bạn nhớ delele container cũ và run lại docker-compose nhé:docker-compose down -vdocker-compose up -d 2) Practice. reference link:https://github.com/confluentinc/demo-scene/blob/master/kafka-connect-single-message-transforms/day10.adoc Dropping fields in a sink connector: [Kafka-connect] Single Message Transform: lesson 5 MaskFieldỞ bài 5 chúng ta…

Kafka Connect

[Kafka-connect] Single Message Transform: lesson 9 – Cast

February 27, 2022February 27, 2022 nim No Comments

Bài này chúng ta sẽ chỉ custom type data khi nào source connector 1) Setup the components. Phần setup kafka, bạn có thể coi lại link này he:Setup the needing components of Kafka Bạn nhớ delele container cũ và run lại docker-compose nhé:docker-compose down -vdocker-compose up -d 2) Practice. reference link:https://github.com/confluentinc/demo-scene/blob/master/kafka-connect-single-message-transforms/day9.adoc Bạn thấy kết quả…

Apache Kafka, Kafka Connect

[Kafka-connect] Single Message Transform: lesson 8 – TimestampConverter – convert the type of the fields from string to timestamp or date,…

February 26, 2022February 27, 2022 nim No Comments

1) Setup the components. Phần setup kafka, bạn có thể coi lại link này he:Setup the needing components of Kafka Bạn nhớ delele container cũ và run lại docker-compose nhé:docker-compose down -vdocker-compose up -d 2) Practice. reference link:https://github.com/confluentinc/demo-scene/blob/master/kafka-connect-single-message-transforms/day8.adoc Tạo the data generatorhttps://www.confluent.io/hub/mdrogalis/voluble Giờ chúng ta kiểm tra data trong topic và chính xác là field:…

Apache Kafka, Kafka Connect

[Kafka-connect] Single Message Transform: lesson 7 – TimeStampRouter and MessageTimestampRouter – Custom format topic name with timestamp

February 26, 2022February 26, 2022 nim No Comments

Bài này thì anh Tây chỉ cánh chỉnh topic name trong source và table name trong sink bằng cách kêt với timestamp. https://github.com/confluentinc/demo-scene/blob/master/kafka-connect-single-message-transforms/day7.adoc 1) Setup the components. Phần setup kafka, bạn có thể coi lại link này he:Setup the needing components of Kafka Bạn nhớ delele container cũ và run lại docker-compose nhé:docker-compose down -vdocker-compose…

Apache Kafka

[Kafka-connect] Single Message Transform: lesson 6 InsertField – Insert fields using attributes in the process data.

February 26, 2022February 27, 2022 nim No Comments

1) Setup the components. Phần setup kafka, bạn có thể coi lại link này he:Setup the needing components of Kafka Bạn nhớ delele container cũ và run lại docker-compose nhé:docker-compose down -vdocker-compose up -d 2) Practice. Bài này kiểu như bạn thêm số field mà trong quá trình kafka-connect stream data.Ví dụ trong stream data…

Apache Kafka, Kafka Connect

[Kafka-connect] Single Message Transform: lesson 5 MaskField – Cover the sensitive data.

February 26, 2022February 27, 2022 nim No Comments

1) Setup the components. Phần setup kafka, bạn có thể coi lại link này he:Setup the needing components of Kafka Bạn nhớ delele container cũ và run lại docker-compose nhé:docker-compose down -vdocker-compose up -d 2) Practice. Tạo the data generatorhttps://www.confluent.io/hub/mdrogalis/voluble Mình đặt ra một trường hợp, Bạn sử dụng kafka-connect để stream table trong database….

Apache Kafka, Kafka Connect

[Kafka-connect] Single Message Transform: lesson 4 – RegexRouter – change topic name.

February 24, 2022February 26, 2022 nim No Comments

1) Setup the components. Phần setup kafka, bạn có thể coi lại link này he:Setup the needing components of Kafka Bạn nhớ delele container cũ và run lại docker-compose nhé:docker-compose down -vdocker-compose up -d 2) Practice. Tạo the data generatorhttps://www.confluent.io/hub/mdrogalis/voluble Giờ bạn thấy nó tạo ra 1 topic: day4-transactions Giờ ta tạo 1 sink connector:…

Apache Kafka