Розгортання платформи Apache Kafka для аналізу даних

Abstract

Кваліфікаційна робота присвячена розгортанню та практичному використанню сервісу потокової обробки повідомлень Apache Kafka. В першому розділі кваліфікаційної роботи виконано огляд основних принципів потокового оброблення повідомлень та його прикладному застосуванню для збору даних. В другому розділі розглянуто можливі використання сервісу Apache Kafka на прикладі реального проєкту. Об’єкт дослідження: процес потокового оброблення повідомлень. Предмет дослідження: сервіс Apache Kafka як засіб потокового оброблення даних. Мета роботи: описати процес розгортання сервісу Apache Kafka для задач збору даних на основі системи потокового оброблення повідомлень та навести приклад застосування сервісу. Qualification work is devoted to the deployment and practical use of the Apache Kafka message streaming service. The first section of the qualification work reviews the basic principles of streaming message processing and its application to data collection. The second section discusses the possible uses of the Apache Kafka service on the example of a real project. Object of research: the process of streaming messages. Subject of research: Apache Kafka service as a means of data streaming. Purpose: to describe the process of deploying the Apache Kafka service for data collection tasks based on the instant messaging system and give an example of using the service.