Розробка серверної системи централізованого збору журналів подій

Abstract

Кваліфікаційна робота присвячена розробці серверної системи централізованого збору журналів подій. Метою дослідження було проєктування, реалізація та тестування програмного рішення для приймання, зберігання, перегляду, фільтрації та статистичної обробки логів від різних сервісів. У першому розділі проаналізовано роль журналів подій у роботі серверних систем, підходи до централізованого збору та зберігання логів, а також існуючі програмні рішення для моніторингу й аналізу журналів. У другому розділі реалізовано серверну систему на основі FastAPI з використанням Redis як основного сховища даних. Було створено REST API для приймання одного журналу або пакета журналів, перегляду подій, пошуку за рівнем критичності, назвою сервісу та часовим проміжком. У третьому розділі проведено тестування роботи системи, перевірено приймання, зберігання, фільтрацію, архівування, формування статистики та отримання останніх журналів подій. Об’єкт дослідження: процеси централізованого збору, зберігання та обробки журналів подій у сучасних серверних інформаційних системах. Предмет дослідження: методи, засоби та програмні механізми приймання, збереження, індексації, фільтрації, пошуку, архівування та статистичної обробки журналів подій із використанням FastAPI, Redis і файлового сховища.

The qualification paper is dedicated to the development of a server-side centralized event log collection system. The purpose of the research was to design, implement, and test a software solution for receiving, storing, viewing, filtering, and statistically processing logs from different services. The first section analyzes the role of event logs in server systems, approaches to centralized log collection and storage, as well as existing software solutions for log monitoring and analysis. The second section presents the implementation of a server system based on FastAPI using Redis as the main data storage. A REST API was implemented for receiving a single log event or a batch of log events, viewing events, and searching by severity level, service name, and time period. The third section describes system testing, including verification of log receiving, storage, filtering, archiving, statistics generation, and retrieval of the latest event logs. Object of research: processes of centralized collection, storage, and processing of event logs in modern server information systems. Subject of research: methods, tools, and software mechanisms for receiving, storing, indexing, filtering, searching, archiving, and statistical processing of event logs using FastAPI, Redis, and file storage.