Розробка і аналіз системи автоматизованого тестування програмних продуктів з використанням javascript (комплексна тема)

Abstract

Дана магістерська кваліфікаційна стосується розробки засобів автоматизованого тестування програмного забезпечення для підвищення його ефективності, економії часу, ресурсів і витрат. В даній роботі проаналізовано аналоги платформ тестування програмного забезпечення, визначено їх функціональні можливості. Розглянуто різні сучасні інструменти автоматизованого тестування програмного забезпечення. Розроблено програмне забезпечення для автоматизованого тестування веб-сайтів за допомогою двох типів тестування, – UI & API та API тестування. Окремо розроблено архітектуру автоматизованого фреймворку. Для тестування UI частини нашого веб-сайту, було використано інструмент Playwright, для API тестування вибрано інструмент SuperTest. Для запуску тестів використовуємо Jest приєднаними відповідними бібліотеками, котрі додаємо до package.json. Розроблено систему збору аналітичних даних по результатам проведених тестувань. Для цього використані тестові репорти двох типи тестів UI i API і для цього використовуються різні інструменти. Для API це окрема бібліотека яка на основі Jest_runner, котра агрегує дані і генерує репорт. Для UI тестування інструмент Playwright має хороший вбудований репорт. Для зручності додано ще один репорт – Allure, котрий агрерує всі дані і формує один загальний репорт. Досліджено ефективність інструментів автоматичного тестування з використанням автоматичної генерації тестових даних, що має важливе значення для підтримки модульного тестування. У кваліфікаційній роботі проведено порівняння добре відомих загальнодоступні інструменти генерації даних модульного тестування, – TestGen4j , JCrasher та JUB. Їх застосували до класів Java та оцінили ефективність на основі шкали значень їхніх мутації.

This master's qualification concerns the development of automated software testing tools to increase its efficiency, save time, resources and costs. In this paper, analogues of software testing platforms are analyzed, and their functionality is determined. Various modern automated software testing tools are considered. Developed software for automated website testing using two types of testing, UI & API and API testing. The architecture of the automated framework was developed separately. For testing the UI part of our website, the Playwright tool was used, and for the API testing, the SuperTest tool was chosen. To run the tests, we use Jest with the appropriate libraries attached, which we add to package.json. A system for collecting analytical data based on the results of the tests has been developed. For this, test reports of two types of UI and API tests are used and various tools are used for this. For the API, this is a separate library based on Jest_runner, which aggregates data and generates a report. For UI testing, the Playwright tool has a nice built-in report. For convenience, one more report has been added - Allure, which aggregates all data and forms one general report. The effectiveness of automatic testing tools using automatic generation of test data, which is important to support unit testing, is investigated. In the qualification work, a comparison of well-known publicly available data generation tools for unit testing, TestGen4j, JCrasher and JUB, was made. They were applied to Java classes and evaluated for performance based on a scale of their mutation values.