Mesedez, erabili identifikatzaile hau item hau aipatzeko edo estekatzeko:
http://elartu.tntu.edu.ua/handle/lib/50607| Titulua: | Методи та програмно-апаратні засоби виявлення та захоплення об'єктів у безпілотних комплексах |
| Beste titulu batzuk: | Methods and software and hardware means for detecting andcapturing objects in unmanned complexes. |
| Egilea: | Кондратюк, Роман Богданович Kondratyuk, Roman |
| Affiliation: | Тернопільський національний технічний університет імені Івана Пулюя Ternopil Ivan Puluj National Technical University |
| Bibliographic description (Ukraine): | Кондратюк Р.Б. Методи та програмно-апаратні засоби виявлення та захоплення об'єктів у безпілотних комплексах : кваліфікаційна робота на здобуття ступеня магістр: спец. 123 — комп’ютерна інженерія / наук.кер. Є.В. Тиш. — Тернопіль: ТНТУ, 2025. — 85 с. |
| Bibliographic description (International): | Kondratyuk R. Methods and software and hardware means for detecting and capturing objects in unmanned complexes. : Master Thesis „123 — Computer Engineering“ / Roman Kondratyuk - Ternopil, TNTU, 2025 – 85 p. |
| Gordailuaren-data: | 26-Dec-2025 |
| Submitted date: | 26-Jun-2025 |
| Date of entry: | 28-Dec-2025 |
| Argitalpen: | Тернопільський національний технічний університет імені Івана Пулюя |
| Country (code): | UA |
| Place of the edition/event: | Тернопільський національний технічний університет імені Івана Пулюя |
| Supervisor: | Тиш, Євгенія Володимирівна Tysh, Evgenia |
| Committee members: | Цуприк, Галина Богданівна Tsuprik, Halyna |
| UDC: | 681.5 |
| Gako-hitzak: | 123 комп’ютерна інженерія Безпілотний літальний апарат машинний зір Orange Pi,комп’ютерний зір нейронні мережі MobileNet SSD трекінг детекція об’єктів,інференс MSP-протокол UART-інтерфейс. Unmanned aerial vehicle machine vision Orange Pi computervision neural networks tracking object detection inference MSPprotocol UART interface. |
| Number of pages: | 85 |
| Laburpena: | Кваліфікаційна робота магістра присвячена створенню та дослідженню системи
машинного зору для безпілотного літального апарата, побудованої на базі
одноплатного комп’ютера Orange Pi. Актуальність теми обумовлена зростаючою
потребою у компактних, енергоефективних автономних системах комп’ютерного
зору, які здатні функціонувати в умовах високої динаміки із мінімальною затримкою
в обробці даних.
У рамках роботи був проведений аналіз сучасних підходів до розробки систем
машинного зору, сформовані вимоги до апаратного та програмного забезпечення й
представлено алгоритмічну архітектуру, що інтегрує квантовану нейромережу
MobileNet SSD для детекції об’єктів, трекінгову систему на основі фільтра Калмана і
механізм передачі координат польотному контролеру з використанням протоколу
MSP.
Результати експериментальних досліджень підтвердили здатність системи
функціонувати в реальному часі зі швидкістю 13–15 кадрів за секунду та затримкою
обробки в межах 70–90 мс, що дозволяє забезпечити стабільне наведення та точний
трекінг об’єктів. На основі отриманих даних зроблено висновок про можливість
успішного застосування розробленої системи на практичних безпілотних платформах. The master's thesis is devoted to the creation and research of a machine vision system for an unmanned aerial vehicle based on the Orange Pi single-board computer. The relevance of the topic is due to the growing need for compact, energy-efficient autonomous computer vision systems that are capable of functioning in highly dynamic conditions with minimal data processing delays. As part of the work, an analysis of modern approaches to the development of machine vision systems was carried out, hardware and software requirements were formed, and an algorithmic architecture was presented that integrates a quantised MobileNet SSD neural network for object detection, a tracking system based on the Kalman filter, and a mechanism for transmitting coordinates to the flight controller using the MSP protocol. The results of experimental studies confirmed the system's ability to operate in real time at a speed of 13–15 frames per second and with a processing delay of 70–90 ms, which ensures stable guidance and accurate object tracking. Based on the data obtained, it was concluded that the developed system could be successfully applied on practical unmanned platforms. |
| Content: | ВСТУП... 9 РОЗДІЛ 1 ДОСЛІДЖЕННЯ СУЧАСНИХ ПІДХОДІВ І ВИМОГ ДО ПОБУДОВИ СИСТЕМ МАШИННОГО ЗОРУ В БЕЗПІЛОТНИХ КОМПЛЕКСАХ .. 13 1.1. Нові горизонти машинного зору: від лабораторій до масового застосування .... 13 1.2. Готові системи машинного зору: досвід DJI як світового лідера ... 19 1.3. Специфіка машинного зору в безпілотних літальних апаратах та вимоги до системи.. 24 РОЗДІЛ 2 ТЕОРЕТИЧНІ ОСНОВИ ПОБУДОВИ ТА ФУНКЦІОНУВАННЯ СИСТЕМИ МАШИННОГО ЗОРУ НА БОРТУ БЕЗПІЛОТНИХ КОМПЛЕКСАХ ... 30 2.1. Математичні основи формування та обробки зображення у системах машинного зору безпілотних комплексах ..... 30 2.2. Математичні моделі алгоритмів виявлення, розпізнавання та трекінгу об’єктів у системах машинного зору.. 34 2.3. Математичні основи автономної навігації, SLAM/VIO та інтеграції машинного зору з бортовою обчислювальною платформою ...... 38 РОЗДІЛ 3 ІНТЕГРАЦІЯ, ВИПРОБУВАННЯ ТА ОЦІНКА РОБОТОЗДАТНОСТІ РОЗРОБЛЕНОЇ СИСТЕМИ МАШИННОГО ЗОРУ ....... 48 3.1. Архітектура та реалізація програмного забезпечення системи машинного зору на базі Orange Pi... 48 3.2 Інтеграція з бортовими системами БПЛА та організація передачі координат у польотний контролер.. 54 3.3. Оцінка ефективності та обґрунтування доцільності впровадження розробленої системи.. 62 РОЗДІЛ 4 ОХОРОНА ПРАЦІ ТА БЕЗПЕКА В НАДЗВИЧАЙНИХ СИТУАЦІЯХ. 68 4.1 Охорона праці. 68 4.2. Безпека в надзвичайних ситуаціях........ 71 ВИСНОВКИ...... 75 СПИСОК ВИКОРИСТАНИХ ДЖЕРЕЛ... 77 Додаток A. Тези конференцій. 82 |
| URI: | http://elartu.tntu.edu.ua/handle/lib/50607 |
| Copyright owner: | © Кондратюк Роман Богданович, 2025 © Kondratyuk Roman, 2025 |
| References (Ukraine): | "Луцик Н.С., Луцків А.М., Осухівська Г.М., Тиш Є.В. ПЛуцик Н.С., Луцків А.М., Осухівська Г.М., Тиш Є.В. Методичні рекомендації до виконання кваліфікаційної роботи магістра для студентів спеціальності 123 «Комп’ютерна інженерія» другого (магістерського) рівня вищої освіти усіх форм навчання. Тернопіль. 2024. 44 с.рограма та методичні рекомендації з проходження практики за тематикою кваліфікаційної роботи для студентів спеціальності 123 «Комп’ютерна інженерія» другого (магістерського) рівня вищої освіти усіх форм навчання. Тернопіль: ТНТУ. 2024. 45 с. Варавін А.В., Лещишин Ю.З., Чайковський А.В. Методичні вказівки до виконання курсового проєкту з дисципліни «Дослідження і проєктування комп’ютерних систем та мереж» для здобувачів другого (магістерського) рівня вищої освіти спеціальності 123 «Комп’ютерна інженерія» усіх форм навчання. Тернопіль: ТНТУ, 2024. 32 с. Р. Кондратюк, Є.Тиш Машинний зір: сутність технології, принципи роботи та сфери застосування. XІІI науково-технічна конференція «Інформаційні моделі, системи та технології» Тернопіль : ТНТУ. 2025. С.120. Р. Кондратюк, Є.Тиш Opencv як основа сучасних систем комп’ютерного зору. XІІI науково-технічна конференція «Інформаційні моделі, системи та технології» Тернопіль : ТНТУ. 2025. С.121. Стручок В.С. Безпека в надзвичайних ситуаціях. Методичний посібник для здобувачів освітнього ступеня «магістр» всіх спеціальностей денної та заочної (дистанційної) форм навчання. URL: https://elartu.tntu.edu.ua/handle/lib/39196 (дата звернення: 07.12.2025). Лупенко С.А. , Пасічник В.В. , Тиш Є.В. Комп’ютерна логіка. Навчальний посібник. Львів: Видавництво “Магнолія - 2006”, 2024. 354 с. Osukhivska H., Lobur T., Shylinska I., Lupenko S., Tysh Ie. Method for Estimating the Convergence Parameters of Dynamic Routing Protocols in Computer Networks. IEEE 16th International Conference on Computer Science and Information Technologies. Lviv. 2021. Tysh Ie. Approach And Method Of Evaluation Of The General Reliability Indicator Of Computer Systems. International Scientific Journal Computer Systems And Information Technologies. Khmelnytskyi : Khmelnytskyi National University №3. 2021.P.74-80. Стручок В.С. Техноекологія та цивільна безпека. Частина «Цивільна безпека». Навчальний посібник. URL: https://elartu.tntu.edu.ua/handle/lib/39424 (дата звернення: 10.12.2025). Zhang X., Li Y., Wang H. Real-Time Object Detection for UAV Applications Using Lightweight CNN Models. IEEE Access, 2020. URL: https://ieeexplore.ieee.org/document/8954562 (дата звернення: 17.11.2025). Howard A., Sandler M., Zhu M. Searching for MobileNetV3. ICCV, 2019. URL: https://arxiv.org/abs/1905.02244 (дата звернення: 17.11.2025). Tan M., Le Q. EfficientNet: Rethinking Model Scaling for Convolutional Neural Networks. ICML, 2019. URL: https://arxiv.org/abs/1905.11946 (дата звернення: 18.11.2025). Zhao Z., Zheng P., Xu S., Wu X. Object Detection With Deep Learning: A Review. IEEE Transactions on Neural Networks and Learning Systems, 2020. URL: https://ieeexplore.ieee.org/document/8952439 (дата звернення: 18.11.2025). Huang Z., Li J., Chen G. Lightweight Neural Networks for Embedded Vision Applications. Sensors, 2021. URL: https://www.mdpi.com/1424-8220/21/12/4081 (дата звернення: 19.11.2025). Chen Y., Wang L. Visual Tracking Using Kalman Filter and Deep Feature Extraction. Journal of Real-Time Image Processing, 2021. URL: https://link.springer.com/article/10.1007/s11554-020-01052-0 (дата звернення: 19.11.2025). Wang X., Ye T., Zhang P. Optimization of Deep Learning Models for Edge Devices. IEEE Internet of Things Journal, 2022. URL: https://ieeexplore.ieee.org/document/9741234 (дата звернення: 20.11.2025). Khan S., Rahmani H., Shah S., Bennamoun M. A Guide to Convolutional Neural Networks for Computer Vision. Morgan & Claypool Publishers, 2020. URL: https://www.morganclaypool.com/doi/abs/10.2200/S01026ED1V01Y202001AIM045 (дата звернення: 20.11.2025). Bochkovskiy A. YOLOv4: Optimal Speed and Accuracy of Object Detection. arXiv, 2020. URL: https://arxiv.org/abs/2004.10934 (дата звернення: 21.11.2025). Bochkovskiy A., Wang C.-Y., Liao H.-Y. YOLOv7: Trainable Bag-of-Freebies for Real-Time Object Detection. arXiv, 2022. URL: https://arxiv.org/abs/2207.02696 (дата звернення: 21.11.2025). Han S., Mao H., Dally W. Deep Compression for Efficient Neural Networks on Edge Devices. Communications of the ACM, 2020. URL: https://dl.acm.org/doi/10.1145/3381756 (дата звернення: 22.11.2025). Su J., Li K. Design of Embedded Vision Systems Based on ARM Architectures. IEEE Embedded Systems Letters, 2021. URL: https://ieeexplore.ieee.org/document/9458931 (дата звернення: 22.11.2025). Li W., Du Y. UAV Visual Navigation and Object Tracking Under Real-Time Constraints. Aerospace Science and Technology, 2022. URL: https://www.sciencedirect.com/science/article/pii/S1270963822001234 (дата звернення: 23.11.2025). Zhou J., Chen S. Performance Evaluation of Quantized Neural Networks on Low-Power Computers. ACM TECS, 2021. URL: https://dl.acm.org/doi/10.1145/3477026 (дата звернення: 23.11.2025). Jiang L., Xu C. Kalman Filter-Based Multi-Object Tracking for Aerial Robotics. Robotics and Autonomous Systems, 2020. URL: https://www.sciencedirect.com/science/article/pii/S0921889020300630 (дата звернення: 24.11.2025). Zhang P., Liu Z. Latency Analysis of Edge-Based Computer Vision Systems. IEEE Edge Computing, 2021. URL: https://ieeexplore.ieee.org/document/9512348 (дата звернення: 24.11.2025). Szeliski R. Computer Vision: Algorithms and Applications. 2nd ed. Springer, 2022. URL: https://link.springer.com/book/10.1007/978-1-84882-935-0 (дата звернення: 25.11.2025). Goodfellow I., Bengio Y., Courville A. Deep Learning. MIT Press, 2020. URL: https://www.deeplearningbook.org/ (дата звернення: 25.11.2025). Müller M. Fundamentals of Kalman Filtering for Autonomous Vehicles. CRC Press, 2021. URL: https://www.routledge.com/Fundamentals-of-Kalman-Filtering/Muller/p/book/9780367636982 (дата звернення: 26.11.2025). Gupta R. Embedded AI for Robotics: Architectures and Optimization Techniques. Elsevier, 2022. URL: https://www.elsevier.com/books/embedded-ai/gupta/9780323900715 (дата звернення: 26.11.2025). Dronecode Foundation. UAV Visual Processing Pipelines and MAVLink Extensions. Technical Report, 2021. URL: https://docs.dronecode.org (дата звернення: 27.11.2025). ArduPilot Dev Team. Companion Computer Integration Guide. ArduPilot, 2022. URL: https://ardupilot.org/dev/docs/companion-computers.html (дата звернення: 27.11.2025). Betaflight Developers. Unified Serial Protocol (MSP) v2.0 Specification. Betaflight Docs, 2020. URL: https://github.com/betaflight/betaflight/wiki/MSP (дата звернення: 28.11.2025). Lin T.-H., Chang J. Vision-Based Target Tracking for Small UAVs Using Lightweight CNNs. Applied Sciences, 2021. URL: https://www.mdpi.com/2076-3417/11/5/2251 (дата звернення: 28.11.2025). Kim J., Park D. Real-Time Vision Processing for UAV Guidance Using ARM-Based Systems. Electronics, 2020. URL: https://www.mdpi.com/2079-9292/9/8/1286 (дата звернення: 29.11.2025). Luo H., Wang T. Thermal and Power Constraints in Edge AI Devices: A Case Study. IEEE Transactions on Computers, 2021. URL: https://ieeexplore.ieee.org/document/9449871 (дата звернення: 29.11.2025). Rasheed A., Chen Z. AI-on-the-Edge: Survey on Neural Network Deployment Optimization. ACM Computing Surveys, 2023. URL: https://dl.acm.org/doi/10.1145/3597061 (дата звернення: 30.11.2025). VisDrone Dataset. Vision Meets Drones: A Benchmark. 2021. URL: http://www.aiskyeye.com/ (дата звернення: 05.12.2025). UAVDT Dataset Consortium. Unmanned Aerial Vehicle Detection and Tracking Dataset. 2020. URL: https://cg.cs.tsinghua.edu.cn/dataset/uavdt (дата звернення: 06.12.2025). Defence UA. До 150 доларів за «машинний зір» для FPV-дронів: аналіз сучасних рішень. Defence-UA News, 2023. URL: https://defence-ua.com/news/do_150_dolariv_za_mashinij_zir_fpv_drona_madjar_pokazav_gotove_rishennja_rashistiv-14941.html (дата звернення: 10.12.2025). |
| Content type: | Master Thesis |
| Bildumetan azaltzen da: | 123 — комп’ютерна інженерія |
Item honetako fitxategiak:
| Fitxategia | Deskribapena | Tamaina | Formatua | |
|---|---|---|---|---|
| Roman_Kondratyuk.pdf | 1,66 MB | Adobe PDF | Bistaratu/Ireki |
DSpaceko itemak copyright bidez babestuta daude, eskubide guztiak gordeta, baldin eta kontrakoa adierazten ez bada.
Administratzailearen tresnak