Комп'ютеризована система керування IoT-пристроями розумного будинку за допомогою жестів рук

Abstract

Кваліфікаційна робота присвячена розробці системи управління ІоТ-девайсами розумного будинку, якою можна керувати за допомогою жестів рук, застосовуючи камеру Android -смартфона та розробці власного IoT девайсу для цієї системи. Проведено огляд альтернативних технічних рішень, описано роботу розроблюваної системи. Проаналізовано програмні засоби для зчитування жестів у відеопотоці. Наведено способи організації взаємодії клієнта та IoT пристроїв. Спроектована загальна архітектура комп’ютеризованої системи, включно із архітектурами Android застосунку та IoT девайсу. Реалізовано Android клієнт із користувацьким інтерфейсом, можливістю розпізнавання жестів із камери смартфону, налаштуванням та управлінням IoT пристроєм. Здійснено реалізацію IoT девайсу, розроблено "розумну" розетку, проведена її програмна реалізація. Наведено будову системи із відображенням її основних компонентів. Виконана оцінка ефективності програмного рішення. За результатами проведених експериментів можна стверджувати, що розроблена система може бути успішно використана для керування IoT пристроями розумного будинку.

The qualification thesis deals with the development of a control system for IoT devices of a smart home, which can be controlled using hand gestures, using the camera of an Android smartphone, and the development of its own IoT device for this system. An overview of alternative technical solutions was carried out, the operation of the developed system was described. Software tools for reading gestures in a video stream are analyzed. Ways of organizing interaction between the client and IoT devices are given. Designed the overall architecture of the computerized system, including the architectures of Android application and IoT device. An Android client with a user interface, the ability to recognize gestures from a smartphone camera, setting up and controlling an IoT device has been implemented. An IoT device was implemented, a "smart" outlet was developed, and its software implementation was carried out. The structure of the system is given with a display of its main components. The evaluation of the effectiveness of the software solution was carried out. Based on the results of the experiments, it can be claimed that the developed system can be successfully used to control IoT devices of a smart home.