Десятикласник Микита Теличко, який нині живе у Великій Британії, розробив інноваційну програму для вивчення мови жестів. Його проект використовує штучний інтелект, і він здатний аналізувати жести та допомагати користувачам у їх правильному відтворенні.
Програма для вивчення мови жестів
Микита родом із Донецька, а до створення свого винаходу його надихнув молодший брат Макар, який має порушення слуху та використовує слухові апарати.
Я подумав, як можна допомогти таким людям, як мій брат, і зрозумів, що вивчати жестову мову самостійно дуже складно. Адже ти можеш лише дивитися відео і намагатися повторити рухи, але без жодного зворотного зв’язку, – розповів винахідник.
Тому Микита вирішив створити систему, яка не лише показуватиме користувачеві потрібний жест, а й аналізуватиме, наскільки правильно він його виконав.
Проект базується на сучасних технологіях комп’ютерного зору та штучного інтелекту. Основні компоненти розробки:
- Розпізнавання жестів через вебкамеру за допомогою мови програмування Python та бібліотеки MediaPipe.
- Інтеграція бази даних WLASL, що містить еталонні жести американської жестової мови.
- Алгоритм аналізу правильності жесту, який вимірює відстань між фалангами пальців і оцінює точність виконання.
Програма в реальному часі порівнює жест користувача з еталонним зразком і показує рівень збігу. Ця технологія вже пройшла тестування в британській Асоціації глухих.
Микита розробляв свою систему під керівництвом Дар’ї Литвин, учительки інформатики Покровської школи №9, та Гліба Ступака, старшого викладача ДонНТУ. Наразі сервіс існує лише у вигляді прототипу на комп’ютері розробника, але хлопець планує перенести його в онлайн-формат, зробивши доступним для всіх охочих.
