Школяр з Покровська розробив ШІ-словник для вивчення жестової мови. Як працює винахід


Учень Покровської школи № 9, десятикласник Микита Теличко, який зараз перебуває у Великій Британії, розробив комп’ютерний -словник для вивчення жестової мови, здобувши золоту відзнаку на конкурсі інноваційних проєктів Малої академії наук. 

Розробка допомагає порозумітися з людьми, що мають порушення слуху та швидко опанувати жестову мову, пише Суспільне. 

За словами Микити Теличка, на розробку його надихнув рідний брат, який користується слуховим апаратом.

«Мій молодший брат Макар, якому 12 років, має особливості — він не чує дуже високих частот і тому використовує слухові апарати. Я подумав: як можна допомогти таким людям, як Макар. Проаналізував і зрозумів, що дуже складно вивчати жестові мови», — розказує Микита.

Торік завдяки винайденню інтерактивного словника з використанням комп’ютерного зору і відкритих баз у фінальному етапі Всеукраїнського конкурсу молодіжних науково-технічних проєктів «InventorUA» він виборов перше місце в номінації «Стійкий життєвий простір».

Зі слів Микити, ще 7-8 років він почав захоплюватися робототехнікою та  айті-технологіями. 

«Захотілося вивчити жестову мову, наприклад, чи треба — які є зараз рішення. Ти просто заходиш на сайт, пишеш слово, знаходиш відео — як це слово показати. І ти, намагаєшся його відтворити, але ніякого зворотного зв’язку не отримуєш. Тобто ти просто намагаєшся повторити, але не розумієш, чи правильно показуєш. Мій проєкт допомагає саме перевірити, чи зможуть тебе зрозуміти, чи правильно ти показуєш. А ще її так швидше вивчити, бо коли ти сам показуєш, то краще запам’ятовуєш», — пояснює Микита Теличко.

Ключовими компонентами рішення в його проєкті є використання Python та MediaPipe для розпізнавання жестів, інтеграція бази даних WLASL та розробка інтуїтивного користувацького інтерфейсу. 

Прототип словника учня має систему розпізнавання жестів через вебкамеру, функцію порівняння з еталонними зразками та візуальне відображення схожості виконаного жесту з еталонним, розповідає учителька інформатики Покровської школи № 9 і науковий керівник Микити Дар’я Литвин. 

«Микита зробив це таким чином, щоб за допомогою штучного інтелекту розпізнавати рухи — камера зчитує рухи, співставляє з оригінальним зображенням та виводить на екран кількість відсотків співпадіння. 100% — це ідеальний збіг, 90-95% — вже молодець. Якщо ж показує 20-30% — треба повторювати, щоб підвищити свій рівень», — розповіла Дар’я Литвин.

Винахід юнака протестували в Асоціації глухих в одному з міст Великої Британії. За їхніми відгуками, каже Микита, він замислився над тим, щоб у свою розробку додати більше мов.

«Сказали — проєкт цікавий. Хочу додати більше мов, зокрема британську. Американська і британська жестові мови сильно відрізняються, тобто прям кардинально», — зазначає Микита.

За словами Дар’ї Литвин, Микиту Теличка запросили в національну збірну представляти Україну на міжнародних конкурсах.

«Це вже стартап, там є, що доробляти, але великий обсяг роботи зроблений і він вже запланував, що вдосконалюватиме. Тільки-но з’явиться якась міжнародна виставка або конкурс і Микитин проєкт підпадатиме під цю категорію — хлопець буде брати участь. Він наразі готує всю специфікацію, технічну документацію англійською мовою, він дуже добре володіє нею», — розповіла педагогиня.

Водночас, винаходи — це справа для будь-якого віку. dev.ua писав, що 80-річний винахідник з Дніпра створив велогенератор, який за 15 хвилин може виробити електроенергії на 5 годин. 



Джерело

Залишити відповідь

Ваша e-mail адреса не оприлюднюватиметься. Обов’язкові поля позначені *