ПРОГРАМНА СИСТЕМА ЗІ ШТУЧНИМ ІНТЕЛЕКТОМ ДЛЯ ПЕРЕКЛАДУ УКРАЇНСЬКОЇ ВЕРБАЛЬНОЇ МОВИ НА ЖЕСТОВУ МОВУ

ЛУЦ, В., БЕЗВЕРХИЙ, О., ТОПОЛЬСЬКОВ, Є. (2025). AI-DRIVEN SOFTWARE SYSTEM FOR TRANSLATING SPOKEN UKRAINIAN INTO SIGN LANGUAGE. Прикладні інформаційні системи та технології в цифровому суспільстві, 1(2). https://doi.org/10.17721/3041-2323.2025.137-164

У роботі подано програмну систему, призначену для перекладу української мови на анімації жестової мови у режимі реального часу. Система використовує модель Whisper для автоматичного розпізнавання мови, забезпечуючи надійну транскрипцію усної української мови. Оскільки українська мова є високофлексійною, а жестова мова не використовує граматичні відмінки, реалізовано модуль виправлення на основі JSON. Він охоплює два компоненти: словник для частих помилок розпізнавання та механізм лематизації, який переписує слова у їх базову форму. Нормалізований текст потім відображається на GIF-анімаціях, кожна з яких представляє відповідний жест української жестової мови. Процес перекладу відбувається в реальному часі, забезпечуючи послідовне відображення анімацій, синхронізованих із розпізнаною мовою. Рішення демонструє, як технічну ефективність (низьку затримку, модульну структуру), так і соціальний вплив через покращення доступності комунікацій для людей з вадами слуху чи тих, хто використовує жестову мову як основний засіб спілкування. Потенційні застосування охоплюють інклюзивну освіту, повсякденні взаємодії та розроблення технологій, адаптованих до потреб спільноти з вадами слуху та мовлення.