Розробник створив програму, яка виступає посередником між глухонімою людиною та голосовим помічником Alexa
Розробник створив програму, яка виступає посередником між глухонімою людиною та голосовим помічником Alexa
Розробник із США створив програму, яка виступає посередником між глухонімою людиною та голосовим помічником Alexa. Система використовує веб-камеру ноутбука, щоб розпізнавати жести, перекладати їх у голосові команди для помічника, а отримані відповіді виводити на екран у вигляді тексту.
Принцип роботи
Програма розпізнає жести в реальному часі за допомогою алгоритму глибинного навчання на фреймворку TensorFlow.js. Система синтезу мови озвучує команди, колонка чує їх і дає голосову відповідь від комп'ютера, який алгоритм Сінгха обробляє, потім перетворює на текст і виводить на екран.
