Новий додаток Vivo може перетворювати мовлення на мову жестів у реальному часі

Компанія Vivo запустила нову програму «Перекладач мови жестів», яка може перетворювати мову на мову жестів і текст у реальному часі. Додаток також може перекладати жести мовою жестів, якими користуються люди, на текст або розмовну мову, створюючи спосіб для тих, хто не розуміє мови жестів, спілкуватися з ними.

За допомогою програми перекладача жестової мови від Vivo люди з вадами слуху можуть не тільки ефективніше спілкуватися з родиною та друзями, але й зручніше замовляти їжу та робити покупки. Він оснащений декількома функціями, включаючи перетворення мовлення в текст, перетворення тексту в мовлення, перетворення тексту в мову жестів і перетворення мови жестів у текст.

Протягом багатьох років технологія розпізнавання мови жестів зіткнулася з кількома проблемами, такими як точне відстеження рухів суглобів пальців в обмеженому просторі, визначення їхнього напрямку та траєкторії руху, робота з унікальним граматичним порядком і пропущеними виразами мови жестів, а також розрізнення схожих на вигляд знаків мовні рухи.

Однак команда OrginOS успішно впоралася з цими проблемами та досягла значного прогресу в технології розпізнавання мови жестів. Додаток «Перекладач жестової мови» вже може розпізнавати 1200 словників жестової мови, і це теж з точністю понад 80% — еквівалентно китайському HSK рівня 4. Він охопив понад 8000 слів у китайському загальному словнику.

У майбутньому команда розробників OriginOS продовжить працювати над додатком і покращуватиме його точність. Він планує продовжити вдосконалення розпізнавання мови жестів, щоб охопити рівень HSK 6 китайської мови, а функцію перекладу буде оптимізовано для більшої кількості сценаріїв використання.