Истражувачки тим предводен од истражувачи од Универзитетот Корнел во САД разви прстен со вештачка интелигенција наречен SpellRing, опремен со микросонарна технологија што може континуирано и во реално време да го следи „разговорот со прстите“ на американски знаковен јазик (ASL).
Во својата сегашна форма, SpellRing може да се користи за внесување текст во компјутери или паметни телефони користејќи знаци со прсти за спелување зборови, како што се соодветни именки, имиња и технички термини. Со понатамошен развој, уредот, за кој се верува дека е прв од ваков вид, може да го револуционизира преводот на американскиот знаковен јазик со постојано следење на цели зборови и реченици.
„Заедницата на глуви и наглуви не усвои многу други технологии кои препознаваат ASL правопис на прсти бидејќи хардверот е гломазен и непрактичен. Се обидовме да развиеме единствен прстен за да ги долови сите суптилни и сложени движења на прстите во ASL“ вели Хјунчул Лим, докторант по информатички науки.
SpellRing се носи на палецот и е опремен со микрофон и звучник, кои заедно испраќаат и примаат нечујни звучни бранови кои ги следат движењата на рацете и прстите на корисникот, додека мини жироскоп ги следи движењата на раката. Овие компоненти се сместени во 3Д печатен прстен.
Комерцијален алгоритам за длабоко учење потоа ги обработува сликите на сонар и предвидува букви ASL напишани со прст во реално време и со слична точност како многу постоечки системи за кои е потребен повеќе хардвер. Програмерите го тестираа SpellRing на 20 искусни и почетници ASL звучници, при што тие природно и постојано пишуваат вкупно повеќе од 20.000 зборови со различна должина. Стапката на точност на SpellRing беше помеѓу 82% и 92%, во зависност од тежината на зборот.
Да се обучи систем за вештачка интелигенција за да ги препознае 26-те форми на раце поврзани со секоја буква од азбуката*, беше далеку од едноставна, велат истражувачите. „Разликите меѓу буквите можат да бидат значајни. Тешко е да се доловат велат тие.
SpellRing се надоврзува на претходната итерација од SciFi Lab на Универзитетот Корнел, наречена Ring-a-Pose, и е најновата во серијата паметни уреди опремени со сонар. Истражувачите претходно развија гаџети за интерпретација на позициите на рацете во виртуелната реалност, горниот дел од телото во 3Д и препознавање на мекиот говор, погледот и изразите на лицето.
Идната работа ќе вклучува интегрирање на микросонарен систем во очилата за да се доловат движењата на горниот дел од телото и изразите на лицето, за посеопфатен систем за преведување ASL.
„Глувите и наглувите луѓе користат повеќе од рацете за ASL. Тие користат изрази на лицето, движења на горниот дел од телото и гестови на главата“, вели Лим. „ASL е многу комплициран, сложен визуелен јазик“.
(Cornell University)
(фото: Cornell University)
