Autor: Dora Mitić

„Kad se male ruke slože” interaktivni je trener američkog znakovnog jezika (ASL) koji znakove prepoznaje u stvarnom vremenu pomoću obične web-kamere. Posjetitelj pokazuje slova abecede prstima ili česte znakove poput HELLO i THANK YOU, a program ih odmah ispisuje kao titlove na dnu ekrana. Nakon kratke stanke riječi se dopunjuju u cijelu rečenicu iz zadanog popisa fraza. Slova J i Z, koja se crtaju pokretom, prepoznaju se iz kratkog niza sličica.
Sustav je napisan u Pythonu: MediaPipe izdvaja 21 točku šake, točke se normaliziraju, a vlastiti klasifikator, koji je učio na javnom skupu podataka i vlastitim snimkama, određuje znak. Model je vrednovan na osobama koje nije vidio tijekom učenja. Sve radi bez interneta i grafičke kartice, na običnom prijenosnom računalu.
Cilj je na zabavan način približiti znakovni jezik i pokazati kako računalni vid i strojno učenje rješavaju stvarne probleme.

U gornjem videosadržaju možete pogledati detalje, a sve što vas zanima, a niste mogli pronaći na ovoj stranici pitajte autora.