Telefonnal a látássérültekért: Mobilszenzorokra épülő, AI és a gépi látás alapú algoritmusfejlesztés

Vakok és látássérültek számára a mindennapi, számunkra egyszerű feladatok is komoly kihívást jelenthetnek, hiszen az érzékelésünk 60-80%-ban a látásunkra épül. Hogyan mondanád meg a látásod nélkül, hogy egy lámpa világít-e? Hogyan különböztetnéd meg melyik a fehér és melyik a kék ing, vagy milyen bankjegyeket adott valaki a kezedbe? A kutatásunk célja, hogy egyetlen mobiltelefonnal segíteni tudjunk a látássérülteket a vizuális, azaz a látható információk elérésben. Az AI és a gépi látás módszereire épített kutatási eredményeinket olyan eszközre implementáljuk, ami bárki zsebében ott lehet. A program során bepillantást engedünk közel tucatnyi olyan feladatba, amely a mindennapokban felmerül, vagy valós élethelyzetek ihlették. A résztvevők többek között kipróbálhatják, hogy bekötött szemmel hogyan rendelnének érintőképernyőn keresztül, keresnének üres ülőhelyet, kerülnének el akadályokat a járdán, ismernének fel bankjegyeket, keresnének kapucsengőn egy adott nevet, vagy válogatnának szét színek szerint ruhákat.

18:00-18:30 közötti turnusra külföldieket is várunk.

See with Your Phone! Computer Vision for the Visually Impaired

For individuals who are blind or visually impaired, everyday tasks that may seem simple to others can pose significant challenges, as 60-80% of our perception relies on sight. How would you know if a light is on without your vision? How would you distinguish between a white and a blue shirt, or identify the banknotes handed to you? Our research aims to assist the visually impaired in accessing visual information using just a mobile phone. We are developing a tool that fits right in your pocket by leveraging AI and computer vision methods. During the program, participants will get a glimpse into nearly a dozen real-life tasks inspired by everyday challenges. Visitors can try ordering through a touchscreen while blindfolded, finding an empty seat, avoiding obstacles on the sidewalk, identifying banknotes, locating a name on a doorbell, or sorting clothes by colour.

We are also welcoming international guests for the 18:00-18:30 time slot.