Telefon, který popíše okolí: liberečtí vědci chystají bezplatného pomocníka pro nevidomé

Kdo vidí, ani si neuvědomí, kolik drobných rozhodnutí za den udělá očima: kterou bankovkou zaplatit, kde přejít silnici, jestli je rohlík ještě k jídlu. Pro lidi se zrakovým postižením je každá z těchto chvil malá překážka. V Liberci proto vyvíjejí aplikaci, která se na svět podívá za ně a řekne jim, co vidí.

Kdo ji vymyslel a jak funguje

Za aplikací bMyVision stojí docent Josef Chaloupka a Karel Paleček z Fakulty mechatroniky, informatiky a mezioborových studií Technické univerzity v Liberci. Na projektu pracují zhruba dva roky. Navazují na dlouholetou práci fakultní laboratoře Speech Lab, která dříve vytvořila hlasové ovládání počítače MyVoice pro lidi, kteří se nemohou hýbat.

Aplikace využívá kameru chytrého telefonu a umělou inteligenci. Program obraz průběžně vyhodnocuje a výsledek oznámí hlasem. Celé rozpoznávání probíhá přímo v telefonu, takže uživatel nepotřebuje připojení k internetu a pořízené snímky se přes internet nikam neposílají. Spolehnout se na ni lze tedy i v metru nebo tam, kde není signál.

Doma pozná mince a bankovky, přečte text i datum spotřeby a upozorní na plíseň na pečivu. Umí také rozpoznat známé tváře, které si uživatel sám uloží, a odhadnout, jakou má člověk náladu. Venku pomůže najít přechod pro chodce i s údajem o vzdálenosti, rozezná semafor nebo obchod a nevidomým pejskařům ukáže, kde mají po svém psovi uklidit.

Nápady od samotných nevidomých

Vývojáři od začátku spolupracovali s libereckým TyfloCentrem, které lidem s těžkým postižením zraku pomáhá. Nevidomí sami navrhovali, co by aplikace měla umět, a pak ji zkoušeli. Právě od nich vzešlo rozpoznávání plísně, které podle autorů dosavadní pomůcky nenabízejí.

Na této funkci se podílí také Ústav technologie potravin Mendelovy univerzity v Brně. Jeho odborníci posuzují fotografie potravin a pomáhají rozšiřovat sbírku snímků, na které se program učí. Zatím jich je asi 1 400, pro spolehlivé výsledky by jich vývojáři rádi měli kolem 10 000. Začínají u pečiva, kde se počínající plíseň snadno splete třeba s cukrem.

Další přání nevidomých se týkalo bezpečné chůze. Systém proto doplní čidlo, které ohlásí překážku ve výšce hlavy, například větev nebo ceduli, už na vzdálenost tří metrů. Aby člověk nemusel nést telefon v natažené ruce, bude se aplikace propojovat s malou kamerou na brýlích. Ovládat ji půjde nenápadným prstýnkem s tlačítkem: krátký stisk zjistí, co je před uživatelem, dlouhý přepne funkci.

Kdy bude k dispozici

Verze 2.0 je nyní v závěrečném testování. Do konce roku 2026 by si ji měli stáhnout první uživatelé, nejprve do iPhonu, později i do telefonů se systémem Android. Mluvit bude česky a anglicky a další jazyky lze přidat. Autoři chtějí podklady ke všem částem systému zveřejnit jako otevřený software, aby si je mohl kdokoli vyzkoušet a sestavit. V příštích letech plánují i verzi pro nevidomé studenty, která jim pomůže s prezentacemi na přednáškách a s orientací v kampusu.

„Chceme, aby moderní technologie pro nevidomé nebyly luxusem dostupným jen pro vyvolené,“ říká Josef Chaloupka.

Jak se zapojit

• Pomoci může každý, kdo má doma plesnivé pečivo nebo jinou potravinu. Fotografie lze poslat na adresu poradna.potraviny@mendelu.cz nebo bmyvision@seznam.cz.
• Nejcennější jsou snímky různých potravin, v různém prostředí a v různé fázi plesnivění.
• Pokud znáte někoho se zrakovým postižením, kdo by aplikaci rád zkusil, sledujte zprávy Technické univerzity v Liberci.