Umelá inteligencia transformuje prehliadku pamiatok pre zrakovo postihnutých používateľov
Prelom mení spôsob, akým ľudia so zrakovým postihnutím vnímajú svet, a dáva im nástroje na objavovanie, pochopenie a prežívanie krásy neznámych miest ako nikdy predtým. Štúdia: Systém umelej inteligencie uľahčuje ľuďom so slepotou a slabým zrakom interpretovať a zažiť neznáme prostredie. Obrazový kredit: Angel Santana Garcia/Shutterstock.com Tím výskumníkov z Číny vyvinul systém umelej inteligencie (AI), ktorý môže byť schopný pomôcť ľuďom so zrakovým postihnutím preskúmať, pochopiť a vychutnať si neznáme prostredia. Štúdia je publikovaná v Nature Portfolio Journal Artificial Intelligence. Pozadie Štúdium prírodného prostredia...
Umelá inteligencia transformuje prehliadku pamiatok pre zrakovo postihnutých používateľov
Prelom mení spôsob, akým ľudia so zrakovým postihnutím vnímajú svet, a dáva im nástroje na objavovanie, pochopenie a prežívanie krásy neznámych miest ako nikdy predtým.
Štúdia: Systém umelej inteligencie uľahčuje ľuďom so slepotou a slabým zrakom interpretovať a zažiť neznáme prostredie. Fotografický kredit: Angel Santana Garcia/Shutterstock.com
Tím výskumníkov z Číny vyvinul systém umelej inteligencie (AI), ktorý môže byť schopný pomôcť ľuďom so zrakovým postihnutím objavovať, porozumieť a užívať si neznáme prostredia. Štúdia je zverejnená vNature Portfolio Journal Artificial Intelligence.
pozadia
Skúmanie prírodného prostredia, ako sú parky, má výrazne pozitívny vplyv na fyzické a duševné zdravie. Ľudia so slabým zrakom alebo nevidomí sú však často z týchto výhod vylúčení, pretože nie sú k dispozícii primerané nástroje na proaktívne zapojenie sa do nich.
Existujúce asistenčné riešenia určené na vedenie zrakovo postihnutých jedincov sa zameriavajú predovšetkým na poskytovanie funkčnej podpory, ako je navigácia a vyhýbanie sa prekážkam, čo im umožňuje pasívne sa zapájať do prírody.
Zrakovo postihnutí ľudia sa často cítia bezmocní pri objavovaní neznámeho prostredia. To zvyčajne znamená, že sa spoliehajú na členov rodiny, priateľov alebo dobrovoľníkov, ktorí im poskytnú podporu, čo ovplyvňuje ich schopnosť aktívne skúmať a porozumieť neznámemu prostrediu, ako aj zapamätať si a komunikovať s inými zrakovo postihnutými ľuďmi o svojej ceste.
Tím výskumníkov v Číne vyvinul systém poháňaný AI s názvom Viptour, ktorý má poskytnúť zrakovo postihnutým jednotlivcom pocit nezávislosti v neznámom prostredí.
Ako funguje Viptour?
Viptour je systém poháňaný AI, ktorý zahŕňa sériu ľahkých, prenosných, spotrebiteľských zariadení (fotoaparát a smartfón) a novú sieť algoritmov hlbokého učenia s názvom Focusformer. Efektívne techniky viaczmyslovej interakcie, ako je zvuk a hierarchická hmatová interakcia, zvyšujú interakciu medzi zrakovo postihnutými používateľmi a systémom Viptour.
Focusformer považuje estetiku, sviežosť (novinka) a základné potreby (vrátane navigácie a bezpečnosti) za kľúčové faktory na extrahovanie zmysluplných informácií zo zložitých, neznámych prostredí a odstránenie nadbytočných vizuálnych detailov. Tým sa znižuje kognitívna záťaž zrakovo postihnutých používateľov.
Focusformer transformuje veľké množstvo informácií do štruktúrovaného, riedkeho a hierarchického personalizovaného diagramu. Na základe tohto dobre štruktúrovaného diagramu Focusformer komunikuje s používateľmi so zrakovým postihnutím prostredníctvom aplikácie pre smartfóny, rozumie ich preferenciám a poskytuje personalizovanú podporu prostredníctvom adaptéra.
Je samotrénovaný s tisíckami verejných turistických videí od vidiacich turistov, čo je prospešné pre efektívne zníženie estetickej zaujatosti.
Systém Viptour má tiež možnosti na zaznamenávanie, ukladanie a zdieľanie skúseností, uľahčuje emocionálnu komunikáciu medzi zrakovo postihnutými ľuďmi a podporuje výmenu vedomostí a skúseností na ich sociálnych sieťach.
Technická inovácia Viptours spočíva v sieti Multi-T Focus Focusformer. Tento prístup využíva podsieť na pozadí na odfiltrovanie často videných objektov, podsieť príťažlivosti na identifikáciu zvýraznení, podsieť aktuálnosti na objavovanie nových funkcií a podsieť vyškolenú na prieskumoch uskutočnených s účastníkmi so zrakovým postihnutím. Tieto podsiete sa kombinujú na výber, hodnotenie a prezentáciu najrelevantnejších informácií každému používateľovi.
Systém Viptour tiež používa adaptér Blv-in-the-Loop, ktorý aktualizuje svoje odporúčania v reálnom čase na základe individuálnych používateľských metrík, ako sú „páči sa mi“ a „nepáči sa mi“, čo umožňuje prispôsobenie.
Názor užívateľa na Viptour
Systém Viptour bol testovaný na 33 ľuďoch so slepotou alebo zrakovým postihnutím a na analýzu sa zhromaždili emocionálne zážitky, ktoré si sami uviedli.
Pokiaľ ide o asistenčný výkon, štúdia zistila, že systém Viptour bol účinný pri pomoci zrakovo postihnutým jednotlivcom aktívne skúmať a dôkladne porozumieť neznámemu prostrediu, pričom im poskytol presné a dlhotrvajúce spomienky a umožnil im komunikovať so svojimi kolegami.
Štúdia prostredníctvom podrobnej analýzy vlastných skúseností zistila, že účastníci, ktorí používali Viptour, úspešne dosiahli 67,9% zvýšenie pozitívnej emocionálnej odozvy, 94,7% zvýšenie vzrušenia, 772,73% zvýšenie presnosti kognitívneho mapovania a 200% zvýšenie dlhodobej pamäti.
V používateľských hodnoteniach boli skóre použiteľnosti systému Viptour trvalo nad 80 zo 100, čo je porovnateľné alebo lepšie ako iné pomôcky pre zrakovo postihnutých.
Fyziologické merania, vrátane elektrodermálnej aktivity a variability srdcovej frekvencie, ukázali významné zlepšenia pri používaní Viptour, čo naznačuje zlepšené emocionálne zapojenie.
Preskúmajte význam
Štúdia zdôrazňuje potenciálne využitie systému Viptour riadeného AI pri poskytovaní príjemného a nezabudnuteľného zážitku pre zrakovo postihnutých pri aktívnom skúmaní neznámych prostredí. Tieto skúsenosti môžu výrazne zlepšiť ich emocionálny stav a zlepšiť celkovú kvalitu života.
Existujúce dôkazy naznačujú, že prezentovanie organizovaných a pútavých informácií môže zlepšiť potešenie človeka a uľahčiť hlbšie uchovanie pamäti. Ľudia majú tendenciu spracovávať dobre štruktúrované a zmysluplné informácie, vďaka čomu sú ich zážitky príjemnejšie a nezabudnuteľnejšie.
Túto ľudskú tendenciu možno vysvetliť konceptom kognitívnej plynulosti, ktorý naznačuje, že jasná a organizovaná prezentácia informácií znižuje kognitívnu záťaž u jednotlivcov. Potom im pomáha nasmerovať mentálne zdroje na pochopenie a integráciu obsahu. Táto zlepšená plynulosť spracovania vedie k pozitívnej odozve, pretože ľudia vnímajú informácie príjemnejšie.
Okrem toho interakcia medzi novými a známymi informáciami ovplyvňuje vplyv usporiadaných a zaujímavých informácií na pamäť. Nové informácie stimulujú zvedavosť a zlepšujú pozornosť, zatiaľ čo známe informácie poskytujú kognitívne pohodlie a súdržnosť.
Prezentácia informácií štruktúrovaným a pútavým spôsobom môže vyvážiť novosť a známosť, čo pomáha udržiavať záujem a angažovanosť jednotlivca.
Školenie Focusformer s vlastným dohľadom s tisíckami neoznačených videí z verejného cestovného ruchu efektívne zachytilo kognitívne jazykové znalosti a odhalilo štatistické vzťahy medzi rôznymi pojmami na scénach cestovného ruchu. Tento prístup eliminuje potenciálne skreslenie pri označovaní preferencií zájazdu a trénuje model tak, aby extrahoval iba relevantné kontextové informácie.
Tieto prispôsobené dizajnové úvahy od Focusformer umožnili systému Viptour úspešne modelovať požadované kognitívne jazykové zručnosti, čím zlepšili zážitok z turistiky pre zrakovo postihnutých jednotlivcov.
Stojí za zmienku, že vplyv Viptour závisí od kvality základných techník AI, ako je rozpoznávanie objektov a generovanie sémantických grafov. Budúce vylepšenia týchto metód by mohli ďalej zlepšiť výkon systému.
Stiahnite si svoju kópiu PDF teraz!
Zdroje:
- Lin H. 2025. AI system facilitates people with blindness and low vision in interpreting and experiencing unfamiliar environments. NPJ Artificial Intelligence. https://doi.org/10.1038/s44387-025-00006-w https://www.nature.com/articles/s44387-025-00006-w