AI forvandler sightseeing for synshemmede brukere

AI forvandler sightseeing for synshemmede brukere

Gjennombrudd endrer måten mennesker med synshemninger opplever verden på, og gir dem verktøy til å oppdage, forstå og oppleve skjønnheten til ukjente steder som aldri før.

Studie: AI-systemet gjør det lettere for personer med blindhet og dårlig syn å tolke og oppleve ukjente miljøer. Bildekreditt: Angel Santana Garcia/Shutterstock.com

Et team av forskere fra Kina utviklet et kunstig intelligens (AI) system som kanskje kan hjelpe synshemmede å utforske, forstå og nyte ukjente miljøer. Studien er publisert iNature Portfolio Journal Artificial Intelligence.

bakgrunn

Å utforske naturmiljøer som parker har en betydelig positiv innvirkning på fysisk og mental helse. Imidlertid er personer med nedsatt syn eller blindhet ofte ekskludert fra disse fordelene fordi tilstrekkelige verktøy ikke er tilgjengelige for å proaktivt engasjere seg med dem.

Eksisterende hjelpeløsninger utviklet for å veilede synshemmede individer fokuserer først og fremst på å gi funksjonell støtte som navigasjon og unngåelse av hindringer, slik at de kan engasjere seg passivt i naturen.

Synshemmede føler seg ofte hjelpeløse mens de utforsker ukjente omgivelser. Dette betyr vanligvis at de er avhengige av familiemedlemmer, venner eller frivillige for støtte, noe som påvirker deres evne til aktivt å utforske og forstå ukjente miljøer, samt huske og kommunisere med andre synshemmede om reisen deres.

Et team av forskere i Kina utviklet et AI-drevet system kalt Viptour for å gi synshemmede individer en følelse av uavhengighet i ukjente miljøer.

Hvordan fungerer Viptour?

Viptour er et AI-drevet system som inkluderer en serie lette, bærbare enheter av forbrukerkvalitet (et kamera og en smarttelefon) og et nytt dyplæringsalgoritmenettverk kalt Focusformer. Effektive multisensoriske interaksjonsteknikker som lyd og hierarkisk taktil interaksjon øker interaksjonen mellom synshemmede brukere og Viptour-systemet.

Focusformer vurderer estetikk, friskhet (nyhet) og grunnleggende behov (inkludert navigasjon og sikkerhet) som nøkkelfaktorer for å trekke ut meningsfull informasjon fra komplekse, ukjente miljøer og eliminere overflødige visuelle detaljer. Dette reduserer kognitiv belastning på synshemmede brukere.

Focusformer transformerer store mengder informasjon til et strukturert, sparsomt og hierarkisk personlig diagram. Basert på dette godt strukturerte diagrammet, samhandler Focusformer med synshemmede brukere gjennom en smarttelefonapplikasjon, forstår deres preferanser og gir personlig støtte gjennom en adapter.

Den er selvtrent med tusenvis av offentlige reiselivsvideoer fra seende turister, noe som er gunstig for effektivt å redusere estetisk skjevhet.

Viptour-systemet har også muligheter for å registrere, lagre og dele opplevelser, lette emosjonell kommunikasjon mellom synshemmede og fremme utveksling av kunnskap og erfaringer i deres sosiale nettverk.

Viptours' tekniske innovasjon ligger i Multi-T Focus Focusformer-nettverket. Denne tilnærmingen bruker et bakgrunnsundernettverk for å filtrere ut objekter som ofte sees, et attraksjonsundernettverk for å identifisere høydepunkter, et friskhetsundernettverk for å oppdage nye funksjoner, og et undernettverk som er trent på undersøkelser utført med synshemmede deltakere. Disse undernettverkene kombineres for å velge, rangere og presentere den mest relevante informasjonen for hver bruker.

Viptour-systemet bruker også en Blv-in-the-Loop-adapter som oppdaterer anbefalingene i sanntid basert på individuelle brukerverdier som "liker" og "misliker", som muliggjør personalisering.

Brukernes mening om Viptour

Viptour-systemet ble testet på 33 personer med blindhet eller synshemming, og selvrapporterte emosjonelle erfaringer ble samlet inn for analyse.

Når det gjelder assisterende ytelse, fant studien at Viptour-systemet var effektivt til å hjelpe synshemmede individer med å aktivt utforske og grundig forstå ukjente miljøer, styrke dem med nøyaktige og langvarige minner, og gjøre dem i stand til å kommunisere med sine kolleger.

Gjennom detaljert analyse av selvrapporterte opplevelser fant studien at deltakere som brukte Viptour vellykket oppnådde en 67,9 % økning i positiv emosjonell respons, en 94,7 % økning i opphisselse, en 772,73 % økning i kognitiv kartleggingsnøyaktighet og en 200 % økning i langtidsminnetensjon.

I brukerevalueringer var Viptour-systemets brukervennlighetspoeng gjennomgående over 80 av 100, sammenlignbare med eller bedre enn andre hjelpemidler for synshemmede.

Fysiologiske mål, inkludert elektrodermal aktivitet og hjertefrekvensvariabilitet, viste betydelige forbedringer med Viptour-bruk, noe som indikerer forbedret emosjonelt engasjement.

Undersøk betydning

Studien fremhever den potensielle bruken av det AI-drevne Viptour-systemet for å gi en hyggelig og minneverdig opplevelse til synshemmede mens de aktivt utforsker ukjente miljøer. Disse opplevelsene kan forbedre deres følelsesmessige tilstand betydelig og forbedre deres generelle livskvalitet.

Eksisterende bevis tyder på at presentasjon av organisert og engasjerende informasjon kan forbedre en persons glede og legge til rette for dypere hukommelsesbevaring. Folk har en tendens til å behandle velstrukturert og meningsfull informasjon, noe som gjør opplevelsene deres mer fornøyelige og minneverdige.

Denne menneskelige tendensen kan forklares med begrepet kognitiv flyt, som indikerer at tydelig og organisert informasjonspresentasjon reduserer kognitiv belastning hos individer. Det hjelper dem deretter med å kanalisere mentale ressurser for å forstå og integrere innholdet. Denne forbedrede prosesseringsflyten fører til en positiv respons ettersom folk oppfatter informasjonen mer behagelig.

Videre påvirker samspillet mellom ny og kjent informasjon virkningen av organisert og interessant informasjon på hukommelsen. Ny informasjon stimulerer nysgjerrighet og forbedrer oppmerksomhet, mens kjent informasjon gir kognitiv komfort og sammenheng.

Å presentere informasjonen på en strukturert og engasjerende måte kan balansere nyhet og fortrolighet, noe som bidrar til å opprettholde individets interesse og engasjement.

Focusformers selvstyrte opplæring med tusenvis av umerkede offentlige reiselivsvideoer fanget effektivt kognitiv språkkunnskap og avslørte de statistiske sammenhengene mellom ulike konsepter i reiselivsscener. Denne tilnærmingen eliminerer potensiell skjevhet i merking av turpreferanser og trener modellen til kun å trekke ut relevant kontekstuell informasjon.

Disse personlige designbetraktningene fra Focusformer har gjort det mulig for Viptour-systemet å lykkes med å modellere ønskede kognitive språkferdigheter, og dermed forbedre turismeopplevelsen for synshemmede individer.

Det er verdt å merke seg at Viptours innvirkning avhenger av kvaliteten på dens underliggende AI-teknikker som objektgjenkjenning og semantisk grafgenerering. Fremtidige forbedringer av disse metodene kan forbedre ytelsen til systemet ytterligere.

Last ned PDF-eksemplaret ditt nå!

Kilder: