Zephyrnet-logo

Onderzoekers ontwikkelen een door AI aangedreven ‘oog’ waarmee visueel gehandicapten objecten kunnen ‘zien’

Datum:

05 februari 2024 (Nanowerk Nieuws) Boodschappen doen is voor velen van ons een veel voorkomende bezigheid, maar voor mensen met een visuele beperking kan het identificeren van boodschappen een hele uitdaging zijn. Een team onderzoekers van de School of Computing (NUS Computing) van de National University of Singapore heeft AiSee geïntroduceerd, een betaalbaar draagbaar hulpmiddel dat mensen met een visuele beperking helpt objecten om hen heen te 'zien' met behulp van kunstmatige intelligentie (AI). Mensen met een visuele beperking worden dagelijks geconfronteerd met hindernissen, vooral bij objectidentificatie, wat cruciaal is voor zowel eenvoudige als complexe besluitvorming. Hoewel doorbraken op het gebied van AI de visuele herkenningsmogelijkheden dramatisch hebben verbeterd, blijft de toepassing van deze geavanceerde technologieën in de echte wereld een uitdaging en foutgevoelig. AiSee, dat voor het eerst werd ontwikkeld in 2018 en in een periode van vijf jaar geleidelijk werd geüpgraded, heeft tot doel deze beperkingen te overwinnen door gebruik te maken van de modernste AI-technologieën. “Met AiSee is het ons doel om gebruikers een meer natuurlijke interactie te bieden. Door een mensgericht ontwerpproces te volgen, vonden we redenen om de typische aanpak van het gebruik van een bril met camera in twijfel te trekken. Mensen met een visuele beperking zijn mogelijk terughoudend in het dragen van een bril om stigmatisering te voorkomen. Daarom stellen we alternatieve hardware voor die een discrete beengeleidingshoofdtelefoon bevat”, zegt hoofdonderzoeker van Project AiSee universitair hoofddocent Suranga Nanayakkara, lid van de afdeling Informatiesystemen en Analytics bij NUS Computing. De gebruiker hoeft alleen maar een object vast te houden en de ingebouwde camera te activeren om een ​​beeld van het object vast te leggen. Met behulp van AI zal AiSee het object identificeren en ook meer informatie verstrekken wanneer de gebruiker ernaar vraagt. AiSee: het door AI aangedreven 'oog' waarmee visueel gehandicapten objecten om hen heen kunnen 'zien' AiSee: het door AI aangedreven 'oog' waarmee visueel gehandicapten objecten om hen heen kunnen 'zien'. (Afbeelding: Nationale Universiteit van Singapore)

Hoe werkt AiSee?

AiSee bestaat uit drie belangrijke componenten: Het oog: Vision engine computersoftware AiSee bevat een microcamera die het gezichtsveld van de gebruiker vastlegt. Dit vormt het softwareonderdeel van AiSee, ook wel de ‘vision engine computer’ genoemd. De software kan functies zoals tekst, logo's en labels uit de vastgelegde afbeelding extraheren voor verwerking. Het brein: AI-aangedreven beeldverwerkingseenheid en interactief vraag- en antwoordsysteem Nadat de gebruiker een foto heeft gemaakt van het gewenste object, gebruikt AiSee geavanceerde cloudgebaseerde AI-algoritmen om de vastgelegde beelden te verwerken en analyseren om het object te identificeren. De gebruiker kan ook een reeks vragen stellen om meer over het object te weten te komen. AiSee maakt gebruik van geavanceerde tekst-naar-spraak- en spraak-naar-tekst-herkennings- en verwerkingstechnologie om objecten te identificeren en de vragen van de gebruiker te begrijpen. Aangedreven door een groot taalmodel blinkt AiSee uit in interactieve vraag-en-antwoorduitwisseling, waardoor het systeem de vragen van de gebruiker nauwkeurig kan begrijpen en op een snelle en informatieve manier kan beantwoorden. Vergeleken met de meeste draagbare hulpmiddelen waarvoor smartphonekoppeling vereist is, werkt AiSee als een op zichzelf staand systeem dat onafhankelijk kan functioneren zonder dat er extra apparaten nodig zijn. De luidspreker: beengeleidingsgeluidssysteem De hoofdtelefoon van AiSee maakt gebruik van beengeleidingstechnologie, die geluidsoverdracht via de botten van de schedel mogelijk maakt. Dit zorgt ervoor dat personen met een visuele beperking effectief auditieve informatie kunnen ontvangen en toch toegang hebben tot externe geluiden, zoals gesprekken of verkeerslawaai. Dit is vooral van vitaal belang voor mensen met een visuele beperking, omdat omgevingsgeluiden essentiële informatie verschaffen voor de besluitvorming, vooral in situaties waarbij veiligheidsoverwegingen een rol spelen. “Momenteel hebben visueel gehandicapten in Singapore geen toegang tot ondersteunende AI-technologie van dit niveau van verfijning. Daarom zijn wij van mening dat AiSee het potentieel heeft om mensen met een visuele beperking in staat te stellen zelfstandig taken uit te voeren waarvoor momenteel hulp nodig is. Onze volgende stap is om AiSee betaalbaar en toegankelijk te maken voor de massa. Om dit te bereiken, voeren we verdere verbeteringen door, waaronder een ergonomischer ontwerp en een snellere verwerkingseenheid”, legt Assoc Prof Nanayakkara uit. NUS-student Mark Myres, die hielp bij het testen van AiSee als visueel gehandicapte gebruiker, merkte op: “Hulpmiddelen lijken vaak erg gericht op volledig blinde of slechtziende mensen. Ik denk dat AiSee een goede balans is. Zowel slechtzienden als blinden kunnen hier veel profijt van hebben.”

Gebruikerstests en verdere verbeteringen

Assoc Prof Nanayakkara en zijn team zijn momenteel in gesprek met SG Enable in Singapore om gebruikerstests uit te voeren bij personen met een visuele beperking. De bevindingen zullen helpen de functies en prestaties van AiSee te verfijnen en verbeteren. Daarnaast heeft BP De Silva Holdings Pte Ltd een genereuze gift van S$150,000 gedaan om het project te ondersteunen. Het besluit van BPH om bij te dragen aan de ontwikkeling van AiSee is geworteld in haar inzet voor maatschappelijk verantwoord ondernemen en een oprechte wens om een ​​positieve impact op de samenleving te maken met een bredere missie van het bevorderen van inclusiviteit en toegankelijkheid. Haar filantropische inspanningen weerspiegelen ook haar geloof in de transformerende kracht van technologie om maatschappelijke uitdagingen aan te pakken en een rechtvaardiger en inclusievere wereld te creëren. Mevrouw Ku Geok Boon, Chief Executive Officer van SG Enable, zei: “Innovatieve oplossingen die mogelijk worden gemaakt door ondersteunende technologieën kunnen de levens van personen met een handicap veranderen, of het nu gaat om het ondersteunen van hen om zelfstandiger te leven of het verlagen van de barrières op de arbeidsmarkt. Als centraal agentschap en sectoractivator voor handicaps en inclusie in Singapore werkt SG Enable graag samen met partners als NUS en BP De Silva Holdings Pte Ltd om technologie te benutten om personen met een handicap te empoweren.”
spot_img

Laatste intelligentie

spot_img