제퍼넷 로고

시각 장애가 있는 사람이 사물을 볼 수 있는 AI 기반 '눈' 개발

시간

05년 2024월 XNUMX일 (나노 워크 뉴스) 식료품 쇼핑은 우리 중 많은 사람에게 흔한 활동이지만, 시각 장애가 있는 사람들에게는 식료품을 식별하는 것이 어려울 수 있습니다. 싱가포르 국립대학교 컴퓨터공학부(NUS Computing) 연구팀은 시각 장애가 있는 사람들이 주변 사물을 볼 수 있도록 도와주는 저렴한 웨어러블 보조 장치인 AiSee를 출시했습니다. 인공 지능 (일체 포함). 시각 장애가 있는 개인은 일상적인 장애물에 직면합니다. 특히 단순하고 복잡한 의사 결정에 중요한 물체 식별과 관련하여 더욱 그렇습니다. AI의 획기적인 발전으로 시각적 인식 기능이 획기적으로 향상되었지만 이러한 고급 기술의 실제 적용은 여전히 ​​어렵고 오류가 발생하기 쉽습니다. 2018년 처음 개발된 후 XNUMX년에 걸쳐 점진적으로 업그레이드된 AiSee는 최첨단 AI 기술을 활용하여 이러한 한계를 극복하는 것을 목표로 합니다. “AiSee를 통해 우리의 목표는 사용자에게 보다 자연스러운 상호 작용을 제공하는 것입니다. 인간 중심의 디자인 프로세스를 통해 우리는 카메라로 증강된 안경을 사용하는 일반적인 접근 방식에 의문을 제기할 이유를 찾았습니다. 시각 장애가 있는 사람들은 낙인을 피하기 위해 안경 착용을 꺼릴 수 있습니다. 따라서 우리는 눈에 띄지 않는 골전도 헤드폰을 통합한 대체 하드웨어를 제안하고 있습니다.”라고 NUS 컴퓨팅 정보 시스템 및 분석학과 출신인 AiSee 부교수 Suranga Nanayakkara가 말했습니다. 사용자는 물체를 잡고 내장 카메라를 활성화하여 물체의 이미지를 캡처하기만 하면 됩니다. AI의 도움으로 AiSee는 물체를 식별하고 사용자가 쿼리할 때 더 많은 정보를 제공합니다. AiSee: 시각 장애가 있는 사람들이 주변 사물을 '볼 수 있는' AI 기반 '눈' AiSee: 시각 장애가 있는 사람들이 주변의 사물을 '볼' 수 있도록 하는 AI 기반 '눈'입니다. (이미지 : 싱가포르 국립 대학교)

AiSee는 어떻게 작동하나요?

AiSee는 세 가지 주요 구성 요소로 구성됩니다. 눈: 비전 엔진 컴퓨터 소프트웨어 AiSee에는 사용자의 시야를 캡처하는 마이크로 카메라가 통합되어 있습니다. 이는 '비전 엔진 컴퓨터'라고도 하는 AiSee의 소프트웨어 구성 요소를 형성합니다. 이 소프트웨어는 처리를 위해 캡처된 이미지에서 텍스트, 로고, 라벨과 같은 특징을 추출할 수 있습니다. 뇌: AI 기반 이미지 처리 장치 및 대화형 Q&A 시스템 사용자가 관심 개체의 사진을 찍으면 AiSee는 정교한 클라우드 기반 AI 알고리즘을 활용하여 캡처된 이미지를 처리하고 분석하여 개체를 식별합니다. 사용자는 개체에 대해 더 자세히 알아보기 위해 다양한 질문을 할 수도 있습니다. AiSee는 고급 텍스트-음성 및 음성-텍스트 인식 및 처리 기술을 사용하여 객체를 식별하고 사용자의 쿼리를 이해합니다. 대규모 언어 모델을 기반으로 하는 AiSee는 대화형 질문 및 답변 교환에 탁월하여 시스템이 신속하고 유익한 방식으로 사용자의 쿼리를 정확하게 이해하고 응답할 수 있도록 해줍니다. 스마트폰 페어링이 필요한 대부분의 웨어러블 보조 장치에 비해 AiSee는 추가 장치 없이 독립적으로 작동할 수 있는 독립형 시스템으로 작동합니다. 스피커: 골전도 사운드 시스템 AiSee의 헤드폰은 두개골 뼈를 통해 소리를 전달하는 골전도 기술을 활용합니다. 이를 통해 시각 장애가 있는 개인은 대화나 교통 소음과 같은 외부 소리에 계속 접근하면서 청각 정보를 효과적으로 수신할 수 있습니다. 환경 소리는 특히 안전을 고려하는 상황에서 의사 결정에 필수적인 정보를 제공하므로 이는 시각 장애가 있는 사람들에게 특히 중요합니다. “현재 싱가포르의 시각 장애인은 이 정도로 정교한 보조 AI 기술을 이용할 수 없습니다. 따라서 우리는 AiSee가 시각 장애가 있는 사람들이 현재 도움이 필요한 작업을 독립적으로 수행할 수 있는 잠재력을 갖고 있다고 믿습니다. 우리의 다음 단계는 AiSee를 대중이 저렴하게 이용할 수 있도록 만드는 것입니다. 이를 달성하기 위해 우리는 보다 인체공학적인 디자인과 보다 빠른 처리 장치를 포함하여 더욱 개선하고 있습니다.”라고 Nanayakkara 부교수는 설명했습니다. 시각 장애가 있는 사용자로서 AiSee를 테스트하는 데 도움을 준 NUS 학생 Mark Myres는 다음과 같이 말했습니다. “보조 장치는 완전 시각 장애인이나 시각 장애가 있는 사람들을 대상으로 하는 것처럼 보입니다. AiSee는 밸런스가 좋은 것 같아요. 시각 장애인과 시각 장애인 모두 이를 통해 많은 혜택을 얻을 수 있습니다.”

사용자 테스트 및 추가 개선 사항

Nanayakkara 부교수와 그의 팀은 현재 시각 장애가 있는 사람들을 대상으로 사용자 테스트를 실시하기 위해 싱가포르의 SG Enable과 논의 중입니다. 이번 연구 결과는 AiSee의 기능과 성능을 개선하고 개선하는 데 도움이 될 것입니다. 또한 BP De Silva Holdings Pte Ltd는 프로젝트를 지원하기 위해 S$150,000를 넉넉하게 기부했습니다. AiSee의 발전에 기여하겠다는 BPH의 결정은 기업의 사회적 책임에 대한 헌신과 포용성과 접근성을 육성한다는 더 넓은 사명을 통해 사회에 긍정적인 영향을 미치려는 진정한 열망에 뿌리를 두고 있습니다. 또한 이 회사의 자선 활동은 사회적 문제를 해결하고 보다 공평하고 포용적인 세상을 만들 수 있는 기술의 변혁적 힘에 대한 믿음을 반영합니다. SG Enable의 CEO인 구극분(Ms Ku Geok Boon)은 “보조 기술을 통해 구현된 혁신적인 솔루션은 장애인이 보다 독립적으로 생활할 수 있도록 지원하거나 취업 장벽을 낮추는 등 장애인의 삶을 변화시킬 수 있습니다. 싱가포르의 장애 및 포용을 위한 중심 기관이자 부문 조력자인 SG Enable은 NUS 및 BP De Silva Holdings Pte Ltd와 같은 파트너와 협력하여 기술을 활용하여 장애인에게 역량을 부여하게 된 것을 기쁘게 생각합니다.”
spot_img

최신 인텔리전스

spot_img