Logo Zephyrnet

Các nhà nghiên cứu phát triển 'mắt' được hỗ trợ bởi AI để người khiếm thị 'nhìn thấy' đồ vật

Ngày:

Ngày 05 tháng 2024 năm XNUMX (Tin tức Nanowerk) Mua sắm hàng tạp hóa là một hoạt động phổ biến của nhiều người trong chúng ta, nhưng đối với những người khiếm thị, việc xác định các mặt hàng tạp hóa có thể khó khăn. Một nhóm các nhà nghiên cứu từ Trường Máy tính thuộc Đại học Quốc gia Singapore (NUS Computing) đã giới thiệu AiSee, một thiết bị hỗ trợ đeo được với giá cả phải chăng giúp những người khiếm thị 'nhìn thấy' các vật thể xung quanh họ với sự trợ giúp của trí tuệ nhân tạo (AI). Những người khiếm thị phải đối mặt với những trở ngại hàng ngày, đặc biệt là việc nhận dạng đối tượng, điều này rất quan trọng cho cả việc ra quyết định đơn giản và phức tạp. Mặc dù những đột phá về AI đã cải thiện đáng kể khả năng nhận dạng hình ảnh, nhưng việc ứng dụng những công nghệ tiên tiến này vào thế giới thực vẫn còn nhiều thách thức và dễ xảy ra lỗi. AiSee, được phát triển lần đầu tiên vào năm 2018 và được nâng cấp dần dần trong khoảng thời gian XNUMX năm, nhằm mục đích khắc phục những hạn chế này bằng cách tận dụng các công nghệ AI tiên tiến nhất. “Với AiSee, mục tiêu của chúng tôi là mang lại cho người dùng khả năng tương tác tự nhiên hơn. Bằng cách tuân theo quy trình thiết kế lấy con người làm trung tâm, chúng tôi đã tìm ra lý do để đặt câu hỏi về cách tiếp cận điển hình của việc sử dụng kính được tăng cường bằng máy ảnh. Người khiếm thị có thể ngại đeo kính để tránh bị kỳ thị. Do đó, chúng tôi đang đề xuất một phần cứng thay thế kết hợp với tai nghe dẫn truyền qua xương kín đáo,” nhà nghiên cứu chính của Dự án AiSee, Phó Giáo sư Suranga Nanayakkara, đến từ Khoa Hệ thống Thông tin và Phân tích tại NUS Computing, cho biết. Người dùng chỉ cần giữ một vật thể và kích hoạt camera tích hợp để chụp ảnh vật thể đó. Với sự trợ giúp của AI, AiSee sẽ xác định đối tượng và nó cũng sẽ cung cấp thêm thông tin khi người dùng truy vấn. AiSee: 'Con mắt' được hỗ trợ bởi AI giúp người khiếm thị 'nhìn thấy' các vật thể xung quanh AiSee: 'Con mắt' được hỗ trợ bởi AI giúp người khiếm thị 'nhìn thấy' các vật thể xung quanh họ. (Ảnh: Đại học Quốc gia Singapore)

AiSee hoạt động như thế nào?

AiSee bao gồm ba thành phần chính: Mắt: Phần mềm máy tính Vision Engine AiSee kết hợp một camera siêu nhỏ để ghi lại trường nhìn của người dùng. Điều này tạo thành thành phần phần mềm của AiSee, còn được gọi là 'máy tính công cụ thị giác'. Phần mềm có khả năng trích xuất các tính năng như văn bản, logo, nhãn từ ảnh đã chụp để xử lý. Bộ não: Bộ xử lý hình ảnh được hỗ trợ bởi AI và hệ thống hỏi đáp tương tác Sau khi người dùng chụp ảnh đối tượng quan tâm, AiSee sử dụng thuật toán AI phức tạp dựa trên đám mây để xử lý và phân tích các hình ảnh được chụp nhằm xác định đối tượng. Người dùng cũng có thể đặt nhiều câu hỏi để tìm hiểu thêm về đối tượng. AiSee sử dụng công nghệ xử lý và nhận dạng văn bản thành giọng nói và giọng nói thành văn bản tiên tiến để xác định đối tượng và hiểu các truy vấn của người dùng. Được hỗ trợ bởi mô hình ngôn ngữ lớn, AiSee vượt trội trong việc trao đổi câu hỏi và trả lời tương tác, cho phép hệ thống hiểu và phản hồi chính xác các truy vấn của người dùng một cách nhanh chóng và đầy đủ thông tin. So với hầu hết các thiết bị hỗ trợ đeo yêu cầu ghép nối với điện thoại thông minh, AiSee hoạt động như một hệ thống khép kín có thể hoạt động độc lập mà không cần thêm bất kỳ thiết bị nào. Loa: Hệ thống âm thanh dẫn xương Tai nghe của AiSee sử dụng công nghệ dẫn truyền qua xương, cho phép truyền âm thanh qua xương sọ. Điều này đảm bảo rằng những người khiếm thị có thể tiếp nhận thông tin thính giác một cách hiệu quả trong khi vẫn có thể tiếp cận với âm thanh bên ngoài, chẳng hạn như cuộc trò chuyện hoặc tiếng ồn giao thông. Điều này đặc biệt quan trọng đối với người khiếm thị vì âm thanh môi trường cung cấp thông tin cần thiết cho việc ra quyết định, đặc biệt là trong các tình huống liên quan đến vấn đề an toàn. “Hiện tại, người khiếm thị ở Singapore không được tiếp cận với công nghệ AI hỗ trợ ở mức độ tinh vi này. Do đó, chúng tôi tin rằng AiSee có tiềm năng hỗ trợ người khiếm thị hoàn thành các nhiệm vụ hiện đang cần hỗ trợ một cách độc lập. Bước tiếp theo của chúng tôi là làm cho AiSee có giá cả phải chăng và dễ tiếp cận với đại chúng. Để đạt được điều này, chúng tôi đang thực hiện những cải tiến hơn nữa, bao gồm thiết kế tiện dụng hơn và bộ xử lý nhanh hơn”, PGS Nanayakkara giải thích. Sinh viên NUS Mark Myres, người đã giúp kiểm tra AiSee với tư cách là người dùng khiếm thị, nhận xét: “Rất nhiều lúc, các thiết bị hỗ trợ dường như rất nhắm đến người mù hoàn toàn hoặc người khiếm thị. Tôi nghĩ AiSee là một sự cân bằng tốt. Cả người khiếm thị và người mù đều có thể nhận được rất nhiều lợi ích từ việc này.”

Kiểm tra người dùng và cải tiến hơn nữa

Phó giáo sư Nanayakkara và nhóm của ông hiện đang thảo luận với SG Enable ở Singapore để tiến hành thử nghiệm người dùng với người khiếm thị. Những phát hiện này sẽ giúp tinh chỉnh và cải thiện các tính năng cũng như hiệu suất của AiSee. Ngoài ra, BP De Silva Holdings Pte Ltd đã tặng một món quà hào phóng trị giá 150,000 đô la Singapore để hỗ trợ dự án. Quyết định đóng góp vào sự phát triển của AiSee của BPH bắt nguồn từ cam kết của BPH đối với trách nhiệm xã hội của doanh nghiệp và mong muốn thực sự tạo ra tác động tích cực đến xã hội với sứ mệnh rộng lớn hơn là thúc đẩy tính toàn diện và khả năng tiếp cận. Nỗ lực từ thiện của nó cũng phản ánh niềm tin vào sức mạnh biến đổi của công nghệ để giải quyết các thách thức xã hội và tạo ra một thế giới công bằng và hòa nhập hơn. Bà Ku Geok Boon, Giám đốc điều hành của SG Enable, cho biết: “Các giải pháp đổi mới được hỗ trợ bởi công nghệ hỗ trợ có thể thay đổi cuộc sống của người khuyết tật, dù là hỗ trợ họ sống độc lập hơn hay giảm bớt rào cản trong việc làm. Với tư cách là cơ quan đầu mối và cơ quan thúc đẩy lĩnh vực hỗ trợ người khuyết tật và hòa nhập ở Singapore, SG Enable rất vui được hợp tác với các đối tác như NUS và BP De Silva Holdings Pte Ltd để tận dụng công nghệ nhằm trao quyền cho người khuyết tật.”
tại chỗ_img

Tin tức mới nhất

tại chỗ_img