Логотип Зефирнет

От смартфонов до гарнитур AR: Xiaomi инвестирует во французские стартапы, делая ставку на сенсорную революцию – Pandaily

Дата:

Это Лука Верревторой визит в Китай в этом году. Он приехал на Всемирный конгресс по мобильной связи, проходивший в Шанхае, Китай. В интервью Jiemian News он упомянул, что помимо MWC, его маршрут этой поездки в Китай также включает в себя отслеживание проектов с шанхайской командой и обмен идеями с инвесторами.

Лука Верре — генеральный директор сенсорной компании Prophesee, а также соучредитель парижского стартапа. Среди многочисленных полупроводниковых стартапов предприятие Prophesee по производству датчиков зрения остается относительно нишевым направлением, менее известным внешнему миру. Тем не менее, благодаря своей уникальной технологии, называемой «сенсоры на основе событий», у него есть потенциал для создания новых областей применения.

Так называемые датчики, основанные на событиях (EVS), возникли в результате имитации сигналов зрительных нейронов и представляют собой биомиметическую сенсорную технологию, которая имитирует светочувствительный механизм глаза. Когда человеческий глаз воспринимает свет, рецепторные клетки сетчатки преобразуют световые сигналы в нейронную информацию. Последующие нервные клетки выборочно выбирают яркие и темные области и передают эту информацию в зрительную кору головного мозга через ганглиозные клетки.

EVS похож на человеческий зрительный нерв, где свет, попадающий на датчик, преобразуется в электрические сигналы. Электрические сигналы разделяются компаратором на основе изменений яркости, формируя яркие и темные сигналы. Затем, посредством последующей обработки сигнала, они выводятся в виде данных изображения EVS. Следовательно, EVS — это тип визуального датчика, который чувствителен только к изменениям яркости и выводит изображения.

СМОТРИТЕ ТАКЖЕ: Xiaomi Car объявляет о нескольких корректировках высшего руководства

Лука Верре представил, что преимущество технологии машинного зрения на основе событий заключается в захвате динамической и временной информации. Эти фрагменты информации могут хорошо дополняться информацией от датчиков CMOS RGB или трехмерной информацией, собранной ToF или LiDAR. Комбинация этих режимов датчика может формировать более ценные решения.

Производство EVS в основном было завершено с помощью Sony. Выпускаемая сенсорная продукция EVS предоставляется заказчикам. В настоящее время на официальном сайте полупроводникового подразделения Sony уже есть две модели датчиков EVS, доступных для внешнего использования. Согласно представлению Prophesee, использование опыта Sony в производстве датчиков изображения позволяет осуществлять крупносерийное производство датчиков EVS, обеспечивая превосходные характеристики съемки и снижение затрат.

На самом деле, как датчику нового типа, самое главное для EVS — найти практическое применение. По словам сотрудников отдела исследований и разработок полупроводникового подразделения Sony, самая большая проблема заключалась в том, что после представления EVS клиентам все изначально проявили большой интерес к этому уникальному датчику и сочли его захватывающим. Однако когда дело доходило до обсуждения ее приложений, клиенты часто не знали, как эффективно ее использовать, что затрудняло переход к следующему этапу.

Это также вопрос, над которым часто приходится задумываться Луке Верре.

Сенсорное подразделение представляет собой специализированную и сложную область, казалось бы, далекую от повседневной жизни. Однако некоторые его приложения тесно связаны с жизнью обычных людей. Например, в таких устройствах, как смартфоны и автомобили, встроенные датчики изображения служат «глазами» этих устройств. В прошлом в основном использовались традиционные датчики CMOS (CIS). Согласно данным исследовательской компании Counterpoint, к 19 году объем мирового рынка доставки грузов для стран СНГ достигнет 2022 миллиардов долларов США. Среди них наибольшая доля приходится на мобильные телефоны — 13.2 миллиарда долларов США.

Установка другого «глаза» на смартфоны — это достижение, которого Prophesee стремится достичь на потребительском рынке. В качестве отправной точки они выбрали широко используемую функцию камер смартфонов — «размытие». Основной принцип заключается в объединении данных от датчиков EVS с традиционными датчиками, что позволяет системе заполнять промежутки между двумя кадрами событиями, записанными EVS за микросекунды. С помощью алгоритмов можно извлечь чистую динамическую информацию и исправить размытость изображения. Судя по демонстрации, предоставленной Prophesee для Interface News, эта функция впечатляет.

СМОТРИТЕ ТАКЖЕ: Xiaomi сообщает Q1 2023 Производительность: прогресс в производстве микросхем, электромобилях и искусственном интеллекте

Сотрудничество с Qualcomm также упростит выход EVS на рынок мобильных телефонов. «Мы работаем с Qualcomm и некоторыми другими OEM-производителями смартфонов, чтобы объединить наши датчики с обычными датчиками RGB, чтобы улучшить качество изображения мобильной фотографии и уменьшить размытие изображения», — сказал Лука Верре.

После интеграции датчиков EVS и алгоритма устранения размытия Prophesee с мобильной платформой Qualcomm Snapdragon выгодно еще больше открыть рынок. «Наше сотрудничество с Qualcomm имеет большое стратегическое значение. Qualcomm является лидером на рынке флагманских процессоров приложений для смартфонов высокого класса. Комбинируя датчики Prophesee Metavision с Qualcomm Snapdragon SoC, мы можем улучшить качество изображения смартфонов и продвигать наши решения среди некоторых OEM-производителей смартфонов», — сказал Лука Верре, подчеркнув долгосрочное сотрудничество с Qualcomm и намекнув, что телефоны с поддержкой EVS будут запущен в ближайшее время.

Помимо смартфонов, Лука Верре также уделял пристальное внимание гарнитурам виртуальной и дополненной реальности. Рано утром 6 июня по пекинскому времени Apple выпустила свой первый носимый дисплей XR (смешанной реальности), Apple Vision Pro и операционную систему VisionOS. Он должен дебютировать на рынке США в начале 2024 года, а затем распространиться на другие страны. Vision Pro сочетает в себе внутреннюю и внешнюю экосистемы и включает новые интерактивные методы, такие как виртуальные клавиатуры, отслеживание взгляда и управление жестами, которые можно применять в офисной работе, развлечениях и других сценариях. Несомненно, это также потребует значительного спроса на датчики.

Гарнитура Apple Vision Pro привлекла всеобщее внимание к темам XR, особенно благодаря своей отличной производительности в отслеживании взгляда и распознавании жестов. Это считается ключевой технологией взаимодействия для так называемых «пространственных вычислений».

И смартфоны, и XR являются частью плана Prophesee на потребительском рынке. «Многие производители XR проявили большой интерес к нашей технологии визуализации событий, и в настоящее время мы активно обсуждаем и оцениваем соответствующие сценарии применения с некоторыми клиентами», — сказал Лука Верре. Любопытство к продуктам XR, вызванное демонстрационным эффектом Apple, также послужило ориентиром для новичков. Основываясь на обсуждениях между производителями Prophesee и XR, отслеживание глаз, отслеживание рук или управление жестами, а также позиционирование в реальном времени и построение карт (SLAM) станут приложениями, в которых датчики EVS могут использоваться в области XR.

Что касается отношений между продуктами и капиталом, Prophesee имеет тесные связи с Китаем. Чтобы еще больше повысить свою конкурентоспособность на соответствующих рынках, в июле 50 года Prophesee завершила раунд финансирования серии C на сумму 2021 миллионов евро. Среди инвесторов — Sinovation Ventures из Китая, Huiyou Capital, Xiaomiи Шанхай Инно-Чип.

Лука Верре сказал, что Китай является одним из самых многообещающих рынков для Prophecy. Потенциальные целевые отрасли включают смартфоны, XR (расширенная реальность), IoT (Интернет вещей), робототехнику и электромобили, каждая из которых демонстрирует огромный рыночный потенциал. Ожидается, что эти рынки будут продолжать быстро развиваться в будущем. По его словам, Prophesee уже открыла офис в Шанхае, что позволяет компании иметь поддержку местной команды в Китае. Кроме того, он планирует открыть офис в Гонконге.

Кроме того, мы также поддерживаем контакты с некоторыми китайскими инвесторами и готовимся к новому раунду финансирования», — сказал Лука Верре.

Spot_img

Последняя разведка

Spot_img