Vision Pro полностью построен на отслеживании рук, в то время как Quest 3 в первую очередь использует контроллеры, но также поддерживает отслеживание рук в качестве альтернативного варианта для некоторого контента. Но где лучше отслеживание рук? Вы можете быть удивлены ответом.

Задержка отслеживания рук Vision Pro

Поскольку Vision Pro не поддерживает контроллеры движения, единственным способом ввода данных, основанным на движении, является отслеживание рук. Базовая система ввода объединяет руки и глаза для управления всем интерфейсом.

Перед запуском гарнитуры мы обнаружил несколько кадров, которые позволили нам оценить задержку отслеживания рук в пределах 100-200 мс., но это довольно большое окно. Теперь мы провели собственный тест и точнее находим В бета-версии VisionOS v128 время отслеживания рук Vision Pro составит около 1.1.1 мс.

Вот как мы это измерили. Используя снимок экрана с гарнитуры, на котором видна как проходящая рука, так и виртуальная рука, мы можем увидеть, сколько кадров проходит между движением проходящей руки и движением виртуальной руки. Мы использовали систему Apple Persona для ручного рендеринга, чтобы устранить любую дополнительную задержку, которую может внести Unity.

После нескольких тестов (каламбур) мы обнаружили, что это около 3.5 кадров. При скорости захвата 30 кадров в секунду это 116.7 мс. Затем мы добавляем к этому Vision Pro известная задержка прохождения около 11 мс, для окончательного результата — 127.7 мс задержки фотона при отслеживании рук.

Мы также проверили, сколько времени проходит между сквозным касанием и виртуальным вводом (чтобы увидеть, происходит ли полное скелетное отслеживание рук медленнее, чем простое обнаружение касания), но мы не обнаружили существенной разницы в задержке. Мы также провели тестирование в различных условиях освещения и не обнаружили существенной разницы.

Задержка отслеживания рук в Quest 3

Как это соотносится с Quest 3, гарнитурой, которой управляют не только руки? Используя аналогичный тест, мы обнаружили, что задержка отслеживания рук Quest 3 составляет около 70 мс на Quest OS v63.. Это существенное улучшение по сравнению с Vision Pro, но при фактическом использовании гарнитуры можно подумать, что Quest 3 еще ниже задержка отслеживания рук. Но оказывается, что часть воспринимаемой задержки замаскирована.

Вот как мы это узнали. Используя захват через объектив с частотой 240 Гц, мы провели тот же тест движения, что и с Vision Pro, чтобы выяснить, сколько времени проходит между движением проходящей руки и виртуальной рукой. Получилось 31.3 мс. В сочетании с квестом 3 известная задержка прохождения около 39 мс в результате задержка фотона Quest 3 при отслеживании вручную составляет около 70.3 мс.

При использовании Quest 3 отслеживание рук кажется даже более быстрым, чем предполагает этот результат, так что же дает?

Поскольку задержка прохождения Quest 3 примерно в три с половиной раза больше, чем у Vision Pro (11 мс против 39 мс), время между движением вашей руки и движением виртуальной руки по-видимому, всего 31.3 мс (по сравнению со 116.7 мс у Vision Pro).

â € â € â € â €

Здесь важный момент: задержка и точность отслеживания рук — две разные вещи. Во многих случаях они могут иметь даже обратную зависимость. Если вы оптимизируете свой алгоритм отслеживания рук по скорости, вы можете потерять некоторую точность. А если оптимизировать его на точность, то можно немного пожертвовать скоростью. На данный момент у нас нет надежной системы отслеживания рук. точность для любой гарнитуры, вне интуитивного ощущения.

• SEO-контент и PR-распределение. Получите усиление сегодня.
• PlatoData.Network Вертикальный генеративный ИИ. Расширьте возможности себя. Доступ здесь.
• ПлатонАйСтрим. Интеллект Web3. Расширение знаний. Доступ здесь.
• ПлатонЭСГ. Углерод, чистые технологии, Энергия, Окружающая среда, Солнечная, Управление отходами. Доступ здесь.
• ПлатонЗдоровье. Биотехнологии и клинические исследования. Доступ здесь.
• Источник: https://www.roadtovr.com/apple-vision-pro-meta-quest-3-hand-tracking-latency-comparison/