Рендеринг с ямками - Foveated rendering
Рендеринг с ямками это рендеринг техника, которая использует ай трекер интегрирован с гарнитура виртуальной реальности уменьшить нагрузку на рендеринг за счет значительного снижения качества изображения в периферийное зрение (вне зоны наблюдения ямка ).[1][2]
Менее сложный вариант под названием фиксированная ямчатая визуализация не использует отслеживание глаз и вместо этого предполагает фиксированную точку фокусировки.[3][4]
История
На выставке Tech Crunch Disrupt SF 2014, Fove представила гарнитуру с ямчатым рендерингом.[5] За этим последовал успешный кикстартер в мае 2015 года.[6]
В Выставка CES 2016, Сенсомоторные инструменты (SMI) продемонстрировали новую систему слежения за глазами с частотой 250 Гц и работающее решение для рендеринга с ямками. Это стало результатом партнерства с производителем сенсоров камеры. Omnivision кто предоставил аппаратное обеспечение камеры для новой системы.[7][8]
В июле 2016 г. Nvidia продемонстрировано во время СИГГРАФ новый метод ямочного рендеринга, заявленный как невидимый для пользователей.[1][9]
В феврале 2017 года Qualcomm анонсировала свой комплект для разработки виртуальной реальности Snapdragon 835 (VRDK), который включает в себя поддержку рендеринга под названием Adreno Foveation.
В течение CES 2019 7 января HTC анонсировала грядущую гарнитуру виртуальной реальности под названием Vive Pro Eye с отслеживанием взгляда и поддержкой фоветированного рендеринга.[10][11]
В декабре 2019 г. Facebook с Oculus Quest SDK предоставил разработчикам доступ к динамическому рендерингу с фиксированными ямками, позволяя изменять уровень детализации на лету через API.[12]
Использовать
По словам главного ученого Майкл Абраш в Oculus, используя фоветированный рендеринг в сочетании с разреженный рендеринг и глубокое обучение Реконструкция изображения может потребовать визуализации на порядок меньшего количества пикселей по сравнению с полным изображением.[13] Позже эти результаты были продемонстрированы и опубликованы.[14]
Смотрите также
Рекомендации
- ^ а б Пэрриш, Кевин (22.07.2016). «Nvidia планирует доказать, что новый метод улучшает качество изображения в виртуальной реальности». Цифровые тенденции. Получено 2017-02-02.
- ^ "Понимание ямчатой визуализации". Sensics. 2016-04-11. Получено 2017-02-04.
- ^ Карботт, Кевин (30 марта 2018 г.). «Что такое рендеринг с фиксированной ямкой и почему это важно?». Оборудование Тома. Получено 9 сентября 2019.
- ^ Орланд, Кайл (21 марта 2016 г.). «Как Valve добилась приемлемого уровня виртуальной реальности, работающей на видеокарте четырехлетней давности». Ars Technica. Получено 9 сентября 2019.
- ^ «FOVE использует отслеживание взгляда, чтобы сделать виртуальную реальность более захватывающей». TechCrunch. Получено 2019-02-06.
- ^ "FOVE: первая в мире гарнитура виртуальной реальности для отслеживания глаз". Kickstarter. Получено 2019-02-06.
- ^ Мейсон, Уилл (2016-01-15). «Отслеживание взгляда SMI 250 Гц и рендеринг с фокусом - реальность, и цена может вас удивить». ЗагрузитьVR. Получено 2017-02-02.
- ^ Мейсон, Уилл (2016-01-15). «Отслеживание взгляда SMI 250 Гц и рендеринг с фокусом - реальность, и цена может вас удивить». ЗагрузитьVR. Получено 2020-06-18.
- ^ «NVIDIA сотрудничает с SMI в области инновационной техники рендеринга, улучшающей виртуальную реальность». Nvidia. 2016-01-21. Получено 2017-02-02.
- ^ Статт, Ник (2019-01-07). «HTC анонсирует новую гарнитуру виртуальной реальности Vive Pro Eye с функцией отслеживания движения глаз». Грани. Получено 2019-01-14.
- ^ Ядровый рендеринг, 2018-07-01, получено 2018-07-01
- ^ «Oculus Quest получает динамический фиксированный рендеринг с ямками». VentureBeat. 2019-12-22. Получено 2020-01-21.
- ^ Oculus (26.09.2018), Oculus Connect 5 | Основной день 01, получено 2018-09-30
- ^ Капланян, Антон (15.05.2020). «DeepFovea: рендеринг AR / VR, вдохновленный человеческим видением». Получено 2020-05-15.