Рендеринг с ямками - Foveated rendering

Рендеринг с ямками это рендеринг техника, которая использует ай трекер интегрирован с гарнитура виртуальной реальности уменьшить нагрузку на рендеринг за счет значительного снижения качества изображения в периферийное зрение (вне зоны наблюдения ямка ).[1][2]

Менее сложный вариант под названием фиксированная ямчатая визуализация не использует отслеживание глаз и вместо этого предполагает фиксированную точку фокусировки.[3][4]

История

На выставке Tech Crunch Disrupt SF 2014, Fove представила гарнитуру с ямчатым рендерингом.[5] За этим последовал успешный кикстартер в мае 2015 года.[6]

В Выставка CES 2016, Сенсомоторные инструменты (SMI) продемонстрировали новую систему слежения за глазами с частотой 250 Гц и работающее решение для рендеринга с ямками. Это стало результатом партнерства с производителем сенсоров камеры. Omnivision кто предоставил аппаратное обеспечение камеры для новой системы.[7][8]

В июле 2016 г. Nvidia продемонстрировано во время СИГГРАФ новый метод ямочного рендеринга, заявленный как невидимый для пользователей.[1][9]

В феврале 2017 года Qualcomm анонсировала свой комплект для разработки виртуальной реальности Snapdragon 835 (VRDK), который включает в себя поддержку рендеринга под названием Adreno Foveation.

В течение CES 2019 7 января HTC анонсировала грядущую гарнитуру виртуальной реальности под названием Vive Pro Eye с отслеживанием взгляда и поддержкой фоветированного рендеринга.[10][11]

В декабре 2019 г. Facebook с Oculus Quest SDK предоставил разработчикам доступ к динамическому рендерингу с фиксированными ямками, позволяя изменять уровень детализации на лету через API.[12]

Использовать

По словам главного ученого Майкл Абраш в Oculus, используя фоветированный рендеринг в сочетании с разреженный рендеринг и глубокое обучение Реконструкция изображения может потребовать визуализации на порядок меньшего количества пикселей по сравнению с полным изображением.[13] Позже эти результаты были продемонстрированы и опубликованы.[14]

Смотрите также

Рекомендации

  1. ^ а б Пэрриш, Кевин (22.07.2016). «Nvidia планирует доказать, что новый метод улучшает качество изображения в виртуальной реальности». Цифровые тенденции. Получено 2017-02-02.
  2. ^ "Понимание ямчатой ​​визуализации". Sensics. 2016-04-11. Получено 2017-02-04.
  3. ^ Карботт, Кевин (30 марта 2018 г.). «Что такое рендеринг с фиксированной ямкой и почему это важно?». Оборудование Тома. Получено 9 сентября 2019.
  4. ^ Орланд, Кайл (21 марта 2016 г.). «Как Valve добилась приемлемого уровня виртуальной реальности, работающей на видеокарте четырехлетней давности». Ars Technica. Получено 9 сентября 2019.
  5. ^ «FOVE использует отслеживание взгляда, чтобы сделать виртуальную реальность более захватывающей». TechCrunch. Получено 2019-02-06.
  6. ^ "FOVE: первая в мире гарнитура виртуальной реальности для отслеживания глаз". Kickstarter. Получено 2019-02-06.
  7. ^ Мейсон, Уилл (2016-01-15). «Отслеживание взгляда SMI 250 Гц и рендеринг с фокусом - реальность, и цена может вас удивить». ЗагрузитьVR. Получено 2017-02-02.
  8. ^ Мейсон, Уилл (2016-01-15). «Отслеживание взгляда SMI 250 Гц и рендеринг с фокусом - реальность, и цена может вас удивить». ЗагрузитьVR. Получено 2020-06-18.
  9. ^ «NVIDIA сотрудничает с SMI в области инновационной техники рендеринга, улучшающей виртуальную реальность». Nvidia. 2016-01-21. Получено 2017-02-02.
  10. ^ Статт, Ник (2019-01-07). «HTC анонсирует новую гарнитуру виртуальной реальности Vive Pro Eye с функцией отслеживания движения глаз». Грани. Получено 2019-01-14.
  11. ^ Ядровый рендеринг, 2018-07-01, получено 2018-07-01
  12. ^ «Oculus Quest получает динамический фиксированный рендеринг с ямками». VentureBeat. 2019-12-22. Получено 2020-01-21.
  13. ^ Oculus (26.09.2018), Oculus Connect 5 | Основной день 01, получено 2018-09-30
  14. ^ Капланян, Антон (15.05.2020). «DeepFovea: рендеринг AR / VR, вдохновленный человеческим видением». Получено 2020-05-15.

внешняя ссылка