Новости

May 18, 2023

ИИ помогает в реальности

«Раньше люди думали, что с существующим оборудованием потребительского уровня невозможно выполнять вычисления 3D-голографии в реальном времени», — сказал ведущий автор Лян Ши, доктор философии. студент факультета MIT

«Раньше люди думали, что с существующим оборудованием потребительского уровня невозможно выполнять вычисления 3D-голографии в реальном времени», — сказал ведущий автор Лян Ши, доктор философии. студент факультета электротехники и информатики Массачусетского технологического института. «Часто говорят, что коммерчески доступные голографические дисплеи появятся примерно через 10 лет, однако это утверждение существует уже несколько десятилетий».

Для решения проблемы окклюзии они также предоставили новый набор основанных на физике расчетов. Алгоритм с фотореалистичным набором обучающих данных оптимизировал свои собственные расчеты, успешно расширив свою способность генерировать голограммы. Сеть работала на несколько порядков быстрее, чем расчеты, основанные на физике. Метод способен генерировать голограммы за миллисекунды из изображений с информацией о глубине, предоставляемой типичными компьютерными изображениями, и может быть рассчитан с помощью многокамерной установки или лидарного датчика. Компактная тензорная сеть требует менее 1 МБ памяти. «Это ничтожно мало, учитывая десятки и сотни гигабайт, доступных на новейшем мобильном телефоне», — сказал исследователь Войцех Матусик. В виртуальной реальности команда считает, что технология может обеспечить более реалистичные пейзажи и устранить напряжение глаз и другие побочные эффекты длительного использования виртуальной реальности. Эта технология также может найти применение в дисплеях, способных модулировать фазу световых волн. «Это значительный скачок, который может полностью изменить отношение людей к голографии», — сказал Матусик. «Мы чувствуем, что нейронные сети созданы для этой задачи». Работа была опубликована в журнале Nature (www.doi.org/10.1038/s41586-020-03152-0).