Было создано много безумных многокамерных установок для захвата полного пространственного видео. Я помню разговор в Meta, который в основном сводился к тому, что "мы будем максимально полагаться на классическую геометрическую компьютерную визуализацию, прежде чем смотреть на алгоритмы машинного обучения", и я поддерживал это направление. Это было много лет назад, когда машинное обучение все еще казалось непредсказуемой алхимией, и, конечно, вы хотите максимально использовать истинные данные! Вложено много усилий в калибровку камер, синхронизацию и обработку данных, но это никогда не оправдало видение. Независимо от того, сколько у вас камер, любой сложный движущийся объект будет иметь закрытые области, и "дыры в реальности" резко выделяются для зрителя, который не находится точно в одной из точек камеры. Даже когда у вас хорошая видимость, неопределенности в многокамерной фотограмметрии делают вещи менее точными, чем хотелось бы. Также проводились эксперименты, чтобы увидеть, насколько хорошо можно сделать 3D-реконструкцию сцены с камер Quest, используя оффлайн-вычисления, и ответ все равно был "не очень хорошо", с довольно неровными поверхностями. Многие 3D-реконструкции выглядят потрясающе, когда прокручиваются в ленте на вашем телефоне, но не так хорошо, когда их увеличивают до полностью погружающего VR-рендеринга и ставят в контраст с качественной традиционной фотографией. Вам действительно нужны сильные приоритеты, чтобы решить проблему подгонки и заполнить пробелы в покрытии. Для архитектурных сцен вы можете получить некоторую выгоду от простых планарных приоритетов, но современный генеративный ИИ является идеальным приоритетом. Даже если безумные камеры полностью оправдали бы обещание, они все равно не смогли бы создать хорошую экосистему контента. YouTube не смог бы добиться успеха, если бы каждый создатель нуждался в камере RED Digital Cinema. (Довольно хорошая!) стереоскопическая 3D-фотогенерация в Quest Instagram — это первый шаг к будущему. Есть пути к стереовидео и статике 6DOF, а затем, в конечном итоге, к видео 6DOF. Сделайте все погружающим, а затем позвольте индивидуальной настройке медиа, учитывающего погружение.