ТОП лучших VR видео 360 градусов на все времена

Технологии съемки видео и фильмов за последние несколько десятков лет шагнули далеко вперед – совсем недавно в домах россиян появились первые телевизоры, потом – кассетные и дисковые плейеры. А уже сегодня все больше поклонников привлекают видео в формате 360 градусов, которые нужно смотреть в очках или шлеме VR.

Мы подготовили подборку самых впечатляющих панорамных видео, где зритель ощутит эффект реального присутствия на съемочной площадке. Море незабываемых впечатлений и головокружительных эмоций, от которых буквально захватывает дух, при просмотре обеспечено!

ТОП-7 классных VR 360-видео

Видео в формате VR – настоящий тренд, который кардинально меняет представление о цифровых технологиях. Только задумайтесь – самостоятельно управлять камерой и чувствовать реальное погружение, будто события происходят не на экране, а вокруг вас, это дорогого стоит. В подборку лучших видео 360 градусов вошли:

1. 360° cockpit view | Fighter Jet | Patrouille Suisse | Virtual Reality – ролик, где можно почувствовать себя настоящим летчиком-испытателем, паря за облаками и выполняя невероятные трюки в небе;
2. 360 Camera | Eiger North Face – Summit – находка для тех, кто хотел стать альпинистом, но пока не имеет возможности покорить заснеженную вершину. Скалы, пронзающий ветер и запредельная высота – все это можно ощутить при просмотре.
3. Lamborghini Ride 360 – гонка на высокой скорости по пригородным трассам, возможность почувствовать себя мастером дрифта и получить выброс адреналина без риска для жизни.
4. Wingsuit 360° Experience – прыжок с парашютом со скалы и более 70 секунд завораживающего полета над пропастью, где взору открываются невероятные природные ландшафты гор, неба, голубого озера.
5. Red Bull F1 360° Experience – еще одно отличное видео для тех, кто хотел стать гонщиком. Это классная возможность наверстать упущенное и даже поучаствовать в соревновании Форумы 1, управляя мощным и быстрым болидом.
6. Vikersund Ski-Flying 360° Experience – спуск с крутого заснеженного трамплина в горах на лыжах. От скорости 100% захватит дух, а открывающиеся вокруг виды подарят еще больше положительных эмоций.
7. VR 360 Roller Coaster Ride 4K — Busch Gardens VR Simulation – отличная возможность прокатиться на американских горках, выполняя невероятные подъемы и спуски, а также погружаясь в кромешную тьму тоннелей.

Самые интересные и классные 360 видео – это полеты на воздушном шаре, самолете, а также гонки, спуски под воду, подъем в горы. Такие видео заряжают эмоциями, дают массу впечатлений и захватывают дух от адреналина, скорости и окружающей красоты.

Рейтинг самых популярных 360-видео на YouTube

Платформа YouTube – место, где собраны миллионы роликов, многие из которых представляют неподдельный интерес и собирают многотысячную аудиторию зрителей. Сервис позволяет смотреть и видео 360 градусов. В топ VR роликов по числу просмотров вошли:

• Best VR 360 Video – видео виртуальной реальности, где предстоит путешествие по городским улицам, среди гор, моря, пляжей и других интересных локаций.
• Mega Coaster: Get Ready for the Drop – приготовьтесь к спуску с американских горок на скорости свыше 100 км/ч с крутыми поворотами и реалистичным звуком.
• 360 | It – ролик для тех, кто не боится настоящих ужасов и не испугается спуститься в канализацию ночного города, побродив среди злобных маньяков и монстров, выпрыгивающих из-за углов.
• Great White Sharks 360 Video 4K!! — Close encounter on Amazing Virtual Dive – возможность поплавать под водой и увидеть рядом огромную белую акулу.
• 360° cockpit view | SWISS Airbus A320 | Geneva – Zurich – панорамное видео из кабины пилотов, включающее взлет и посадку воздушного судна.
• Lions 360° | National Geographic – крутая возможность насладиться видео с королями саванны. Удастся понаблюдать за жизнью львов в естественных условиях.

На самом деле, интересных и захватывающих дух видео гораздо больше. Вы можете почувствовать себя на лоне дикой природы, на головокружительных аттракционах, при подводном путешествии или безмятежном отдыхе на пляже – куда отправляться сегодня, решаете только вы. Кстати, в 3D формате можно смотреть не только короткие видео, но и полноценные фильмы.

Панорамное 360-видео (VR видео 360)

Главная фишка VR-видео 360: вместо того, чтобы повиноваться воле оператора и режиссёра монтажа, зритель самостоятельно озирается и выбирает для себя наиболее интересный ракурс, вылавливает особо вкусные детали и просто получает удовольствие от медиа в новом формате. А ещё хорошие панорамные видео 360 отличаются тем, что их хочется пересматривать (и в этом однозначно есть смысл) не раз и даже не два, ведь сразу все детали схватить не сможешь при всём желании.

Где искать самые эффектные 360-видео VR?

Основных и самых крупных источников три: Oculus VR, Samsung VR и YouTube (точнее, канал Virtual Reality). Помимо них есть несколько независимых сервисов, не таких масштабных и, в большинстве своём, узкоспециализированных.

Samsung VR

Лидирует в тройке фирменный сервис Samsung, в первую очередь, благодаря организации и навигации по контенту. Впрочем, и сама видеотека не подкачала: богатый выбор на любой вкус, включая даже интерактивные ролики. Всё тщательно структурировано, присутствует поиск по названиям или ключевым словам, а при желании можно сохранить видео в память смартфона для оффлайн-просмотра. Вообще приложение Samsung VR может работать как плеер и проигрывать любые видеофайлы с вашего смартфона.

Примечательно то, что в онлайновой видеотеке можно найти пять русскоязычных каналов на разную тематику: новости, путешествия, кино, автомобили и события. Поддержка родного русского языка пока что редкость для подобных сервисов. Особенно приятно в приложении SamsungVR, что контент обновляется ежедневно, и частенько появляются эксклюзивные ролики, например 360-клип по мотивам «Звездных войн» от Disney.

Вдобавок приложение полноценно функционирует без VR-очков, то есть все 360-градусные видео можно просматривать прямо с экрана смартфона. Конечно, это не так удобно, ведь придётся вертеться всем телом вместе с девайсом в руке. Но переключиться на просмотр через Gear VR можно в три простых шага: тапнуть на соответствующий значок, вставить смартфон в очки и нажать Play.  

Oculus Video

Компанию Samsung VR составляет сервис, обладающий одним, но важным преимуществом: он интегрирован с такими мастодонтами как Facebook,

Twitch и Vimeo. Правда, последние два отображают привычное 2D-видео, зато в
необычной окружающей среде: например, на поверхности Луны или же на экране потерянного в лесу смартфона Samsung (зритель в масштабе муравья). Увы, мы не можем показать скриншоты, поскольку в прошивке стоит блок для фото- и видеосъёмки в Oculus Video.

Интеграция с крупнейшей соцсетью мира обеспечивает постоянный приток самых разных VR-видео, однако, увы, тематически видео никак не разделены: есть новые, лучшие, сохранённые пользователем (не в телефоне, а в облаке Facebook) и ещё репосты друзей. Найти видео по названию тоже не получится, зато можно посмотреть контент из в памяти телефона.

YouTube (Virtual Reality)

С самым популярным видеосервисом всё внезапно оказалось очень непросто. В инфраструктуру Gear VR он никак не интегрирован, и, чтобы просмотреть VR-ролики, загруженные на YouTube, придётся зайти в браузер «Samsung Интернет», перейти на канал, запустить интересующее видео, перевести его в полноэкранный режим и включить просмотр 360 градусов. При желании всё то же самое можно сделать на РС или на смартфоне, но с определёнными ограничениями.

Это явно не тот подход, которого ждут пользователи самого популярного видеосервиса, пусть даже принадлежащего Google, который развивает собственную VR-среду. Но зрителю есть ради чего сделать пару лишних тапов или кликов: на канале он найдёт около 20 регулярно обновляемых плейлистов и сотни 360°-видео на любой вкус.

Другие сервисы

Другие VR-приложения созданы преимущественно для просмотра фирменного контента. Например, Discovery VR, который публикует 360-градусные видео со всего мира, или Next VR, позволяющий посмотреть наилучшие моменты спортивных матчей с самых выгодных точек. Нашёлся уголок и для стримингового сервиса Netflix — любимые сериалы можно смотреть прямо в виртуальности (в 2D, но в виртуальной гостиной).

В конце мы перечислим ещё несколько любопытных VR-сервисов. Но заметим, что в большинстве своём они страдают характерной «болезнью новичка» — отсутствием системности. Поэтому 4PDA решил внимательно изучить представленный в Gear VR видеоконтент и немного его систематизировать.

Что смотреть в формате 360?

Если сводить весь диапазон разномастных видео, представленных в сервисах Gear VR, к максимально общим категориям, то насчитаем мы их четыре штуки: познавательно-развлекательные путешествия, присутствие на различных мероприятиях, VR-расширения известных вселенных и все остальные.

Виртуальные путешествия VR

Возможность побывать там, где не ступала ваша нога, но очень бы хотела — самое простое, что может предложить виртуальная реальность. Поэтому нет ничего удивительного в том, что трэвел-роликов в VR больше всего: зритель в два тапа может почувствовать себя путешественником на Гавайи, Эверест, в десятки и сотни стран, полетать на воздушном шаре над Египтом, воочию увидеть последствия торнадо или, например, поучаствовать в исторической реконструкции Гражданской войны в США.

Некоторые компании уже умудрились оседлать конька виртуальщины и предложить более или менее профессиональный контент. Тот же Discovery VR радует большим количеством различных фирменных роликов.

Есть и русскоязычные ролики самого разного формата — за это спасибо приложению Samsung VR.

При подготовке к виртуальным путешествиям нужно иметь в виду важную деталь: вас будет преследовать ощущение резкой и слишком частой смены кадра. Казалось бы, велика беда: это исконная и неизбежная особенность монтажа. Так-то оно так, но вместо плоской картинки перед нами 360-градусная панорама, на изучение которой нужно больше времени. И если в сюжетных роликах обрыв сцены смотрится так же, как и в кино, то для путевых зарисовок явно нужно искать какое-то иное решение. Единственная альтернатива на данный момент — непрерывный план на весь ролик, что тоже не панацея.

Если же вам и целого мира мало, то найдётся множество совсем иных путешествий. Как насчёт прогулки по джунглям, где носятся динозавры, или полёт сквозь бескрайние космические пространства по маршруту Марс-Сатурн?

Само собой, ни о какой съёмке здесь речи не идёт: чистой воды моделирование. Но если оно качественно сделано, то результат изучаешь с не меньшим, а то и с большим интересом, чем тот же полёт на воздушном шаре от первого лица. Получается, что единственное ограничение для авторов подобных роликов — их собственная фантазия, а дело зрителя — смотреть и восхищаться.

Посещения мероприятий

Посетить концерт любимой музыкальной группы или фестиваль Burning Man, поучаствовать в самом настоящем дерби, попасть на элитный показ мод в Москве или, в конце концов, своими глазами посмотреть церемонию инаугурации Дональда Трампа — в этом, далеко не полном списке каждый найдёт для себя желание по вкусу. И если раньше подобные мечты в большинстве случаев оставались мечтами, то теперь они становятся реальностью, пусть и виртуальной. Такие ролики легко найдутся в «Лучшем» на Facebook (сервис Oculus Video) или на YouTube.

Особенности монтажа, о которых говорилось выше, в этих видео бросаются в глаза ещё сильнее: именно в тот момент, когда ты адаптировался к данному конкретному плану, он резко меняется, и вновь надо искать основное место действия и центр композиции. Невольно начинаешь особенно ценить видео, снятые с одной точки (часто они представляют собой таймлапсы): времени рассмотреть все интересующие детали точно хватит.

Например, очень интересную виртуальную интерпретацию получила композиция Song for Someone от группы U2: на пустой музыкальной арене в узком кругу сидят участники группы, включая самого Боно, играют и поют лично для зрителя, который находится в центре. К сожалению, показать, как это выглядит (равно как и инаугурацию Трампа) мы не можем из-за блокировки скриншотов и записи видео в сервисе Oculus Video.

В итоге невольно закрадывается мысль: быть может, в скором будущем представить собственный VR-контент будет хорошим тоном для любого уважающего себя организатора, будь то рок-концерт группы с мировым именем или финал Лиги чемпионов.

Расширения вселенных

Данная категория видеороликов — специально для тех, кому мало книги, фильма, сериала, хочется ещё и ещё, а идеально было бы вообще сбежать в эту вселенную раз и навсегда. Конечно, последнее пока ещё из разряда фантастической антиутопии (где, надеемся, и останется), однако ненадолго оказаться в столь полюбившемся мире и узнать про него кое-что новенькое — запросто, ищите в любом крупном сервисе Gear VR.

В качестве примера приводим кусочек из ролика, посвящённого франшизе «Марсианин», однако в закромах Gear VR прячется немало контента по мотивам Star Wars, Game of Thrones, Assassin’s Creed и многих других франшиз.

Одним из самых удачных примеров подобного расширения, на наш взгляд, является дополнительная 10-минутная серия одного из самых необычных сериалов — «Мистер Робот». Создатели подошли к ней так же тщательно, продуманно и аккуратно, как и к основному сериалу. Получилась гармоничная и интересная история с необычными визуальными находками и хорошим монтажом.

Именно эта категория VR-контента отличается продуманным отношением к тому, что увидит зритель и, главное, насколько ему будет комфортно это смотреть. Казалось бы, очевидно: если внимание зрителя в конце кадра приковано к конкретной точке (в силу того, что именно там развивается основное событие), то центр композиции следующего должен быть в этой же самой точке. Как выяснилось, далеко не все соблюдают даже это простое правило.

Другие 360-видео

Как водится, категория «другое» в VR самая большая количественно и самая разная качественно. Поэтому имеет смысл остановиться на наиболее интересных, перспективных, но всё-таки единичных примерах того, какой может быть виртуальная реальность.

Так, полноценные проекты для VR (фильмы и сериалы) пока ещё большая редкость: снимать слишком сложно, а аудитория и финансовая отдача недостаточно большие. Однако и здесь встречаются весьма любопытные проекты. Например, сериал GONE, снятый специально для Samsung VR, рассказывает историю пропавшей девочки. Сюжет мистический и немного приевшийся, но в этот раз на первых ролях — подача. Это одно из интерактивных видео в магазине Gear VR.

Съёмочная группа на порядок усложнила себе задачу и снимала сразу на несколько 360-градусных камер, которые «прятала» во время пост-продакшена. Время от времени зритель волен переключаться между ними и узнавать дополнительные подробности страшной истории. В сервисах VR-видео есть ролики со схожей подачей материала, однако столь крупный проект пока один.

Чего нельзя сказать о сериалах вообще — в Samsung VR активно продвигается сериал Invisible. И не зря. Он не может похвастаться множественными точками съёмки, зато это полноценный многосерийный мистический триллер.

На виртуальном видеорынке есть и другие экспериментальные и оттого особенно интересные проекты. Давайте в качестве примера представим себе, как выглядела бы реальность, будь она карандашным рисунком. Или даже ещё интереснее: что, если бы можно было попасть в знаменитую «Звёздную ночь» Винсента Ван Гога? Как говорится, любой каприз за ваши деньги… а на самом деле бесплатно.

Любители пикантного тоже не будут разочарованы: в виртуальных тенётах найдётся небольшое количество различных роликов с девушками. Ничего экстраординарного или законодательно запрещённого — просто приятные глазу сценки с героинями в купальниках, которые, к примеру, загорают на пляже или играют в волейбол.

Юзабилити

Осталось только сказать два слова о том, насколько удобно смотреть 360-градусные видео в Gear VR. Скажем откровенно: это полностью зависит от того, насколько удобно вам постоянно вертеть головой, потому что в остальном здесь полный порядок. Даже при длительном использовании линзы девайса не потеют, а мягкая внутренняя обивка предотвращает натирания и вообще какие-либо неприятные последствия.

Видео в виртуальной реальности поначалу действительно несколько сбивает с толку, и на то есть все причины, ведь ни базовые принципы VR, ни тонкости подачи материала в этой сфере пока не устоялись. Однако стоит чуть-чуть привыкнуть и разобраться — и вынырнуть из этой глубины уже почти невозможно. Ещё бы: только вчера возможность путешествий на край света и за край или посещение вожделенного концерта, не вставая с дивана, была фантастикой. А сегодня делов-то: гаджет зарядил — и вперёд!

Источник: https://4pda.ru/2017/02/14/335342/

Будущее VR видео — VR180 от Google / Хабр

Хинт: этот gif запускается и останавливается по клику

S3D: No pain IS gain

В апреле этого года Google анонсировала технические детали нового формата для VR-видео — VR180. Спецификации формата были выложены в репозиторий Google на GitHub, производителям камер было предложено делать специальные камеры, формат стал поддерживаться на YouTube.

Основная идея довольно проста. В «обычном» VR-видео — 360-видео — можно вертеть головой во всех направлениях по горизонтали, при этом основное действие происходит, как правило, с какой-то одной стороны, а на устройство транслируется весь поток, что приводит к передаче и хранению избыточной информации. По факту в подавляющем большинстве случаев нет необходимости в реализации просмотра на 360 градусов — для достижения того же эффекта вполне достаточно и 180 градусов. При этом «вторая половина» кадра используется для второго ракурса, то есть получается стерео.

Таким образом, предложенный формат обеспечивает даже большее ощущение погружения, чем от 360-видео, является более дешевым в производстве, более простым в съемке и не имеет проблем со стичингом.

Как такое возможно, и что же предложили в Google?

Кому интересно VR-видео ближайшего будущего — добро пожаловать под кат!

Введение в VR180

Сначала о хорошем.

VR180 заметно проще снимать, чем 360-видео. Для съемки качественного 360-видео используется до 17 камер (пример от Xiaomi ниже), что порождает массу проблем с размером рабочего видео, частичным отказом, перегревом, нестабильным фокусом камер и т. д. При этом, с точки зрения простого пользователя, лучшими признавались камеры с двумя fisheye объективами (раз, два, три).

Источник

Новый формат снимается также двумя камерами. Это заметно снижает стоимость конечного устройства. При этом техника съемки сильно упрощается, поскольку остаются актуальны все приемы работы с обычной камерой (только результат получается потенциально более зрелищным и с большим погружением). Для успеха формата важно, чтобы им легко могли воспользоваться каждая домохозяйка и каждый школьник. Поэтому, чем проще — тем лучше.

Далее, в VR180 пропадают проблемы так называемого стичинга (склейки) — крайне заметные артефакты в местах, где сшивались картинки с двух камер. Еще недавно казалось, что пройдет немного времени, и проблемы стичинга будут решены. Увы, они оказались гораздо сложнее. Если на границе склейки есть быстро движущийся или полупрозрачный объект, то на нынешнем уровне развития алгоритмов обработки видео в автоматическом режиме проблема не решается. Безусловно, алгоритмы автоматического матирования развиваются, однако отсутствие артефактов не гарантируется даже с Deep Learning методами. В VR180 стичинга нет, а значит, в принципе нет и связанных с ним проблем.

И, наконец, почти всегда снятое 360-видео является плоским. То есть с точки зрения бинокулярного зрения картинка воспринимается висящей на некотором экране перед глазами, что зачастую уменьшает «вау-эффект» и эффект погружения, а VR180 изначально и по умолчанию — стереоформат.

Все эти моменты выглядят весьма многообещающе с точки зрения прогноза успеха формата. Как следствие, производители довольно активно начали выпускать камеры, специально ориентированные на VR180, например:

Тот факт, что на рынок VR180 вышла Xiaomi, безусловно, внушает оптимизм.

Также появились решения, позволяющие самому собрать камеру для съемки VR180 из  двух обычных камер с fisheye-объективами. Иногда достаточно только напечатать или купить крепление, чтобы начать эксперименты (ниже примеры c GoPro, цифровыми «мыльницами», зеркалками Sony):

Источник

Источник: http://products.entaniya.co.jp/en/products/equipment-for-3d-stereo-180-vr/

Кроме того, появились забавные решения, когда одна камера поддерживает съемку в форматах и VR180, и видео 360 (это «раскладушка», которая в свернутом состоянии снимает 360, а в развернутом — VR180):

Источник

Помимо прочего, открылись новые горизонты экспериментов по съемке VR-видео (на фото YI Horizon VR180 camera от Xiaomi):

Количество новых устройств для съемки в VR180 весьма велико, и это заметно способствует популярности нового формата.

Внедрение VR180

Сегодня компании пытаются внедрить VR везде, где только можно, хотят сделать формат более популярным и распространенным. А главное — дешевым. Google не исключение. Все помнят их бюджетное решение по внедрению «шлемов виртуальной реальности» (англ. Head Mounted Display, HMD) в широкое пользование — Google Cardboard.

Его функционал, конечно же, никак не сравнится с дорогими HMD, но основная цель достигнута: сделать VR доступнее и превратить каждый смартфон в шлем виртуальной реальности при дополнительных затратах менее $1.

Развивая успех, Google запускает новый формат VR180 с поддержкой загрузки на YouTube и со специальным фильтром для поиска:

Так выглядит кадр видео нового формата «изнутри»:

В MP4 добавлены специальные мета-данные, которые превращают видео в сферическое. Вообще говоря, если просто перейти по ссылке, то скорее всего вы увидите обычное плоское видео Это связано с тем, что помимо VR180 видео на сайт загружена еще проекция одного из ракурсов (левого) на обычный прямоугольник. Чтобы увидеть картинку как на рисунке выше, нужно, например, скачать видео именно в чистом MP4 формате. В основном, они имеют разрешение 4K. Возможность движения камеры гарантированно появляется при просмотре на мобильном устройстве с приложением Cardboard (Google Play, AppStore). Ну и, конечно же, в полноценном HMD.

Съемка таких видеороликов, по аналогии с картонными шлемами, тоже должна была получиться достаточно дешевой для широкого распространения среди пользователей. Камера, снимающая видео в таком формате, стоит в районе 300 долларов. По сравнению с дорогими стереоригами это абсолютно новый уровень. Казалось бы, все прекрасно. Однако проблема в том, что новый формат — это стереоформат, а у стерео, как известно, существует масса сложно решаемых проблем.

Качество стерео в VR

Как только речь заходит про стерео (в просторечии 3D), сразу вспоминаются головные боли от походов в 3D кинотеатры. Мы рассматривали причины такого дискомфорта в большом цикле статей (раз, два, три, четыре, пять, шесть, семь) гораздо более подробно, но применительно к стереофильмам. Если коротко, то по некоторому ряду причин многие 3D фильмы снимаются (или конвертируются) так, что чувствительным к артефактам стереовидео зрителям остается только заблаговременно брать с собой цитрамон. К сожалению, большинство проблем в 3D фильмах связаны со стереоскопическими артефактами, которые также встречаются в VR180. Значит, все факторы, вызывающие дискомфорт в таких фильмах, также будут вызывать дискомфорт и при просмотре видео в виртуальной реальности. Даже базовая проверка качества контента VR180 показала, что оно сопоставимо с качеством обычных стерео примерно середины прошлого века…

Другими словами, энтузиасты будут в восторге, но массовый зритель будет жаловаться.

Для анализа качества стереовидео использовался проект VQMT3D, разрабатываемый в видеогруппе лаборатории компьютерной графики и мультимедиа на факультете ВМК, МГУ. Его предназначение — предоставить авторам стереофильмов возможность отслеживать возникновение всех возможных артефактов на этапе post-production. А поскольку VR180 — тоже стерео, то де-факто проект применим и к этому формату с некоторыми оговорками. В приведенных далее примерах информация по кадрам получена с помощью VQMT3D.

Искажения цвета

Данная проблема — самая простая для понимания и относительно простая для исправления. Закройте один глаз и посмотрите на какой-нибудь объект. Теперь сделайте то же самое с другим глазом и ответьте на вопрос: меняются ли цвета при смене глаза? В общем случае — нет. Так и в стереовидео не должно быть различий в цвете одних и тех же объектов для левого и правого ракурсов. Однако вот что мы видим в реальных видео, взятых на YouTube (обратите внимание на однотонные области, например, на небо или на воду):

Ссылка на видео

Искажения цвета могут возникать по многим причинам, например, из-за различной калибровки камер, нагрева их матриц или при засветке края объектива. Поэтому, даже при идентичных параметрах съемки для одинаковых камер, цвета могут заметно разойтись.

Наиболее удобно визуализировать этот артефакт с использованием «шахматки», когда правый ракурс приводится к левому с помощью компенсации движения, а затем выбираются блоки из левого и приведенного правого ракурсов в шахматном порядке.

Ниже пример, когда источники света попадают в кадр:

Ссылка на видео

Мало того, что сами источники света сильно различаются на ракурсах, так они еще и бликами искажают цвета на всем изображении.

Более жесткий пример, когда солнце попадает в кадр:

Ссылка на видео

По причине неудачной постановки камеры напротив солнца, возникает жуткий артефакт в виде красного блика на матрице. Искажения цвета достаточно редко встречаются в реальной жизни, а артефакты указанного выше типа не встречаются вообще, что в итоге приводит к накоплению усталости при просмотре. К сожалению, у наиболее чувствительной части зрителей усталость переходит в головную боль.

Различия по резкости

Еще одна проблема, возникающая при съемке стереовидео, — различия в резкости в левом и правом ракурсах. В реальной жизни данная проблема встречается довольно часто. Например, если вы просидите 10–12 часов за компьютером, напряженно всматриваясь в экран (согласитесь, такое бывает), то в конце дня правый и левый глаз могут заметно разойтись по фокусировке, и легкая близорукость/дальнозоркость до вечера обеспечена. При этом мозг достаточно успешно компенсирует эту проблему. Условно говоря, мы получаем четкие детали изображения с правого или левого глаза для далеких/близких объектов. Т. е., говоря инженерным языком, проблема штатно решается встроенными средствами. А утром, как правило, зрение восстанавливается. И все бы хорошо, но в реальном стереовидео фокусировка может «скакать» от сцены к сцене. Получается, что «дальнозорким» становится то правый глаз, то левый, а иногда оба видят хорошо, что приводит к заметному дискомфорту при просмотре. Особенно для людей в возрасте, у которых глаза уже «стационарно» разошлись по резкости.

Примеры расхождений для VR180, где для лучшей наглядности представлены увеличенные фрагменты одной и той же области для двух ракурсов:

Ссылка на видео

Вот другой фрагмент этого кадра:

Ссылка на видео

Появление данного артефакта связано с расхождением фокусировки камер по техническим причинам. А из-за отсутствия профессиональной постобработки даже «вырвиглазные» сцены попадают на YouTube.

Ссылка на видео

Почти все надписи на увеличенном изображении различаются по резкости. Обратите внимание на надпись «12 CH», которая будет дискомфортно «стробить» при просмотре.

Сдвиг по времени

Как ни странно, хотя ядра компьютеров давно и успешно синхронизируются на миллионные доли секунды, стереокамеры при съемке до сих пор расходятся во времени на сотые, а то и на десятые доли секунды. Один глаз видит события, которые еще не произошли для другого глаза! Нельзя даже придумать аналог для этой проблемы в реальном мире. И этот артефакт также был найден в VR180.

Обратите внимание на окно с неоновой вывеской в правой части кадра:

Ссылка на видео

Данный сдвиг по времени был замечен случайно при анализе расхождения по цвету, которое тут тоже присутствует. Мерцающая вывеска бросается в глаза даже без использования специальных метрик, направленных на нахождение временного сдвига. Просто-напросто левый кадр отстает от правого!

Вот еще пример из той же сцены. Посмотрите на стопы пешеходов:

Ссылка на видео

Тут отчетливо видно, что на правом кадре нога передвинута дальше, чем на левом, будто бы один кадр отстает от другого на несколько мгновений, хотя они должны были быть сняты ровно в один и тот же момент. Мы проводили эксперимент, в рамках которого показали 302 зрителям короткие фрагменты стереофильмов с разными артефактами и просили после каждого фрагмента со смартфона/ноутбука заполнять форму с указанием уровня болезненности. Сдвиг во времени показал себя как наиболее болезненный артефакт — это невозможная для головного мозга ситуация и попытка ее «обработать» приводит к явному ощутимому дискомфорту. К сожалению, чаще всего распространен сдвиг менее, чем на 1 кадр, и его не так просто исправить.

Кстати, на примере выше невооруженным глазом виден еще и поворот кадра между ракурсами (особенно в левом нижнем углу), который также весьма дискомфортен, но исправляется намного проще. Впрочем, другие артефакты — это отдельная большая история, к которой мы еще, надеюсь, вернемся.

Google «накосячил»?

Вполне могло показаться, что данные артефакты присущи видео, полученным при любительской съемке, и при правильном использовании те же камеры смогут дать хорошее изображение. К сожалению, это не так. Вот рекламный видео-ролик формата VR180, который расположен на официальной страничке по VR180. Казалось бы, он должен задавать эталон качества. Но если присмотреться…

Расхождения по цвету:

Абсолютно во всех точках есть искажение цвета. Как будто на одном из ракурсов ошибочно выставлен немного больший баланс белого.

А здесь уже большая часть кадра без искажений. Но правый нижний угол все равно заметно расходится по цвету, что вызывает характерное визуальное «стробление» при просмотре.

Примечательно, что искажение цвета на дороге тоже было замечено без специальных средств для анализа стерео. Его обнаружили просто при покадровом просмотре видео (похоже на обработку видео с разными параметрами).

Различия в резкости:

Здесь расхождение заметнее всего на полу и на швах дивана. Наибольшее различие в резкости — именно на границах объектов.

Заключение

Что мы имеем в итоге?

VR, в т. ч. 360-видео, активно распространяется. Технология привлекает пользователей и выглядит очень перспективной. Но техническое качество текущей реализации вызывает дискомфорт от просмотра. В итоге какое-то количество людей, заинтересованных в том, чтобы попробовать новый формат, получает головную боль, а при неудачной съемке (как правило, при резком движении камеры) — вдобавок головокружение и тошноту, что приводит к разочарованию в формате.

Что с этим можно сделать?

В данный момент многими (в том числе и нами) разрабатываются инструменты по контролю качества, а также по исправлению проблем стерео.

Вот, например, примеры исправления цвета:

Слева — исходные ракурсы, справа — скорректированные по цвету с помощью нашего алгоритма. Засвеченный ракурс целиком исправлен.

Цвет на потолке пришел в норму.

Больше примеров автоматического исправления цвета смотрите в отдельной статье, посвященной искажению цвета в стерео.

Всего на данный момент детектируется порядка 20 типов артефактов снятого и сконвертированного стереовидео, большинство из которых актуальны и для VR180. В дальнейшем планируется расширение методов контроля и улучшения качества VR видео:

• адаптация текущих методов контроля качества под VR
• дополнение и реализация методов исправления артефактов
• составление автоматических отчетов по видео с предсказанием болезненности, вызванной просмотром, дабы предостеречь пользователей и отрейтинговать контент производителей, мотивировав их внимательнее относиться к качеству

Каковы перспективы формата в целом?

Очевидно, что текущие проблемы — проблемы младенчества технологии и они будут активно решаться. Можно ожидать, что:

• производители камер в комплекте с камерой будут поставлять софт, решающий часть базовых проблем
• со временем (при наличии спроса) появится профессиональный софт для исправления артефактов
• весьма вероятно, что на YouTube будет реализовано исправление части артефактов автоматически при загрузке VR180 видео, примерно так же, как сейчас автоматически исправляется дрожание и интерлейсинг старых добрых 2D видео

Из забавного: сейчас возникла мода на смартфоны с 3-4 камерами с задней стороны, которые обеспечивают кардинальное повышение качества фотографий.

Источник: Samsung Galaxy A7 (2018) & Samsung Galaxy A9 (2018)

Логично ожидать, что при росте популярности VR180 его поддержка «из коробки» будет встроена во все основные модели смартфонов.

Да, скорее всего угол зрения будет не 180°, а меньше.
Да, скорее всего качество будет хуже, чем у специализированных камер.
Да, съемка стереовидео потребует сжатия больших потоков информации (на что сегодняшние смартфоны все еще слабо рассчитаны).
Да, нужно будет ставить две широкоугольных камеры на бо́льшем расстоянии.

Но технически сегодня нет серьезных препятствий для реализации поддержки VR180 во флагманских моделях. Вопрос только в росте популярности формата, чтобы спрос стал массовым, создав стимул к этому.

И понятно, что, когда съемку VR180 начнут поддерживать топовые смартфоны, количество соответствующих роликов на YouTube начнет расти лавинообразно.

Также на выставках можно видеть автостереоскопические дисплеи смартфонов и планшетов, которые с повышением разрешения показывают все более и более интересное качество. По крайней мере, его не сравнить с тем, что можно было массово наблюдать в 2010–2011 годах во время прошлой волны. Во время написания этой статьи был анонсирован RED Hydrogen One — первый СЕРИЙНЫЙ смартфон с 3D экраном нового поколения, так что появилась  возможность купить то, что профессионалы видели на выставках. Процесс идет и, поскольку растет разрешение экранов, заведомо будет идти все быстрее. Основное препятствие — это недостаток контента.

Очевидно, что эта проблема «курицы и яйца» скоро будет решена.

Общие выводы:

VR180 обладает следующими существенными плюсами:

• Заметно выше погружение в 3D для VR180 по сравнению с 360-видео
• Отсутствуют артефакты стичинга (склейки) видео с нескольких камер
• Камеры для съемки VR180 достаточно дешевы и будут дешеветь
• Съемка VR180 заметно ближе к съемке обычной камерой и намного проще для непрофессионалов, т. е. огромной массе любителей будет относительно просто снимать свое видео в формате VR180
• Можно ожидать поддержки VR180 в смартфонах через какое-то время
• Можно ожидать появления дешевых качественных автостереоскопических дисплеев смартфонов, которые позволят просматривать VR180 без очков и шлемов (на данный момент такие решения уже можно увидеть на выставках, и от массового выпуска их отделяет отсутствие контента)

Минусы VR180:

• Дешевые камеры сейчас снимают плохое стерео, которое вызывает дискомфорт при просмотре
• На данный момент отсутствуют доступные программы постобработки полученных видео VR180 и исправления артефактов. Проблемы можно решить с помощью профессиональных программ для исправления снятого стерео, но у них низкая доступность, высокая сложность использования, и массово они не применяются…

Итого:

• Будущее VR180 очень сильно зависит от того, насколько оно будет болезненным при просмотре, поскольку, как показал опыт, головная боль от стерео может «убить» весьма многообещающие проекты
• При увеличении популярности VR180 многие «детские проблемы», в том числе связанные со стерео, можно будет относительно легко решить даже без участия пользователей, просто на сервисе при заливке видео. Алгоритмически это уже возможно
• Популярность формата упирается в проблему «курицы и яйца»: должно появиться достаточно устройств для съемки и просмотра. При этом в отличие от 360-видео VR180 технически скоро можно будет легко снимать на любом смартфоне. И если Google Pixel 5 XL будет поддерживать VR180 «из коробки» — это будет закономерно
• Как следствие: в перспективе 10 лет VR180 обречен на популярность!

Всем поменьше головной боли!

Ваши Константин Кожемяков и Дмитрий Ватолин

P.S. Благодарности

Хотелось бы сердечно поблагодарить:

• наших коллег из видеогруппы, благодаря которым представленные выше алгоритмы были созданы, а результаты посчитаны,
• компанию Google за артефакты рекламного ролика VR180, а также за то, что она продвигает новые форматы несмотря ни на что,
• Лабораторию Компьютерной Графики ВМК МГУ им. М.В.Ломоносова за вычислительные мощности и не только,
• Виталия Людвиченко за разработанный алгоритм исправления цвета в стереовидео,
• и, наконец, Александра Плошкина, Сергея Лаврушкина, Егора Склярова, Айдара Хатиуллина, Ивана Молодецких и Евгения Ляпустина за большое количество дельных замечаний и правок, сделавших этот текст намного лучше!

Смотрите также:

Найдите отличия: видео 360 и VR, AR, MR реальности, стереоскопическое и 3D видео, 3DOF и 6DOF

В первой части статьи были рассмотрены яркие примеры использования AR в телевидении и перспективы развития VR. Вторая часть будет интересна для тех, кто хочет копнуть глубже и разобраться в деталях, не будучи специалистом в сфере. Ведь если говорить о виртуальной реальности, встречается много малознакомых или незнакомых понятий и терминов.

Иногда различные типы видео и опыта путают между собой, принимая за VR стереоскопическое видео 360. Путаница происходит тогда, когда виртуальная реальность построена на основе реальных съемок и изображений, или наоборот, когда видео 360 делают на основе выдуманного мира: например, в мире компьютерной игры «устанавливают» виртуальную камеру с 360-градусным обзором, и затем записывают сам процесс игры. Кажется, что вы в виртуальной реальности, но все же это видео 360.
Сбиться столку можно и при просмотре дополненной реальности (Augmented reality), которую путают с виртуальной и смешанной (Mixed Reality). Конечно, многие скажут: «Это же очевидно! Совсем разные вещи!». Скорее всего таких профи статья не удивит. Но попытать счастья стоит.

Часть 2

Краткое содержание:

• Степени свободы 3DOF и 6DOF: круг обзора человека и возможность двигаться в пространстве

Для понимания разницы опыта просмотра в различных технологиях, мы должны выяснить, какие возможности наблюдения нам предоставляют: можем ли мы только поворачивать голову влево/вправо, вверх/вниз или также передвигаться в пространстве, не теряя картинку. Все это включено в понятие степени свободы (Degrees of Freedom).

• Как мы видим мир всегда: понятия окклюзии, параллакса движения и стереоскопичности
• Как мы видим мир в гарнитуре 3DOF и 6DOF
• Видео 360 VR
• Стереоскопическое видео/изображение  3D
• Разница между VR, AR, MR – виртуальной, дополненной, смешанной реальностями
• Особенности производства. Преимущества и недостатки VR и видео 360

Cтепени свободы 3DOF и 6DOF

DOF (Degrees Of Freedom, степени свободы) – это количество направлений, в которых объект может перемещаться/вращаться в трехмерном пространстве. Гарнитура для VR в формате 3DOF может отслеживать ориентацию вашей головы, зная куда вы смотрите. Получаем три оси вращения: качание головой (yaw), поворот/наклон влево и вправо (roll) и наклон вперед/назад (pitch). Гарнитуры с шестью степенями свободами 6DOF будут отслеживать и ориентацию, и положение, получая информацию куда вы смотрите, а также где вы находитесь в пространстве.  Такое отслеживание называют позиционным.

ВЫВОД: если вы можете только вращать головой на 360 градусов, наклонять ее вперед и назад, но не можете прыгать в стороны или спускаться/подниматься по лестнице, у вас есть только 3 степени свободы – 3DOF. Именно такая свобода и предполагается при просмотре видео 360.

Реализовать 3DOF легче, так как вращение относительно легко определить и отслеживать даже с помощью большинства телефонов. Они имеют необходимое оборудование – датчики акселерометра и гироскопа.

Для полноценной виртуальной реальности необходимы все шесть степеней свободы, следовательно – позиционное отслеживание. C позиционным отслеживанием, необходимым для 6DOF, все сложнее. Для просмотра такого виртуального контента необходима гарнитура, которая сможет точно с высокой чувствительностью отслеживать ваше положение. Большинство автономных/мобильных VR-гарнитур на рынке на данный момент 3DOF. Фактически, только в первые месяцы 2018-го на рынок стали выходить 6DOF автономные гарнитуры (для интересующихся –  Vive Focus, Oculus Santa Cruz и Pico Neo).

Для того, чтобы лучше разобраться, как создаются новые выдуманные миры, следует вспомнить или узнать, как мы воспринимаем мир реальный.

Как мы видим мир всегда

Благодаря чему мы видим мир? При помощи света, цвета, получения объемного изображения и движения объектов. Человек (в здоровом состоянии) обладает способностью бинокулярного и стереоскопического зрения. Бинокулярность –  способность одновременно чётко видеть изображение предмета обоими глазами. Не всегда бинокулярность означает способность видеть в стерео. Так, например, у хамелеона глаза управляются мозгом независимо друг от друга.  Благодаря этому он наблюдает за разными объектами разными глазами независимо. У человека же при стереоскопическом зрении в мозгу формируется объёмное изображение объекта.

Итак, люди и некоторые животные анализируют глубину изображения и расстояние по нескольким признакам.

Окклюзия и параллакс движения. Я выбрала эти признаки, так как мы сильно на них полагаемся. И, чего уж греха таить, так как до работы над статьей я не смогла бы ответить, что они собой представляют.

Окклюзия – это признак, который обеспечивает нам эффект глубины, когда один наблюдаемый предмет частично закрывает другой. На иллюстрации несмотря на то, что большая часть белого треугольника отсутствует, зрительная система «достраивает» изображение, чтобы воссоздать общую структуру, причем одновременно возникает иллюзия удаленности треугольника от трех кругов.

Параллакс движения – это кажущееся относительное смещение близких и более далеких предметов. Например, если наблюдатель будет двигать головой влево и вправо или вверх и вниз. Самый простой пример – поднимите большой палец руки перед собой и взгляните на него сначала правым, а потом левым глазом. Другой пример – явления, наблюдаемые через боковое стекло быстро движущегося автомобиля. Наблюдателю кажется, что объекты, расположенные выше точки, на которой он зафиксировал взгляд, движутся в направлении движения автомобиля. Напротив, объекты, расположенные ниже точки фиксации, движутся в противоположном движению автомобиля направлении.

При восприятии объектов каждый глаз видит двумерное изображение. Оба изображения проецируются на сетчатку с небольшим различием. Именно это различие вместе с другими признаками дает восприятие глубины – стереоскопичность. Несмотря на то, что изображение предметов на сетчатках глаз двумерное, человек видит мир трехмерным, то есть он может воспринимать глубины пространства стереоскопическим зрением. Оцените важность этого явления для координации движений и восприятия пространства, закрыв один глаз и попытавшись вдеть нитку в иголку.

Обогатившись базой терминов, вернемся к VR.

Как мы видим мир с гарнитурой 3DOF, 6DOF

Человек с гарнитурой 6DOF VR может свободно и естественным образом перемещаться в виртуальном пространстве. Все происходит так же, как в реальном мире. Вы можете смотреть на объекты под разными углами, вы можете наклоняться над или под ними, обходить объекты. Все натурально, так как есть все необходимые признаки для вашего зрения.

С гарнитурой 3DOF у вас отбирают некоторые из ваших способностей. Вы можете смотреть вокруг, но как будто приклеены к одной точке.  И все бы ничего, если бы вы были неподвижны в ногах. Но даже когда мы неподвижны, например, сидим, мы совершаем движения головы, что создают тот же эффект параллакса, упомянутый выше.  В 3DOF представьте, что к вашей голове приклеили весь мир и он двигается вместе с вами. Все объекты будут находиться на одном расстоянии от ваших глаз.

Неестественный способ взгляда на мир с гарнитурой 3DOF иногда создает не очень благоприятное влияние на человека. Некоторые не заметят его вовсе, у других может возникнуть головокружение, усталость глаз или просто общий дискомфорт. Играет роль и длительность сеанса. Большинство мобильных VR-сеансов исчисляются в минутах. Этого недостаточно для того, чтобы вызвать симптомы для большинства людей. Однако, поскольку индустрия VR развивается, будут появляться игры/приложения, в которых эта проблема может стать более острой.

Видео 360 ≠ VR

Видео 360 иногда по ошибке включают в категорию VR. Такую ошибку допускают, как правило, так как видео 360 можно просматривать в гарнитуре виртуальной реальности. Но нелепо утверждать так только из-за используемого инструмента, так как это все равно что утверждать: «Я сижу в машине, значит я должно быть еду».

Видео 360 можно просматривать по-разному. Например, на телефоне в ленте Facebook, используя свой палец, чтобы проскроллить и получить перспективу на 360 градусов. Можно смотреть и на Youtube, с помощью мышки прокручивая видео.

Даже если вы будете смотреть в гарнитуре VR, при наличии качественных ощущений вам не будет хватать звука и полной свободы действий, которую может обеспечить истинный 6DOF VR. Нет возможности взаимодействовать с тем, что вас окружает. Видео 360 имеет три степени свободы = 3DOF. Ощущение полного присутствия не сможет обеспечить ни видео 360, ни стереоскопическое видео, ни 3D.

Теперь рассмотрим разницу стереоскопического видео и настоящего 3D.

Стереоскопическое видео/изображение  3D

Про стереоскопическое зрение мы уже поговорили. Теперь разберемся, действительно ли нам предоставляют видео 3D как обещают. Понятие 3D используются повсюду: 3D фильмы, 3D дисплеи и т.д. В большинстве случаев все это стереоскопический контент, а не настоящий 3D.

Cтереоскопические изображение или видео – те, что сняты с двух углов, подражая нашему зрению, нашим глазам.

3D означает, что у нас есть достаточно информации про объект, чтобы рассматривать его с любого угла обзора. Так как вместо длинного понятия «стереоскопическое видео» было проще использовать термин 3D, последний сразу же «прижился».

В последнее время появляются действительно 3D или volumetric (объемные) видео, поэтому различать эти термины.

Пример такого видео можно посмотреть здесь (CES 2017):

Пример volumetric video

На демо участники могут не только свободно перемещаться, но и видеть абсолютно все детали объекта, куда ни заглянут. Такие технологии на сегодняшний момент безумно дороги (стоимость камеры $ 250 тыс. и выше), а итоговые размеры файлов составляют около 3 терабайт/минута. Так что придется подождать десяток лет, чтобы эти новшества стали более доступны.

СДЕЛАЕМ ВЫВОД: в каких случаях мы смотрим видео 360, а в каких VR.

Видим ВИДЕО 360, если это:

– реальная моноскопическая съемка (объекты не объемные, нет стереоэффекта), мы можем только поворачивать голову на 360 градусов.

– реальная стереоскопическая/объемная съемка (запись видео с нескольких углов, что дает стереоэффект), которую можно смотреть в гарнитуре для VR и видеть почти реальную картинку, но это по-прежнему видео 360 без свободы передвижения

– искусственная картинка/анимация, созданные компьютером, но просматриваются только как запись. В данном случае вы можете быть только зрителем, который смотрит фильм/компьютерную игру/анимацию с конечной длительностью. Есть свобода только крутить головой (или использовать повороты гаджета), оглядываясь по сторонам, не взаимодействуя ни с чем. Например:

Если при просмотре вы являетесь только зрителем – это видео 360.

Видим VR, если это:

– искусственный не реальный мир и анимация, с полной свободой передвижения и неограниченным временем участия

– реальные съемки с добавлением 3D графики с полной свободой передвижения и времени в отличии от видео 360. Это может быть стереоскопическое или истинное 3D видео.

Если вы видите реальные съемки или полностью созданный компьютером мир, можете не только вращать головой, но и свободно передвигаться в пространстве, и вы не ограничены по времени – это VR.

Различия VR/AR/MR – виртуальная,
дополненная, смешанная

Определиться в этих трех видах можно довольно просто, ответив на несколько вопросов:

• Если, одевая специальную гарнитуру, вы уже не видите ваше реальное окружение, в котором вы в данный момент находитесь, перед вами – VR. Если вы даже при использовании гарнитуры, остаетесь в том же помещении, на той же улица и т.п., значит перед вами AR либо MR.
• Разницу между двумя последними реальностями можно понять, обратив внимание, как размещается цифровой объект в пространстве (анимированная овечка, робот, зомби и что-любо другое, с чем вам посчастливилось столкнуться). Ключевой момент заключается в том, что цифровой контент не прикреплен к пространству. То-есть, если виртуальный объект парит в воздухе, это значит, что он из дополненной реальности. Дополненная реальность не меняет окружение человека, а лишь привносит в него искусственные элементы.

В MR же есть привязка к положению в реальном мире. В этом случае в мир добавляются виртуальные предметы, которые прикреплены к своему месту в пространстве для того, чтобы вы воспринимали их как реальные.

Подсуммируем:

AR – «живая» реальность вокруг вас с «наклеиванием» графики поверх вашего настоящего мира

MR-«живая» реальность вокруг вас с внедрением графики в ваш настоящий мир, т.е. объекты уже не наклеиваются поверх вашей картинки, а расставляются в реальном мире.

ВЫВОД: Если вы находитесь в своем реальном мире, вы в AR или MR. Если анимированные объекты или графика не учитывают положение объектов в пространстве, висят в воздухе или у кого-то на голове – это AR. Если же они вдруг прячутся за мебель, прыгают на нее – вы в MR.

Рассмотрев разные виды контента, кратко рассмотрим особенности производства.

Особенности производства.
Преимущества и недостатки VR и видео 360

Среди преимуществ видео 360, однозначно, более легкое и дешевое производство и доступность гаджетов, необходимых для просмотра. Среди недостатков – низкое разрешение. Формата 4К недостаточно для производства четкого изображения, когда его необходимо растянуть, чтобы покрыть 360 градусов. Требуется 8К или даже 16К форматы, что затрудняет процесс съемки, монтажа и проигрывания. Вдобавок, видео, как правило, 30 или 60 кадров в секунду. Для сравнения, для VR необходимо минимум 90 кадров в секунду, в противном случае у зрителя может возникать боль в глазах или головокружение.

Видео 360 трудно редактировать после того как все отснято. Можно сделать цветокоррекцию или поменять текстуру 3D модели в несколько кликов. Исправлять же видео затруднительно и дорого. В итоге, видео можно относительно дешево снять, но в долгой перспективе процесс может подняться в стоимости.

Стереоскопическое видео 360 так же имеет ряд проблем: стереоэффект будет удачным и естественным только, если дистанция между двумя камерами совпадает с фактической дистанцией между вашими глазами – межзрачковым расстоянием (IPD – the interpupillary distance).

Даже если вам повезет иметь IPD, который соответствует настройке стереоскопической камеры, видео 360 по-прежнему может казаться странным, а масштаб часто ошибочным. Это связано с тем, что стереоскопический эффект возможен только при определенных углах обзора, когда вы смотрите в том же направлении, что и физические линзы на фотоаппарате. При сведении стереоскопического изображения с нескольких камер погрешности неизбежны.

В производстве VR основными преградами остаются два момента:

• Для производителей сложный, трудоемкий и затратный процесс создания идеального изображения для максимального погружения в виртуальную реальность
• Для пользователей это недоступность либо заоблачные цены на необходимые гаджеты. Т.е. даже при условии создании сказочного виртуального мира донести его до широкой публики в исходном качестве на данный момент невероятно сложно.

В заключении хочется сказать, что в виртуальный мир хочется погружаться все глубже и глубже.  Чем больше вдаешься в детали, тем больше понимаешь, какими темпами мчится развитие. И мы не всегда знаем, в каком направлении будут следующие шаги. Возможно, скоро будут другие виды реальностей. А может, вскоре понятие реальности станет относительным.

Следите за новинками и создавайте свои!

Если вы нашли ошибку, пожалуйста, выделите фрагмент текста и нажмите Ctrl+Enter.

Съемка и монтаж видео в формате 3D 360 градусов

Мы готовы предоставить вам услуги по съёмке и редактировании видео 360 градусов. В последние годы съёмка видео 360° стала очень популярной. Такая съёмка частно применяется на массовых мероприятиях, концертах или просто для частного видео, например свадьбы. Съёмка 360° позволяет максимально расширить радиус действия видеокамеры.

С помощью такой камеры можно заснять всё сразу. Сейчас уже появились видеокамеры, специально предназначенные для видео 360°, однако, они очень дорогие. Многие фотоаппараты могут снимать фото 360°, но не видео. Если вам нужно видео 360°, обратитесь к нам за помощью.

Наши услуги с видео 360 градусов

Особенности работы нашей компании:

Мы специализируемся на различных услугах с видео 360 градусов. Наши услуги начинаются от съёмки видео 360° и заканчиваются редактированием сферических видео и съёмки 3D видео.

Мы снимаем и редактируем видео 360 градусов. Вы можете заказать нам съёмку 360° в указанном месте и в указанное время. Также у нас можно отредактировать видео 360 градусов с заказанными параметрами.

У нас есть услуги по панорамному видео 360 градусов. Панорамное видео 360° — это панорама, но с расширением 360°. В нашей компании вы можете заказать съёмку или редактирование панорамного видео 360 градусов.
Мы предоставляем услуги по съёмке сферического видео 360 градусов. Съёмка или корректировка сферического видео — это очень сложная работа. Для работы со сферическим видео нужны определённые знания, и не каждый сможет снять видео правильно. Вы можете заказать нам съёмку сферического видео 360°, если у вас нет нужной видеокамеры.

Также вы можете заказать нам съёмку 3D видео. В формате 3D часто показывают фильмы в кинотеатрах. Сейчас 3D применяют в разных сферах, в том числе при показе рекламы. Видео или фото 3D нужно, для того чтобы показать объём предмета, который снимают. Наша компания готова произвести съёмку или отредактировать 3D видео по вашему заказу. Мы производим 3D съёмку для различных нужд.

Где можно разместить панорамное видео?

На Канале Youtube. Это самый распространенный на сегодняшний день способ распространения VR видео (Virtual Reality — виртуальная реальность). Youtube стал поддерживать панорамные видео еще в начале 2015 года.

Каким образом можно посмотреть видео?

Для просмотра панорамного видео достаточно иметь смартфон, подключенный к интернету.

Мы снимаем на заказ обычные, панорамные и сферические видео в формате 360 градусов и видео 3D. Если у вас нет возможности производить съёмку видео 360°, попробуйте обратиться к нам за услугами.

Рынок современных технологий не стоит на месте, он постоянно совершенствуются и улучшается. Его постоянная динамика чувствуется практически во всех областях и направлениях человеческой деятельности. Одним из таких суперновых и инновационных продуктов является 3D видео.

Стоимость услуги «3D-видео»

В стоимость включено:

• Выезд фотографа по Москве и работа с объектом
• Изготовление тура с максимальным качеством в формате HDR
• Стандартное оформление готового тура
• Полная адаптация под любые мобильные устройства

Создание видео на 360 градусов, заказать панорамную видеосъемку VR

Все уже давно знают о существовании виртуальных туров, которые состоят из фотопанорам. Их часто можно встретит на сайтах отелей, ресторанов и других заведений. Но сегодня 3D панорамы могут быть еще и в видео формате, т.е. видео на 360 градусов. Таким образом, панорамная съемка становится более информативной, т.к. в видеопанораме можно показать движение. Перемещаться могут как люди и предметы вокруг, так и сама сферическая камера по объекту съемки.

Съемка панорамного видео появилась относительно недавно и завоевала большую популярность. Первое время, размещение видеопанорам в сети интернет было очень проблематично, загрузка видео на 360° требует больших ресурсов от сервера. Но ситуация изменилась с началом поддержки данного формата на видео-хостингах Youtube и Facebook. Сегодня 3D панорамы в видео формате можно разместить на любом сайте, не боясь о его работоспособности.

Видео на 360° имеет ряд преимуществ перед фотопанорамами:

• большая информативность – видео может демонстрировать различные процессы, а не только статичную картинку, предметы могут перемещаться вокруг камеры на все 360 градусов.
• возможность движения камеры во время съемки – камера может перемещаться в пространстве благодаря этому, возможна демонстрация помещения или территории, что по сути будет являться многочисленной серией фотопанорам, ведь видео 360 можно поставить на паузу и вращать его в любую сторону.
• усиленный эффект присутствия, особенно с использованием очков виртуальной реальности – Oculus Rift и Google Cardboard.

Сфера применения панорамного видео.

Мероприятия будь то концерт, презентация, парад, свадьба или день рождения можно снять в формате 360, ни одна деталь не скроется от панорамной камеры. Зритель может виртуально посетить концерт или другое мероприятие, а использование очков виртуальной реальности предаст просмотру больший эффект присутствия.

Виртуальный тур по заведениям в формате видео 360 может быть прекрасной презентацией для гостиничного комплекса, ресторана, фитнес-клуба или другого заведения.

Музыкальные клипы, снятые на 360 градусов, становятся все более популярными. Нестандартный формат привлекает даже самых изысканных зрителей.

Экскурсия по музею или какому-либо предприятию с панорамным обзором станет прекрасным рекламным ходом.

Демонстрация различных аттракционов – развлекательный парк, полеты на воздушном шаре, прыжок с парашютом – это лишь небольшой перечень того, что можно продемонстрировать с эффектом полного погружения благодаря видео на 360 градусов.

Транспортные средства можно презентовать и на фотопанорамах, но панорамное видео покажет автомобиль, катер или вертолет не только изнутри, но и со стороны в движении.

Заказать съемку видео на 360 градусов можно у нас в Москве, Санкт-Петербурге, Ставрополе, Краснодаре, Сочи, Анапе, Пятигорске и КМВ, Ростове-на-Дону. Мы разработаем панорамное видео, которое будет соответствовать все Вашим пожеланиям. Кроме того, мы можем организовать выездную фотосъемку в Ваш город.

Видео в формате виртуальной реальности, панорамное видео 360 градусов (VR)

01.07.2019

Видео в формате 360 градусов

Согласно исследованию «Internet Trends – 2018» человек в среднем проводит 6 часов день, разбирая рабочую почту, изучая новостную ленту Instagram или просматривая ролики любимых блогеров на YouTube. Интернет стал предметом первой необходимости, а это привело к появлению новых форматов контента для развлечения и организации досуга пользователей. Один из наиболее распространённых на текущий момент времени – видео 360 градусов, пришло время познакомить вас с ними более подробно.

Панорамные видео – это ролики, угол обзора которых равен 360°. От пользователя, запустившего такой ролик, не ускользнёт ни одна деталь: он сможет посмотреть себе под ноги, поднять взгляд к нему или изучить окрестности.

Наиболее распространенные платформы для знакомства с видеороликами в формате 360 градусов – YouTube и Facebook. Основной плюс площадок – наличие огромного количества видео, для просмотра которых не обязательно иметь дополнительное оборудование.

Существует несколько вариантов просмотра панорамных видео:

• 
  С помощью компьютера;

• 
  Через мобильные телефоны или планшеты;

• 
  Посредством VR-оборудования.

Управление 3D-панорамой на компьютере осуществляется мышкой, стрелками или базовым набором клавиш «WASD». За навигацию по видеоролику на мобильном устройстве отвечает акселерометр: для смены сцены достаточно изменить угол наклона гаджета или его положение в пространстве.

Представленные выше варианты взаимодействия с панорамными роликами имеют свои плюсы: зритель видит пространство вокруг себя и может детально изучить местность. Однако есть одно важное НО: пользователь всё еще наблюдает за происходящим со стороны, он не чувствует себя частью созданного 3D-мира.

Для того чтобы создать иллюзию полного погружения зрителя в сюжет используют очки или шлемы виртуальной реальности. VR-технологии превращают человека, сидящего в партере, в главное действующее лицо, а просмотр виар видео дарит яркие эмоции и незабываемые впечатления.

Преимущества видео в формате виртуальной реальности перед стандартными роликами

• 
  Привлечение внимания и формирование интереса у аудитории;

• 
  Повышение уровня вовлечённости зрителя в процесс, отображаемый на экране;

• 
  Достижение эффекта присутствия пользователя внутри видеоряда;

• 
  Возможность управления контентом и просмотра только интересующей человека информации.

Большой интерес к VR-видеороликам со стороны пользователей стал основной причиной внедрения и использования виртуальных панорам в различных сферах деятельности:

• 
  Ритейл;

• 
  Туризм;

• 
  Медицина;

• 
  Недвижимость;

• 
  Автоиндустрия;

• 
  Реклама и маркетинг.

Сферические панорамы в виртуальной реальности открывают новые возможности и облегчают жизнь. Просмотр VR-туров по крупным туристическим центрам упрощает выбор будущего места отдыха: размышлять о смысле жизни на Бали или отправиться покорять Эверест. Проведение онлайн VR-трансляций позволяет в режиме реального времени присутствовать на мероприятии, которое проводится в другом городе или в другой стране.

В борьбе за внимание аудитории компании используют технологии виртуальной реальности, c помощью VR-рекламы они вовлекают и погружают аудиторию.

Преимущества применения VR-видео в рекламе и маркетинге

• 
  Привлечение внимания интернет-аудитории;

• 
  Повышения уровня взаимодействия с потенциальным покупателем;

• 
  Ненавязчивая реклама, которая не воспринимается как спам и не вызывает негативных эмоций;

• 
  Конкурентное преимущество за счёт использования нестандартных маркетинговых инструментов.

Несмотря на преимущества, которыми обладает VR-реклама, недостаточно взять несколько камер и начать снимать «что-то». Отклик будет высоким только в том случае, если концепция будет продумана до мельчайших деталей, а сюжет будет отвечать интересам и болям целевой аудитории.

Для того чтобы вы запаслись идеями для будущей рекламы и нашли вдохновение наша команда подготовила обзор VR-роликов, которые кажутся нам удачными.

1. 
   История одного обеда в McDonald’s.


Сюжет позволяет очутиться в одном из ресторанов сети фастфуда и пообедать в компании персонажей игры Angry Birds.

2. 
   Волшебный мир печенья Oreo.


Путешествие по производственным цехам Oreo напоминает приключение Чарли по фабрике Вилли Вонка. Только вместо умпа-лумп и стеклянного лифта – водопады из молока и города из шоколада.

3. 
   «Внутренний мир» Hyundai Loniq.


Обзор характеристик нового авто в формате видео виртуальной реальности. Лучше 1 раз увидеть, чем 10 раз прочитать.

4. 
   Мотивация в стиле Nike Football.


История повествует о том, как футболисты турецкой сборной по футболу переживают проигрыш в первом тайме и настраивают друг друга на дальнейшую игру. «Запомните, мы по-настоящему проигрываем не во время проигрыша, а только когда сдаемся» — говорит один из игроков сборной.

Видео 360 ° против 3D-видео против виртуальной реальности

Многие люди используют видео 360 °, 3D-видео и виртуальную реальность как взаимозаменяемые. Это неправильно и приводит к большой путанице. Итак, вот краткий обзор того, что каждый из них представляет, и куда, по моему мнению, движется технология.

360 ° видео — это видео, снятое на 360 градусов, но с без глубины резкости . На данный момент это самый распространенный тип «VR»-видео. Facebook только что запустил поддержку этих видео на своей временной шкале, так что любой, у кого есть подходящая камера, может снимать и загружать 360-градусное видео.Так что это? Это действительно видео, на котором запечатлен куполообразный панорамный вид. Когда вы смотрите видео, вы можете перемещаться вокруг камеры, чтобы видеть в разных направлениях (примечание : не под разными углами ). Поэтому, если вы используете панорамное видео для съемки парашютиста, вы можете видеть то, что видели они, за исключением того, что у вас есть возможность каждый раз смотреть видео в другом направлении.

Вот отличный пример такого видео. Обратите внимание на то, как вы можете повернуть камеру, но не можете переместить ее. Другими словами, вы не можете переместить камеру, чтобы получить другой ракурс съемки. Вы можете смотреть эти типы видео на YouTube и на временной шкале Facebook. Вы можете использовать мышь, чтобы перемещать камеру. Кроме того, вы можете смотреть их на своем мобильном телефоне в сочетании с 3D-гарнитурой. Когда вы это сделаете, вы сможете двигать головой, чтобы контролировать направление камеры. Это даст вам много впечатлений, но все еще не 3D!

Некоторые примеры камер, которые могут снимать видео в формате 360, можно найти здесь и здесь.

3D видео

Настоящее дело — 3D-видео. 3D-видео дает вам глубину резкости. Чтобы смотреть 3D-видео, вам понадобится 3D-гарнитура и хороший мобильный телефон. Это похоже на то, к чему вы привыкли в 3D-кинотеатрах, только намного лучше. Эта технология достаточно новая и довольно дорогая.

Вот пример 3D-видео.

Вы можете заметить существенное различие между видео: видео 360 градусов — это все 360 градусов, но без глубины резкости; тогда как 3D-видео имеет глубину резкости, но точка обзора ограничена.

По мере того, как технологии становятся дешевле, все 360-градусные видео превращаются в 360-градусные 3D-видео! Я надеюсь, что в этом есть смысл.

Виртуальная реальность

Виртуальная реальность — это просто частный случай 3D-видео, где вся сцена НЕ снимается, а генерируется компьютером. На самом деле (без каламбура) мы используем ту же технику: стереоскопические изображения. В 3D-видео это снимается с помощью специальных камер, например, этой:

Источник: http://cdn.techpp.com/wp-content/uploads/2011/12/jvc-3d-camcorder.jpg

Но в виртуальной реальности весь контент создается компьютером с использованием специальных программ, таких как Unity или Unreal Engine.

Будущее виртуальной реальности

Я думаю, что ближайшее будущее принесет нам много разных камер и способов сделать это, пока все не сольется в карманные камеры 360-3D. Кроме того, устройства, которые мы используем сейчас, будут настолько малы, что поместятся на контактных линзах.

Я надеюсь, что эта статья прольет свет на эту удивительную новую технологию!

Как добавить 3D-объекты в 360-градусное видео или изображение

Если вы находитесь в пространстве виртуальной реальности, то знаете, что существует два конца спектра, когда дело доходит до создания контента VR.С одной стороны, у нас есть компьютерно-сгенерированного контента виртуальной реальности (CGI) , который использует 3D-модели для создания опыта виртуальной реальности. CGI предоставляет множество вариантов взаимодействия, но его сложно разработать, а высококачественные 3D-объекты стоят дорого. С другой стороны, у нас есть кинематографическая виртуальная реальность , где мы можем использовать 360 видео и изображения для создания очень реалистичных сцен, но с ограниченным взаимодействием. Производство высококачественных панорамных видео и изображений не так дорого, благодаря наличию на рынке панорамных камер.Но вы когда-нибудь хотели использовать 3D-объекты в своих панорамных видео или изображениях? Ну, а с Viar360 и Google Poly вы этого не сделаете!

Проведите обучение виртуальной реальности в своей организации и начните пользоваться бесплатной пробной версией Viar360 уже сегодня!

Google Poly предоставляет доступ к 3D-объектам

Google Poly позволяет быстро находить 3D-объекты и сцены для использования, и он был создан с нуля с учетом разработки AR и VR. Он полностью интегрирован с такими приложениями, как Tilt Brush и Blocks, а также позволяет напрямую загружать файлы OBJ, так что есть что обнаруживать и использовать.Создаете ли вы интенсивную космическую прогулку в VR или безмятежный сад из цветов AR, в Poly вы найдете все, что вам нужно.

Нашли понравившегося робота, но он нужен с четырьмя руками вместо двух? Блоки — это последний из нескольких инструментов дизайна, которые работают в виртуальной реальности. Оно похоже на приложение для скульптинга Medium от Oculus и дополняет популярный инструмент 3D-рисования Tilt Brush от Google. Поскольку вы можете экспортировать искусство как из Tilt Brush, так и из блоков, вы даже можете использовать их вместе. Однако художественный стиль выглядит совсем иначе.Там, где Tilt Brush создает иллюзию скульптуры с помощью света и краски, Blocks, кажется, лучше всего сочетается с красочным низкополигональным художественным стилем, который Google использует в своем интерфейсе Daydream VR.

В любом случае, с помощью Google Poly и Google Blocks теперь вы можете находить, смешивать или создавать с нуля любой трехмерный объект, который может вам понадобиться в вашей виртуальной реальности.

Viar360 позволяет размещать 3D-модели в вашей 360-градусной сцене

Мы создали Viar360, потому что хотели дать возможность людям с ограниченными техническими навыками создавать виртуальную реальность.Мы хотели помочь учителям, журналистам и другим творческим людям со всего мира создавать свои собственные виртуальные миры. Мы решили сначала сосредоточиться на панорамных видео и изображениях, поскольку они дают вам возможность создавать красивые сцены VR. Но 3D-объекты всегда были в нашей памяти. Мы всегда хотели объединить мир 360 и 3D под одной крышей. Это было просто невозможно… до сих пор! Мы с гордостью сообщаем, что теперь вы можете встраивать 3D-модели в панорамные видео и фотосферы на Viar360. Функция все еще находится в стадии бета-тестирования, но в коротком видео ниже показано, как это делается.

Представляем Facebook Surround 360: открытую высококачественную систему видеозахвата 3D-360

Сегодня мы анонсировали Facebook Surround 360 — высококачественную готовую к производству аппаратную и программную систему видеозахвата 3D-360.

• Facebook разработал и создал надежную высококачественную систему видеозахвата 3D-360.
• Система включает дизайн аппаратного обеспечения камеры и сопутствующий код сшивки, и мы сделаем их доступными на GitHub этим летом.Мы открываем исходный код камеры и программного обеспечения, чтобы ускорить рост экосистемы 3D-360: разработчики могут использовать дизайн и код, а создатели контента могут использовать камеру в своих проектах.
• Построение на основе алгоритма оптического потока — это математически строгий подход, который дает превосходные результаты. Наш код использует оптический поток для вычисления стерео диспаратности левого и правого глаза. Мы используем эту возможность для создания бесшовных стереоскопических панорам 360 с минимальным вмешательством руки или без него.
• Код вышивки значительно сокращает время постпроизводства. То, что обычно делается вручную, теперь может быть выполнено алгоритмом, занимая время сшивания от недель до ночи.
• Система экспортирует видео 4K, 6K и 8K для каждого глаза. Видео в формате 8K удваивают стандартный формат вывода и могут воспроизводиться на Gear VR с помощью специальной технологии динамической потоковой передачи от Facebook.

При разработке этой камеры мы хотели создать комплексную систему профессионального уровня, которая могла бы захватывать, редактировать и визуализировать высококачественное видео 3D-360.Поступая так, мы надеялись внести значительный вклад в развитие камер 3D-360, создав систему, которая позволит большему количеству производителей и художников VR-контента начать создавать видео 3D-360.

Определение проблем, связанных с захватом виртуальной реальности

Когда мы начали этот проект, все существующие видеокамеры 3D-360, которые мы видели, были либо проприетарными (поэтому сообщество не могло получить доступ к этим проектам), доступными только по специальному запросу, либо принципиально ненадежными в качестве сквозной системы в производственная среда.В большинстве случаев камеры в этих системах перегревались, оборудование было недостаточно прочным для установки на производственное оборудование, а сшивание занимало непомерно много времени, потому что это приходилось делать вручную. Поэтому мы решили спроектировать и создать видеокамеру 3D-360, которая будет делать то, что вы ожидаете от обычной камеры, — надежно снимать, редактировать и визуализировать каждый раз. Это звучит очевидно и почти глупо, но оказалось технически сложной задачей для видео 3D-360.

Многие технические проблемы для 3D-видео возникают из-за съемки в стереоскопическом формате 360 °.Моноскопический 360, использующий две или более камеры для захвата всей 360-градусной сцены, довольно распространен. Полученные в результате изображения позволяют осмотреть всю сцену, но они довольно плоские, как фотография.

Однако все становится намного сложнее, когда вы хотите снимать видео в формате 3D-360. В отличие от моноскопического видео, 3D-видео требует глубины. Мы получаем глубину, запечатлевая каждое место в сцене двумя камерами — эквивалентом камеры вашего левого глаза и правого глаза. Это означает, что вам нужно снимать в стереоскопическом режиме 360, когда от 10 до 20 камер вместе указывают во всех направлениях.Кроме того, все камеры должны захватывать 30 или 60 кадров в секунду, точно и одновременно. Другими словами, они должны быть синхронизированы глобально. Наконец, вам нужно объединить или сшить все изображения с каждой камеры в одно бесшовное видео, и вы должны сделать это дважды: один раз из виртуального положения для левого глаза и один раз для правого глаза.

Этот последний шаг, пожалуй, самый трудный для достижения, и он требует довольно сложных методов компьютерной фотографии и компьютерного зрения.Хорошая новость заключается в том, что оба эти направления активно исследуются [1, 2, 3] более 20 лет. Сочетание прошлых исследований алгоритмов, быстрого улучшения и доступности датчиков изображения, а также снижения стоимости компонентов памяти, таких как твердотельные накопители, делают этот проект возможным сегодня. Еще пять лет назад это было бы почти невозможно.

Система захвата VR

Помня об этих проблемах, мы начали экспериментировать с различными прототипами и остановились на трех основных компонентах, которые, по нашему мнению, необходимы для создания надежной, высококачественной, сквозной системы захвата:

• Аппаратное обеспечение (камера и управляющий компьютер)
• Программа управления камерой (для синхронизированного захвата)
• Программа сшивания и рендеринга

Все три взаимосвязаны и требуют тщательного проектирования и контроля для достижения наших целей надежности и качества.Слабость в одной области поставит под угрозу качество или надежность в другой области.

Кроме того, мы хотели, чтобы оборудование было готовым. Мы хотели, чтобы другие могли копировать или изменять наш дизайн на основе наших проектных спецификаций и программного обеспечения, не полагаясь на нас, чтобы создать его для них. Мы хотели расширить возможности технических и творческих команд за пределами Facebook, предоставив им полный доступ для разработки на основе этой технологии.

Аппаратное обеспечение камеры

Как и в случае с любой другой системой, мы начали с определения основных требований к оборудованию.Ослабление любого из них может поставить под угрозу качество или надежность, а иногда и то и другое.

Требования к камере:

• Камеры должны быть глобально синхронизированы. Все кадры должны захватывать сцену одновременно с интервалом менее 1 мс друг от друга. Если кадры не синхронизированы, может быть довольно сложно объединить их в единое связное изображение.
• Каждая камера должна иметь глобальный затвор. Все пиксели должны видеть сцену одновременно. Например, камеры сотовых телефонов этого не делают; у них есть рольставни.Без глобального затвора быстро движущиеся объекты будут смазывать камеру по диагонали сверху вниз.
• Сами камеры не могут перегреваться, и они должны иметь возможность надежно работать в течение многих часов при непрерывной съемке.
• Установка и камеры должны быть жесткими и прочными. Последующая обработка становится намного проще и качественнее, если камеры остаются в одном положении.
• Буровая установка должна быть относительно простой в сборке из стандартных деталей, чтобы другие могли копировать, ремонтировать и заменять детали.

Мы учли каждое из этих требований в нашем дизайне. Промышленные камеры Point Gray имеют глобальные шторки и не перегреваются при длительной работе. Камеры прикручены к алюминиевому шасси, что гарантирует, что установка и камеры не подпрыгивают. Наружная оболочка изготовлена ​​из стали с порошковым покрытием для защиты внутренних компонентов от повреждений. (Чтобы никто не подумал, что найти алюминиевое шасси или стальную раму сложно, любой цех механической обработки окажет честь, если передаст спецификации.)

Программное обеспечение и хранилище для управления камерой и захвата

После завершения проектирования оборудования управление камерой и перемещение данных становятся следующими серьезными проблемами, которые необходимо решить. Поскольку мы хотели сохранить возможность модификации системы, мы решили управлять камерами с помощью ПК на базе Linux, который обладал достаточной пропускной способностью системы для поддержки передачи потокового видео в реальном времени со всех камер на диск.

Кроме того, изохронный характер камер означал, что нам нужен поток реального времени для захвата кадров, за которым следуют другие потоки записи на буферизованный диск с более низким приоритетом, чтобы гарантировать, что все кадры были захвачены и не отброшены.При 30 Гц для этого требовалась устойчивая скорость передачи порядка 17 Гбит / с. Точно так же мы использовали 8-полосную дисковую систему RAID уровня 5, чтобы не отставать от изохронной скорости захвата камеры. Это, в сочетании с прочными камерами, позволяет вести непрерывную съемку от нескольких минут до часов.

Ситуация усложняется тем, что управление камерой должно выполняться удаленно, поскольку сама камера захватывает всю сцену на 360 градусов. Наше решение заключалось в том, чтобы управлять камерой с помощью простого веб-интерфейса, что позволило управлять камерой с любого устройства, поддерживающего HTML-браузер.

В нашей системе экспозиция, выдержка, усиление аналогового датчика и частота кадров контролируются в специально разработанном программном обеспечении для каждой камеры. Камеры глобально синхронизируются с помощью одного и того же программного обеспечения. Мы собираем «сырые» данные Байера для обеспечения качества на всех этапах рендеринга изображений.

Программа для сшивания

Вычислительные алгоритмы построения изображений, которые объединяют все изображения вместе, возможно, лежат в основе системы и представляют собой наиболее сложную часть системы.К счастью, последние 20 лет исследований в области компьютерной фотографии и компьютерного зрения, а также дополнительные 60 лет аэрофотограмметрии (используемой для создания топологических карт) дали нам хорошую отправную точку.

Поскольку процесс сшивания генерирует окончательное видеоизображение, качество визуального изображения было первостепенным в нашем конвейере обработки изображений и вычислительной визуализации. Тонкий аспект захвата цифрового изображения заключается в том, что на каждом этапе вычислений необходимо проявлять осторожность, чтобы гарантировать сохранение качества пикселей.Очень легко ошибочно ухудшить качество изображения на любом этапе процесса, после чего разрешение будет потеряно навсегда. Повторите это несколько раз, и качество полностью ухудшится.

Обрабатываем данные в несколько этапов:

• Преобразование необработанных входных изображений Байера в RGB с гамма-коррекцией.
  • Взаимная цветокоррекция камеры
  • Анти-виньетирование
  • Гамма и кривая тона
  • Заточка (деконволюция)
  • Пиксельная демозаика
• Выполните внутреннюю коррекцию изображения, чтобы удалить искажение объектива и перепроецировать изображение в полярную систему координат.
• Связка скорректировала взаимную внешнюю коррекцию камеры, чтобы компенсировать небольшие смещения в ориентации камеры.
• Выполните оптический поток между парами камер, чтобы вычислить стерео несоответствие для левого и правого глаза.
• Синтезировать новые виды виртуальных камер для каждого направления обзора отдельно для левого и правого глаза на основе оптического потока.
• Составные конечные пиксели левого и правого потоков.

Ключевым алгоритмическим элементом является концепция оптического потока.Наш код основан на алгоритме оптического потока, который математически сложнее других решений для сшивания, но дает лучшие результаты. Оптический поток позволяет нам вычислять стерео диспаритет между камерами для левого и правого глаза и синтезировать новые виды отдельно для левого и правого глаза. Мы перетаскиваем верхнюю и нижнюю камеры в боковые камеры, и аналогичным образом мы объединяем пары камер в соответствие с объектами, которые появляются на разных расстояниях. Фактически, оптический поток остается открытой областью исследований, поскольку это некорректно поставленная обратная задача.Его некорректность проистекает из неоднозначности, вызванной окклюзией — одна камера не может видеть то, что видит соседняя камера. Несмотря на то, что это смягчается наличием нескольких камер и изменяющимся во времени захватом, это, тем не менее, остается проблемой. Наш код использует оптический поток для вычисления стерео диспаратности левого и правого глаза. Мы используем эту возможность для автоматического создания бесшовных стереоскопических панорам. Ежедневные газеты доставляются в ночное время. Это резкое сокращение времени постпродакшна.

Воспроизведение

Мы выводим изображения с разрешением 4K, 6K и 8K на глаз.Из-за высокой пропускной способности и требований к данным для вывода 6K и 8K используется наш кодек Dynamic Streaming для Gear VR, что вдвое превышает отраслевой стандарт. Выходной файл из системы можно просматривать в гарнитурах VR, таких как Oculus Rift и Gear VR. Их также можно выводить и публиковать в таких местах, как лента новостей Facebook — в этом случае при прокрутке ленты новостей отображается только одно из моноскопических представлений, но полное стерео можно загрузить.

Построить и создать

Мы считаем, что нам удалось создать надежную, готовую к работе камеру, которая представляет собой ультрасовременное решение для захвата и сшивания.Но мы знаем, что впереди еще много работы.

Технологические проблемы остаются. Различные комбинации оптического поля зрения, разрешения сенсора, расположения камер и количества используемых камер представляют собой довольно сложную задачу инженерного проектирования. Больше камер помогает упростить работу по последующему сшиванию, но также увеличивает объем захваченных данных и пропускную способность, необходимую для их обработки. Точно так же увеличение разрешения сенсора улучшает качество финального рендеринга, но, опять же, за счет увеличения пропускной способности и объема данных.

Что касается оптики, то увеличение поля обзора каждой камеры помогает либо уменьшить количество камер, либо уменьшить количество требуемых стыков за счет пространственного разрешения. Широкоугольная оптика также более чувствительна к заднему фокусному расстоянию сенсора и угловому смещению.

Здесь нет единственного правильного ответа, и мы знаем, что есть идеи, которые мы не исследовали. Фактически, это одна из причин, по которой мы делаем наш дизайн бесплатным. Мы хотим, чтобы другие присоединились к нам в совершенствовании этой технологии.По опыту мы знаем, что более широкое сообщество может двигаться вперед быстрее, чем мы сами. Все чертежи программного и аппаратного обеспечения будут доступны к концу лета. Сделайте это быстрее, дешевле, меньше. Сделать его лучше. Мы будем работать, чтобы сделать то же самое здесь. Нам не терпится увидеть, что вы разрабатываете и, в конечном итоге, что вы создаете с помощью этого.

Последнее замечание — установление личного соединения

Когда наша небольшая команда инженеров приступила к этому проекту, мы были взволнованы перспективами технологии 3D-360 и, честно говоря, просто восхищались простой крутизной и увлечением работы над чем-то столь же передовым, как «камера VR.”

Однако потенциал этой технологии не был очевиден для меня до недавней поездки к родителям. Я хотел показать им, чем я занимаюсь на работе — они всегда спрашивают, и в отличие от того, когда я работаю строго над программным обеспечением, в этом проекте у меня были для них осязаемые вещи, например, образец видео, который мы сняли в нашем новом проекте. Офисное здание Фрэнка Гери. Мой папа переживает период жизни, когда поездки в мой офис не собираются, так что это был прекрасный способ показать ему мой рабочий мир.Оглядываясь вокруг, он начал спрашивать о людях, месте и пространстве. «Это люди, с которыми вы работаете? Сколько человек работает на месте? Вау, это выглядит большим — сколько в нем квадратных футов? » Так продолжалось несколько минут: его вопросы, мои ответы. В этот момент технология исчезла, и я просто связывался со своим отцом таким образом, которого я не ожидал, и способом, который был лично важен для меня.

Именно тогда я глубоко понял, как эта технология может объединять людей и сближать их — как она фундаментально связана с миссией Facebook, и почему работа над этим важна и выходит далеко за рамки просто крутизны.Мы надеемся, что это окажет такое же влияние на вас.

2D 3D 360 ° Видео в App Store

● VRPlayer может воспроизводить не только обычные 2D-фильмы, но также и 3D-фильмы (наполовину бок о бок или сверху и снизу) для VR (google cardboard)

● и поддерживает следующие форматы файлов.

— видео: mp4, mov, без DRM m4v
— субтитры: smi, srt

● VRPlayer может воспроизводить следующие форматы файлов в режиме потоковой передачи через VRPlayer Helper

— Видео: mp4, mov, m4v, mkv, avi, wmv, asf, flv, swf, mpg, 3gp, vob, divix
— Субтитры: smi, srt

※ это приложение не может воспроизводить видео с защитой DRM, приобретенное в магазине iTunes.

● Вы можете добавлять или получать доступ к следующим элементам

— VRPlayer Helper (сервер потоковой передачи)
— Папка
— FTP-сервер
— GoogleDrive, Dropbox
— Библиотека видео

※ VRPlayer Helper встроен в ваше собственное приложение VRPlayer и загружает URL-адрес, предоставленный VRPlayer, — это сам IP-адрес вашего iPhone, а не внешний веб-сервер.

, поэтому для загрузки Помощника iPhone и серверный ПК должны быть в одной сети Wi-Fi.

нажмите кнопку «+» в правом верхнем углу VRPlayer и выберите VRPlayer Helper, после чего вы увидите URL-адрес, с которого вы можете загрузить помощник.

● Вы можете управлять VRPlayer с помощью клавиатуры

— Bluetooth-клавиатура
— USB-клавиатура (подключается с помощью комплекта камеры)
— Клавиатура ПК, на котором установлен VRPlayer Helper

※ во время навигации
— вверх / вниз: перемещайте курсор по элементу
— вверх / вниз + shift: перемещение курсора по странице
— вправо / ввод / пробел: выбор элемента
— влево / esc: назад к предыдущему

※ во время воспроизведения
— вверх / вниз: перемещение курсора кнопкой
— ввод: кнопка выбора и действие
— esc: стоп и назад к списку
— пробел: воспроизведение и пауза
— вправо: перемещение вперед на 5 секунд
— влево: перемещение назад на 5 секунд
— вправо + shift: перемещение вперед на 1 минуту
— влево + shift: перейти на 1 минуту назад
— вверх + shift: воспроизвести предыдущее видео
— вниз + shift: воспроизвести следующее видео
— [: замедлить скорость воспроизведения
-]: увеличить скорость воспроизведения
— 1: переключить на 360 ° / 180 ° Видео
— 2: переключить режим VR
— 3: изменить режим 2D / 3D 902 21 — 4: Увеличение / уменьшение
— 5: Назад в центр / отслеживание движения
— 6: Ограничение отслеживания движения
— 7: Цикл
— 8: Аудио / субтитры

● Вы можете управлять VRPlayer с помощью игрового контроллера

※ поддерживаемый контроллер
— Контроллер XBox
— Контроллер Playstation Dualshock
— Другой сертифицированный игровой контроллер MFi

90 во время навигации
— вверх / вниз: перемещение курсора по элементу
— вверх / вниз + RB: перемещение курсора по странице
— вправо / A : выбрать элемент
— влево / B: вернуться к предыдущему

※ во время воспроизведения
— вверх / вниз: переместить курсор кнопкой
— A: выбрать кнопку и выполнить действие
— B: остановить и вернуться к списку
— X: воспроизвести & пауза
— вправо: перейти на 5 секунд вперед
— влево: перейти назад на 5 секунд
— вправо + RB: перейти на 1 минуту
— влево + RB: перейти на 1 минуту назад
— вверх + RB: воспроизвести предыдущее видео
— вниз + RB: воспроизвести следующее видео

● поддержка панорамы
— наслаждайтесь собственные панорамные фотографии в VR

● Используйте несколько жестов для управления воспроизведением
— Коснитесь экрана двумя пальцами, чтобы изменить режим экрана 2D / 3D.
— Дважды коснитесь экрана, чтобы увеличить / уменьшить масштаб.
— Проведите пальцем вправо, чтобы перейти на 5 секунд вперед.
— Проведите пальцем влево, чтобы вернуться на 5 секунд назад.
— Проведите двумя пальцами вправо, чтобы увеличить скорость воспроизведения.
— Проведите двумя пальцами влево, чтобы снизить скорость воспроизведения.
— Длительное нажатие одним пальцем для выбора звука или субтитров.
— Перетащите субтитры, чтобы изменить положение.
— Увеличьте или уменьшите экран, чтобы изменить размер шрифта субтитров.

виртуальных туров, видео 360º и программное обеспечение VR

360 Видео и виртуальная реальность

Чем мы занимаемся?

360-градусное видео и виртуальная реальность охватывают широкий спектр технологий, от моноскопического вращающегося видео на веб-странице или мобильном устройстве до гарнитур, таких как Google Cardboard с 3D-звуком, до высококачественных VR-приложений на основе гарнитуры, обеспечивающих полное движение и взаимодействие. Интерактивные кадры с панорамированием на 360 градусов появились с момента появления Quicktime VR в 1995 году, но только недавно стало практичным захватывать и доставлять видео, а также просматривать его на доступной гарнитуре разумного качества.Опыт виртуальной реальности, под которым мы подразумеваем те, которые основаны на трехмерной графике или CGI (компьютерные изображения), уже много лет доступен в исследовательских лабораториях и промышленных приложениях. Последние достижения в области гарнитур (дисплеи и датчики движения) плюс увеличенная мощность рендеринга означают, что такие возможности становятся доступными на устройствах потребительского уровня. 360-градусное видео может давать очень реалистичные изображения, его сравнительно легко создавать, но ему не хватает интерактивности или возможности для зрителя свободно перемещаться. VR, с другой стороны, может обеспечить очень богатую интерактивность и движение, но, как правило, дороже в производстве и технически сложно поддерживать фотореалистичные изображения — хотя становятся доступны коммерческие решения, такие как объемный захват и ранние подходы к получению светового поля. и рендеринг.

BBC R&D — Знакомство с BBC Reality Labs

360 Видео «Аттенборо и гигантский динозавр» на BBC Taster

В BBC R&D наша задача — помочь BBC лучше понять, что эти технологии могут предложить нашей аудитории, а также повлиять и внести свой вклад в развитие технологий, от редакционных до производства, распространения и потребления. В более широкой отрасли уже ведется активная деятельность, особенно сфокусированная на играх: вместо этого мы фокусируемся на том, как эта технология может дополнять контент, производимый BBC, поэтому мы ищем приложения, ориентированные на такие области, как журналистика, повествовательный и образовательный контент, а не чисто «игровой» опыт.Для этого все еще очень рано, без установленных редакционных правил, производственных конвейеров или универсальных методов распространения, и требуется осторожность, чтобы определить опыт конечного пользователя, который действительно выиграет от технологии 360 или VR, а не просто создать краткое сообщение «вау». момент.

Это очень широкая область работы, включающая ряд проектов в группах НИОКР в таких областях, как редактирование, производство и взаимодействие с пользователем. Ссылки на другие проекты, сообщения в блогах и демонстраторы приведены ниже.

360-градусное видео и виртуальная реальность являются примерами того, что мы называем «новым опытом работы с контентом»: форма контента, выходящая за рамки того, что в настоящее время производит BBC, и которая может быть реализована с помощью цепочки производства и распространения, полностью основанной на IP, которая не привязан к традиционным форматам аудиовизуального контента. Таким образом, наша работа с VR / 360 является частью нашей более широкой программы работы в этой области, которая помогает нам представить BBC будущего, не обязательно то, что существует сегодня.

Это не первый раз, когда мы изучаем, как иммерсивные и интерактивные видео- и аудиосистемы и трехмерная графика в реальном времени могут быть использованы для улучшения впечатлений нашей аудитории. Предыдущие примеры включают:

— Технология производства ТВ смешанной реальности, которую мы разработали в период с 1997 по 2005 год, использовалась в таких программах, как BAMZOOKi, чтобы разрешить компоновку виртуального контента в режиме реального времени в студийную запись, и в результате были созданы коммерческие продукты для манипуляции и слежения за камерой. и виртуальные накладки на спорт.

— Система слежения за дополненной реальностью для установки BBC / Музея естественной истории в студии Аттенборо. Кто вы на самом деле думаете, запущена в 2010 г.

— 3D-звук, наша работа над приложениями амбизоники началась в 2010 г. и продолжается в различные проекты в нашей аудиокоманде

— «Surround Video» — исследование возможностей проекционной системы на 180 градусов размером с комнату для дополнения обычного телевизионного экрана, разработанное в 2010-2011 гг.

— Панорамное видео и 3D-аудио для предоставлять интерактивные возможности навигации с помощью таких проектов, как FascinatE и Venue Explorer

Работу

R&D в области 360 / VR можно в общих чертах разделить на четыре области, охватывающие исследование новейших технологий 360 / VR, разработку некоторых конкретных производственных инструментов для заполнения пробелов, ввод в эксплуатацию контента в различных жанрах для оценки редакционных возможностей и исследование пользовательского опыта для получить более глубокое представление о поведении зрителя.Другими словами, это «какие новые технологии уже доступны, какие еще технологии нам понадобятся, что мы можем с ними сделать и что думают зрители?»

‘Пасхальное восстание: голос мятежника’

Понимание технологии и последствий для производства и доставки

Мы исследовали ключевые звенья производственной цепочки и различные методы съемок, чтобы понять ограничения: это делает нас информированными клиентами при работе с внешними производственными компаниями и позволяет нам консультировать BBC в целом.Следует отметить, что производство 360 / VR по-прежнему сопряжено с техническими проблемами, и, основываясь на нашем опыте и общих технических знаниях, мы были призваны давать советы сторонним производственным компаниям относительно различных комиссий BBC — никто не является настоящим экспертом в этом. области пока нет!

Одним из наших первых производственных экспериментов была настройка прямой трансляции 360-градусного видео и 3D-звука для демонстрации на Играх Содружества 2014 года. С тех пор мы принимаем непосредственное участие в создании ряда панорамных видео, часто работая с независимыми производственными компаниями.

Мы также изучали различные подходы к доставке, включая ссылку с нашего экспериментального информационного портала BBC Taster на YouTube и оценку других сетевых проигрывателей. Совсем недавно мы интегрировали встроенный проигрыватель BBC 360 в такие проекты, как Super Furry Animals. Мы также запустили пилотную версию исследователя Edinburgh Festivals 360 на Taster, в которой используется разработанный нами проигрыватель WebVR 360, который позволяет продюсерам создавать интерактивные, разветвленные повествования в 360 с использованием WebVR и точек доступа.

BBC R&D — Фактическое повествование в 360-градусном видео

BBC R&D — 8 советов по созданию проектов VR

Производственные инструменты и технологические пробелы

Мы разрабатываем производственные инструменты, чтобы заполнить некоторые пробелы между текущим рабочим процессом ТВ и тем, что необходимо для VR / 360.

Большая часть нашей работы до сих пор была в области объектно-ориентированных инструментов для создания 3D-звука, основанных на стандарте ADM (Audio Definition Model) для представления объектно-ориентированного звука в производстве, разработку которого мы возглавляли. Эта работа уже велась до нынешнего роста популярности VR / 360, что дает нам хорошие возможности для ее применения в этой области. Наши последние разработки включают два подключаемых модуля для игрового движка Unity для импорта файлов ADM и для бинаурального рендеринга (оба используются в The Turning Forest).Мы также разработали инструмент, позволяющий визуализировать расположение звуковых объектов в гарнитуре VR во время пост-обработки звука, который использовался для различных видеопроизводств в формате 360, включая Unearthed, выпущенный на Taster в 2015 году. Недавно мы настроили наше производство инструменты для экспорта 3D-звука в формате амбисоники, поддерживаемом видеопроигрывателем YouTube 360.

«Ждем»

Пробная / демонстрационная продукция в различных жанрах

Мы заказали производство различных частей контента, которые исследуют различные аспекты того, что может предложить 360 / VR.Некоторые из них были заказаны в рамках сезона BBC Connected Studio Future of Content: Immersive. Примеры включают:

— Тесты с 360-градусной журналистикой совместно с BBC Newslabs, включая такие статьи, как Paris Attacks — Place de la Republique, в которых журналист BBC Мэтью Прайс использовал 360-видео кадры рядом с одним из главных памятников тем, кто потерял живет, чтобы дать зрителям лучшее представление о том, какой была атмосфера на площади Республики.
— The Resistance of Honey 360 видео для изучения подходов к съемке грамматики
— Ring как интерактивный бинауральный опыт только со звуком.
— The Turning Forest, созданный в сотрудничестве с VRTOV в качестве визуального опыта компьютерной графики, который также привнес интерактивные элементы в повествовательную часть. Это во многом основано на нашей работе над 3D-звуком.
— Мы ждем — это вымышленное изображение мигрантов, совершающих опасное путешествие из Турции в Грецию на лодках контрабандистов. Он основан на сообщениях, собранных BBC News от мигрантов и воплощенных в жизнь в виде компьютерной графики в сотрудничестве с Aardman Digital с использованием методов анимации. Цель состояла в том, чтобы изучить, как виртуальная реальность может помочь аудитории лучше понять тему, которую они иначе не смогли бы понять.

Дополнительную информацию и ссылки на другие экспериментальные комиссии можно найти на странице виртуальной реальности Connected Studio.

Мы также консультировали продюсеров 360 / VR под руководством других частей BBC, включая «Невидимый город в Риме» и программу BBC Click’s 360, включая посещение Большого адронного коллайдера в ЦЕРНе.

Кадр из съемки панорамного видео

Исследование пользовательского опыта

Мы провели некоторые исследования пользовательского опыта, используя часть этого контента и другие специально снятые материалы, чтобы понять его влияние на зрителей, а также собрали отзывы других с помощью рейтинговой системы BBC Taster.Примеры включают:

— наблюдение за тем, что контролирует внимание зрителей, путем записи движения головы при просмотре видео в формате 360
— эффект разного углового разделения актеров
— разные подходы к размещению наложений и субтитров
— как устройство просмотра влияет на впечатления

Внешний вид

Еще многое предстоит узнать о том, как создавать хороший контент 360 / VR в контексте вещания, например, как наилучшим образом использовать существующие ресурсы и возможности для дополнительной съемки на местности, которая может быть сделана относительно дешево как часть существующей Телевизионная съемка.Мы узнаем больше о том, какой опыт лучше всего работает в этой новой среде и как его создать, но мы далеки от хорошо налаженного процесса ввода в эксплуатацию или производственной грамматики. Способы доставки и потребительское оборудование все еще быстро развиваются, и требуется дополнительная работа, чтобы получить твердое представление о том, как создать хороший пользовательский интерфейс, и даже понять, какие долгосрочные преимущества для аудитории. Следите за развитием событий в этом пространстве!

Наш контролер @borntorover о том, почему мы исследуем виртуальную реальность и видео 360 °: https: // t.co / HN3eiBZNPN pic.twitter.com/eOrmD61RFz

— BBC R&D (@BBCRD) 9 июня 2016 г.

Твитнуть — Поделиться на Facebook

Подробнее о виртуальной реальности и панорамном видео:

BBC Connected Studio — посмотрите 20-минутные выступления наших экспертов по виртуальной реальности и 360-градусному видео из дня #BBCVR

BBC R&D — Знакомство с BBC Reality Labs

BBC R&D — 8 советов по созданию проектов VR

BBC R&D — Фактические советы по повествованию для панорамного видео

BBC R&D — исследуйте Эдинбургские фестивали с помощью 360 Video и Web VR

BBC News Labs — 5 уроков VR

YouTube — 360 видео от BBC R&D

BBC R&D — Разработка субтитров для контента 360

BBC R&D — Улучшение панорамного видео с помощью графики в большом адронном коллайдере

BBC R&D — Unearthed — Интерактивный звук и видео 360 ° в веб-браузере

BBC R&D — Почему НИОКР BBC заинтересованы в виртуальной реальности?

О BBC — Изучение VR и иммерсивного видео

BBC R&D — Звук виртуальной реальности в крутящемся лесу

BBC R&D — Сказка виртуальной реальности, премьера которой состоялась на кинофестивале Tribecca

Как выбрать между 3D и 360-градусным видео?

В октябре 2019 года мы получили вторую камеру 360 ^o .Первой была камера с низким разрешением, которая использовалась в основном для съемки эталонных изображений на сайтах клиентов. Затем они станут основой для наших 3D-моделей в офисе. Новая камера имела разрешение 8К даже при съемке видео. Конечно, большинство из нас было похоже на возбужденных детей с новой игрушкой и с нетерпением ждали возможности использовать ее при каждой возможности. до тех пор, пока однажды существующий клиент (страховая компания) не попросил нас предложить имитацию виртуальной реальности, которая поможет обучать медсестер в их сетевых медицинских учреждениях.Вначале мы склонялись к моделированию 360 ^o на основе видео, но несколько дней спустя, на нашей следующей встрече, один из наших опытных программистов задал мне несколько вопросов, которые заставили меня сесть и задуматься, может ли 360 ^o — Видео-симуляторы действительно являются лучшим вариантом для всего учебного контента. Будет ли традиционное трехмерное моделирование лучшим выбором в некоторых сценариях? Чем больше я думал об этом, тем больше понимал, что почти все «профи», которых мы использовали для оправдания использования 360 ^или видеороликов для этого проекта, начинали казаться скорее «мошенниками».«В конце концов, мы отказались от необходимости выбирать маршрут 360 ^o , и команда единогласно решила использовать только 3D. Вот несколько вещей, которые следует учитывать, прежде чем выбирать 3D или 360 ^или видео.

Подумайте о месте съемки и ответьте на эти вопросы.
Является ли ваше местоположение оживленным местом работы — например, фабрика, офис, больница? Или это более спокойная обстановка, где вас никто не побеспокоит, пока съемочная группа снимает видео — например, дома или в гостиничном номере? Является ли потенциально опасным для съемочной группы и актеров находиться в этом месте — например, в печи или на химическом заводе? Легко добраться? Или это так далеко, что доступ к съемочной группе может превратиться в логистический кошмар?

Если вы снимаете в оживленном месте, в потенциально опасной среде или в удаленном месте, вам, вероятно, следует рассмотреть возможность использования 3D выше 360 ^o .

Подумайте о степени сложности и взаимодействия, которые вам требуются / ожидаются…
Рассмотрим съемку, которая требует выполнения множества различных непоследовательных действий в вашей симуляции. Например, дать пациенту лекарство. Это можно сделать, когда пациент лежит после того, как его заставили сесть, отрегулировав угол наклона кровати и т.д. комбинации задействованных действий.Затем симуляция должна будет воспроизвести правильный клип в зависимости от варианта, выбранного игроком. Это переводит съемку и программирование на другой уровень сложности. Использование 3D действительно упростило бы весь сценарий, и определенные движения или действия можно было бы легко запрограммировать.

Итак, если вы ответите на вопрос: «Ожидаете ли вы высокой степени выбранных пользователем действий, которыми можно будет управлять с помощью кода?» да, тогда вам лучше использовать 3D более 360 ^o . 360 ^o лучше подходит для линейного или полупроводникового (простого) взаимодействия.

Насколько важны для вашего приложения точность и качество мимики и жестов?
Если ответ на этот вопрос ДА, и вы склоняетесь к 360 ^o , подумайте еще раз и рассмотрите следующее:

Предвидите ли вы изменения в сценарии после рассмотрения заявки заинтересованными сторонами? Если да, то переходите к 3D, потому что видео (360, ^или или иначе) потребует повторной съемки или, по крайней мере, сеанса перезаписи, что требует значительных затрат и создает логистические проблемы, т.е.е. непрерывность локации, повторное использование одного и того же слепка и т. д.

Попадут ли актеры / волонтеры / съемочная группа в неловкую или опасную ситуацию?
Например, воздействие опасных химических паров. Такие ситуации могут быть непростыми, и их легко избежать, если вы выберете 3D.

Сколько движения требует сцена?
Если вы смотрите на свободное движение игрока с помощью контроллеров в пространстве VR, тогда у вас нет другого выбора, кроме как использовать 3D, но если сцена будет делать с «телепортацией» из одной точки сцены в другую ( без ходьбы), то 360 ^o видео могут работать.