Использование современных технологий трекинга и захвата движения в пост обработке и во внедрении трехмерной графики в видео на примере создания видео-ролика
Дипломная работа - Компьютеры, программирование
Другие дипломы по предмету Компьютеры, программирование
треть эту технологию чуть более поверхностно и в разрезе нашего обзора, то можно заключить следующее: Если обозначить одни и те же точки на одном предмете, скажем, углы стола, на двух фотографиях сделанных с разного ракурса, то существует одно возможное положение этих точек в пространстве (рис.11). Благодаря этому простому правилу, открытому более ста пятидесяти лет назад, современные мачмуверы могут автоматизировать девяносто процентов своей работы.
Что не немаловажно, проведя процесс фотограмметрии, можно не только получить положение точек (а соответственно, и объекта) в пространстве, но и камеры, которая сделала этот кадр.
В дальнейшем есть всего два варианта развития событий:
-камера двигается по определенной траектории;
-несколько камер стоит статично.
Первый сюжет позволяет произвести реконструкцию камеры в пространстве: каждый кадр считается, как отдельная фотография с нового ракурса. Таким образом сделав облет длительностью в четыре секунды, имеем минимум 96 фотографий одного и того же места с разных ракурсов, при условии, что в кадре ничего не двигается. Этого более чем достаточно, чтобы произвести реконструкцию. Современные программы могут автоматически найти сотни точек, которые они будут отслеживать и, в результате, выдавать их координаты в пространстве.
Рис. 11. Принцип работы фотограмметрии
Второй вариант развития событий на первый взгляд кажется неуклюжим, но он открывает возможности до этого подвластные только команде профессионалов с дорогим оборудованием. Как упоминалось выше, для того, чтобы произвести мачмув или реконструкцию камеры, необходимо, чтобы в кадре не происходило движения, кроме движения камеры (либо, необходимо изолировать эти области во время обработки). Дело в том, что трекер воспримет все движения в кадре, как перемещения камеры, что может очень сильно повлиять на финальный результат и сделать мачмув не очень качественным. Однако если, взять несколько камер, отследить оптические маркеры (например шарики от пинг-понга, приделанные к костюму актера) в пространстве, а при переводе координат инвертировать информацию и указать камеры, как статичные, то получится перемещение точек в пространстве. Хотя камера при этом будет статична.
Стоит так же упомянуть о том, что нет ограничения использовать только видео материал. Если камера стоит статично и лишь поворачивается вокруг своей оси, то не нужно делать облет сцены и тратить время, силы и плёнку. Достаточно сделать 5-7 фотографий высокого разрешения с разных ракурсов. Таким образом сымитировать облет сцены и сэкономим время.
ГЛАВА 2. ПРАКТИЧЕСКОЕ ПРИМЕНЕНИЕ
.1 Технические тесты
В соответствии со сценарием (прил. 1) в ролике присутствуют два героя, образы которых противопоставляются друг другу. Открыто и через детали. Основной задачей с точки зрения визуальных эффектов является размещение больших надписей над головами главных героев. И перед тем, как утвердить идею необходимо провести необходимые технические тесты и подготовить детальную раскадровку (прил.2).
.1.1 Тест 1
За основу был взят небольшой отрезок видео снятый с большой высоты через грязное стекло. Высота была продиктована возможной необходимостью в дальнейшем использовать общие планы снятые с крыш, а качество съемки - желанием проверить возможности трекера.
Рис. 12. Технический тест №1. Проверка двухмерного трекинга
Результат оправдал все ожидания: отснятый материал был изначально стабилизирован, и лишь потом был произведен захват движения, который не смотря на нечеткое видео и размытости на окне был произведен отлично. На этом этапе вместо надписей был использован геометрический примитив (рис.12)
.1.2 Тест № 2
По результатам первого теста стало ясно, что жестко присоединенная надпись не выглядит естественно и противоречит законам классической анимации. Поэтому была создана физическая модель, которая должна имитировать поведение некоего объекта на пружине. То есть она должна подвергаться инерции, трению, сопротивлению и при необходимости другим физическим законам (рис.13).
Рис. 13. Технический тест №2. Создание физической модели
Результатом стал коротки ролик показывающий поведение надписи в разных условиях: взаимодействие с плоскостями, разные степени жесткости материала и степень подверженности инертной силе. Возникла новая задача: привязать физическую систему к двухмерному трекеру.
.1.3 Тест № 3
Поиск решения навел на грустные мысли о возможной необходимости в будущем отказаться от общих планов в пользу трехмерного трекинга. Соответственно, на третьем тесте исследованию подверглась система захвата движения, основанная на фотограмметрии с использованием двух камер. Актер имел два нарочито больших маркера закрепленных на черной шапке (рис.14). То есть были созданы идеальные условия для захвата движения. Для работы использовался продукт компании Autodesk - Matchmover.
Рисунок 14. Технический тест № 3. Motion Capture в студии ИМОП Films
Результат не был столь же блестящим, что и с двухмертным трекингом. При активных движениях актера маркеры постоянно пропадали из зоны видимости, либо смазывались, что говорило о сильном недостатке света в студии (что не критично при уличных съемках, но составляет очень большую проблему при съемка в помещении, где света может быть еще меньше).Однако был и позитивный момент. Без проблем удалось сде