Поиск по сайту

Проекция в трех измерениях Проекция на здания и архитектурные сооружения Видео мэппинг Компенсация искажений Дополненная реальность Настройка и калиборовка камер Распознавание объектов Поскольку самый простой способ - компенсация искажений "вручную", результаты не будут идеальны, а их качество напрямую зависит от вашей внимательности и терпения. Введение Проекция на плоскую поверхность Проекция на сложные объемные поверхностиСведение виртуальной и реальной проекции вручную Виртуальная копия реальной сцены Привязываем плоскую текстуру к поверхности Свет и тень Иллюзия объема Ось виртуальной камеры не совпадает с реальным положением проектораПроекция на две стороны здания с одной перспективой Панорамная проекция в 360° ВведениеОбозначенные выше ключевые моменты объединены общей проблемой: сочетание положения объекта в пространстве (угол поворота и расстояние до объекта), характеристик оптики проекторов (ширина оптики, смещение линзы) и угла зрения на этот объект. В кино, основанном на компьютерных спецэффектах и графике, термины "совмещение" ("match moving") или "трекинг"("camera tracking") описывают проблему точного совмещения реально отснятых сцен с добавленной позже компьютерной графикой. Для решения таких задач, существует масса специальных программ, например, (boujou, 3d equalizer, ...), все они облегчают жизнь создателям визуальных эффектов. Для создания дополненной реальности (совмещение транслируемой сцены с компьютерной графикой в реальном времени) используется, например, ARToolKit (в пакете vvvv есть встроенный плагин ARTK+Tracker?. А компании вроде domeprojection предлагают проектора с функцией автокалибровки. Но поскольку в vvvv нет нодов, позволяющих создать что-то вроде этого или даже этого, ручная настройка совмещения проекции со статичными объектами все еще остается актуальным решением. Проекция на плоскую поверхностьЕсли вы проецируете на плоскую поверхность, например на стену, и проектор расположен под значительным углом относительно стены, вы видите искаженное изображение - трапецию. Используя нод Homography (Transform 2d) вы легко можете корректировать искажение картинки - в результате изображение на поверхности кажется правильным. Помните: Этим способом вы почти всегда можете получить правильную картинку на плоской поверхности, не зависимо от положения проектора, его угла относительно экрана, и характеристик оптики. Проекция на сложные объемные поверхности Сведение виртуальной и реальной проекции вручную. При проекции на сложные объемные поверхности, по большому счету не так важно, где и как установлен проектор - картинка все равно будет искаженной. Правда из одной точки картинка будет смотреться не плохо - это точка проектора. На фотографиях показана проекция обычного рабочего стола на композицию из двух белых коробок. На левом кадре видно реальное искажение картинки, в то время как на правой - снятой с точки зрения проектора - картинка выглядит корректно. Из этих фотографий видно, что ключ к воспирятию неискаженного изображения заключается в следующем: Проекция на объемные поверхности выглядит правильно (не искаженно) только когда смотришь на нее из точки проекции. По тому же принципу устроены Растянутая навигация и Объемное оформление интерьеров. Таким образом, чтобы добиться иллюзии не искаженного изображения на объемной поверхности, вы должны подготовить изображение с учетом искажений возникающих из точки проекции. Другими словами: представим что мы снимаем на камеру искаженное изображение на объемной поверхности. Если мы повторим снятое искаженное изображение на реальном проекторе, то оно совпадет с поверхностью и не будет выглядеть искаженным. К сожалению, это работает только в теории, шансы, что все параметры изображения и фактические настройки и положение проектора совпадут, практически равны нулю. Но это не должно нас останавливать, потому что здесь начинается ручная настройка и подгонка этих параметров, и при должном терпении, с опытом вы получите неплохие результаты. Виртуальная копия реальной сценыСоздание виртуальной копии реальной инсталляции состоит из 3х шагов: определение системы координат для реальных объектов, чтобы совместить их с AxisAndGrid (EX9) в vvvv. создание 3х мерной модели поверхности для проекции и размещение ее в сцене, в соответствии с выбранной системой координат: 3d модель может быть создана в специальных программах или составлена из примитивов, встроенных в vvvv. Для ручного совмещения 3d модели с реальным объектом лучше всего использовать модуль PointEditor (3D Persistent), который позволяет деформировать отдельные фрагменты моделей.измерение расстояния, угла наклона и характеристик оптики проектора: задайте эти параметры в модуле Projector (EX9). В инструкциях к проекторам есть таблицы, аналогичные приведенной ниже, в которых описаны характеристики оптики: проекционные расстояния и углы смещения объектива. Сейчас у вас уже есть базовый проект для совмещения виртуальной сцены с реальной поверхностью. Потратьте время на настройку параметров модуля Projector (EX9) или вручную настраивайте 3d модель, используя модуль PointEditor (3D Persistent), до тех пор пока не получите подходящее совпадение изображения с реальной поверхностью. ProjectionMapping_SimpleSetup.v4p Привязываем плоскую текстуру к поверхностиИспользуя этот простой патч, вы можете повторить эффекты итальянской студии dotdotdot из их проекта Valcucine’s skyscraper. Цель подобных инсталляций - "привязать" проецируемое изображение к поверхности так, чтобы изображение полностью повторяло физические свойства объекта, так как если бы объект был покрыт движущимся изображением или текстурой. В таких случаях текстура смотрится одинаково, независимо от места с которого вы смотрите на объект/скульптуру/поверхность, и независимо от того как установлен проектор. Просчитав 3d-модель объекта в виртуальном пространстве в том же ракурсе, и с теми же характеристиками оптики, что и в реальной инсталляции, вы в точности совместите ваше изображение с реальным объектом. Любые плоские текстуры на 3d модели (в нашем примере - черные кресты на белом фоне) не будут казаться искаженными, независимо от точки зрения на объект. Свет и теньВосприятие любых эффектов света или тени, которые вы применяете к виртуальной модели, напрямую зависит от особенностей того объекта, на который проецируется изображение. Свет и тень в данном случае ведут себя точно так же, как плоские текстуры. Вы можете легко повторить эффекты из инсталляций Lightstrive или Pablo Valbuena Augmented Sculpture Series. Иллюзия объемаВсем нам нравятся инсталляции с иллюзией объема, такие как проекция на The Hague City Hall, AntiVJs проекция на Nuit Blanche Bruxelles или проекции easyweb. Эффекты с иллюзией объема имеют одно важное ограничение, которое вы должны учитывать. В нашем примере с проекцией на кубики добиться такого эффекта можно просто добавив тени к моделям, НО для зрителей этот эффект будет работать только из одной точки. И эта точка совпадает с положением нашей виртуальной камеры. В примере с кубиками текст кажется выпуклым только когда мы смотрим на него, находясь на оси проектора. Если мы посмотрим на этот же текст из другой точки - иллюзия исчезнет. Но это не проблема, в большинстве случаев наши мозги, испорченные кино и телевизором, легко справляются с такими условностями, поскольку мы смотрим на проекцию с довольно большого расстояния, которое компенсирует отклонения от оси проектора. Получается тот же эффект, что и с работами John Beever. Ось виртуальной камеры не совпадает с реальным положением проектораПо ряду причин бывает невозможно совместить положение проектора с положением виртуальной камеры: Вам нужно показать сцену с той точки, где физически невозможно поставить проектор Вам нужно растянуть одну виртуальную сцену на несколько реальных проекторов. В таких случаях вам придется дважды обработать картинку (сделать 2 рендера): в первом рендере вы показываете сцену в желаемой перспективе во втором рендере вы привязываетесь к реальным объектам под тем углом, который физически возможен, и меняя настройки виртуальной камеры совмещаете результат первого рендера с существующей объемной поверхностью. Примеры: Проекция на две стороны здания с одной перспективойОдной из задач этой инсталляции было создать иллюзию объема на фасаде FH Schwäbisch Gmünd. Понятно, что такой эффект работает только когда видно две стороны здания, поэтому зрители располагаются примерно по середине между двух проекторов. Примерно вот так выглядит патч для такой проекции: ProjectionMapping_2ProjectorSetup.zip Иллюстрация показывает, что иллюзия объема работает только при определенном положении зрителей. Другие примеры, рассмотреные на пятидневном семинаре в Schwäbisch Gmünd, можно найти здесь. Панорамная проекция в 360°При создании панорамной проекции в 360°, виртуальные камеры должны находиться в одной точке, с разным углом поворота. Вы можете сделать это в виртуальной сцене, но физически не сможете разместить несколько проекторов в одной точке. Подробный патч для создания панорамной проекции 360°, включая мягкие шторки на проекторах в аттаче small 360 degree setup.zip

TUNDRA - коллектив из Санкт-Петербурга. В прошлом году им был представлен проект «Void» (видео ниже), а вместе сним перед зрителем была поставлена задача оставаться как можно дольше на одном месте, чтобы «визуализировать идею пустоты». Хитрость инсталляции «Void» в том, что очень трудно достичь состояния неподвижности в окружении вихревой панорамной проекции и квадрофонического звука. Пустота здесь рассматривается не как отсутвие всего, а как исходное состояние для появления чего-либо. Чтобы увидеть, как тёмная комната превращается в эпицентр большого взрыва, посетитель должен стать «пустым». «Void» с помощью своей графики и необычных переживаний покушается на наше постоянное состояние рассеяности и суетливости. Подробнее о проекте пустота Tundra определяют себя как «объединённый художественный коллектив», в состав которого входят музыканты, звукорежиссеры, программисты и виджеи. Их цель – создание аудиовизуальных представлений и интерактивных инсталляций, в которых звук, видеообразы и эмоции работают, как единое целое. Коллектив работает вне студии, в креативном пространстве «Тайга», представляющем собой старый особняк. «Тайга» - это эпицентр арт-революции. Вот что пишет Guardian о «Тайге»: «искусство андеграуда бросает вызов духу скупости и наживы, превращая старинное здание в место для создания творческих утопий». Работы виджеев и дизайнеров из России и Восточной Европы насквозь пропитаны идеями и тенденциями мирового виджейского искусства. Удивительно высокий уровень работ, частота их появления и элегантность идей наводят на мысли о своеобразном «ренессансе» в области современного искусства. На фото представлен кадр из инсталляции «The Whale»(«Кит»), представленной на корабле «Валерий Брюсов» на Москве-реке. В прошлом году коллектив «Tundra» был очень плодовит: один за другим создавались сложные и ресурсоёмкие проекты, переносившие зрителей в очаровательные, потусторонние миры. Инсталляция «Le Vent Nous Portera» приглашает зрителя принять участие в прогулке по виртуальному светящемуся лесу. А представление «The Whale» приглашает зрителя в глотку гигантского кита послушать его песни! Последняя инсталляция «POWWOW» – это аудиовизуальное представление со световыми скульптурами, созданное для выставки «Повод для мира» в Музее уличного искусства в Санкт-Петербурге. Инсталляция была представлена на месте выведенного из эксплуатации пластмассового завода. Управление аудио- и световой аппаратурой осуществлялось с помощью TouchDesigner посредством DMX. Видео об инсталляции ещё нет, но и фотографии передают ощущение громадного мрачного электрифицированного пространства. На выставке «Повод для мира» было представлено более 60 работ антивоенной тематики. Для выставки использовался путепровод, опоясывающий завод, как символ взаимодействия и диалога. Визуальная часть представления создавалась 40 параллельными лучами, похожими на лазерные. Проекторы были закреплены на высоте 130 метров вдоль всего путепровода и управлялись посредством DMX. Для создания модели установки и предварительного просмотра того, как световые лучи будут выглядеть на территории завода. На фото ниже можно получить представление, как выглядит установка. На этой фотографии запечатлено монтирование света А здесь Вы видите пункт управления установкой В процессе создания инсталляции виджеям пришлось много эксперементировать, пробовать различные идеи. Некоторые части видео записывались вживую, а некоторые были заранее подготовлены. Видеообразы синхронизировались со звуком вручную или посредством MIDI или OSC. В результате получился 7-минутный аудиовизуальный трек, представленный видеофайлом разрешением 40 на 4 пикселей – каждый пиксель контролирует один из параметров световой иллюминации. Для работы было создано специальное приложение с небольшим набором функций для точной настройки всей аппаратуры. Для создания звукового сопровождения использовались не только программы, но и различные физические инструменты, в том числе аналоговые синтезаторы и классические драм-машины. В инсталляции есть моменты, когда световые лучи как будто выходят из гигантских кнопок драм-машины, пульсируют в ритм музыке. Звук и свет «перемещались» по путепроводу между левой и правой частями панорамы, тем самым символизируя идею мирного диалога и взаимодействия. Хаотические ритмы, в начале представления споря друг с другом, постепенно сливались в единую структуру и, наконец, дополняясь всё новыми и новыми инструментами, образовывали гармоничный поток звуков. На фото ниже показана структура инсталляции Здесь Вы видите этап предварительной визуализации На этой фотографии показан интерфейс приложения, воспроизводящего инсталляцию (видеопроигрыватель, 40 настроек для светового оборудования, глобальные настрйоки) Инсталляция «The Whale» («Кит») на корабле «Валерий Брюсов» в Москве Инсталляция специально затачивалась для представления на корабле «Валерий Брюсов». Этот корабль был отреставрирован, закреплён у берега Москвы-реки и превращён в арт-центр. Проецирование выполнялось на потолок, покрытый узором из шестиугольных паттернов, сохранившимся ещё с момента постройки корабля в Австрии. Когда Вы находитесь в этом зале, то ощущаете себя плывущим по реке внутри гигантской головы кита и созерцающим окружающий мир. Свечение шестиугольных клеток сливается с огнями Крымского моста и Третьяковской галереи, отражающимися в воде. Для проекта использовались 4 ультракороткофокусных проектора, размещённых на полу в углах. Видеообразы и звук контроллировались с помощью TouchDesigner. Потребовалось чуть больше суток для настройки отображения 1400 шестиугольников на потолок. Для этих целей использовалось специальное приложение, которое управлялось посредством беспроводной клавиатуры. Поэтому виджей мог свободно перемещатся по залу, настраивая инсталляцию. Для звукового сопровождения использовались 5 аудиовизуальных композиций, проигрываемых в случайном порядке с наложением эффектов. Каждая композиция привязывалась к видео в одной из шестиугольных ячеек. А затем это видео клонировалось на остальные ячейки. Каждый клон имел случайную задержку в воспроизведении, поэтому в каждый момент времени все ячейки выглядели по-разному. Исходное видео либо генерировалось программно, либо рисовалось вручную, а затем синхронизировалось со звуком тоже вручную или посредством OSC в Ableton. Кроме того инсталляция была интерактивной. Посетители могли взаимодействовать с «китом». Для этого нужно было положить свой телефон на чёрную коробку в центре комнаты. После этого изображение с экрана телефона врывалось в визуальный ряд, заполняя все ячейки. Все драгоценные моменты Вашей жизни наполняли «сознание кита» со скоростью света. На фото ниже Вы видите интерфейс приложения для управления инсталляцией Здесь представлено приложение для маппинга Это маски для создания задержки воспроизведения видео в паттеранх А на этом фото показана структура инсталляции

Проекция на дерево

The fifteenth edition of LPM Live Performers Meeting begins on June 26, 2014 in Eindhoven - Netherlands, in the spaces of LAB-1, an incubator and meeting place, an open museum as well as a stage for live music, expos, visuals, and djs for young creative, artists and alternative culture. The website of LPM XV Editionis now on-line and, starting from today THE CALL FOR WORKS IS OPEN! Send us your best project or performance and come join the most important event on LIVE VIDEO worldwide and celebrate with us the 10th year of the Meeting! We are looking for: AV Performance Workshop VJ Set * Live mapping * Project showcase Video Installation * The performances in this category will be included exclusively in the program of the VJ Torna Eindhoven, international contest with prizes awarded in 3 categories. The registration form is only available on-line and the subscriptions will be accepted until April 21, 2014 http://liveperformersmeeting.net/2014-eindhoven/participate/ If you wish to participateto the Meeting,but you don’t want to perform,subscribe anywayas you will have an incredible opportunity to meet hundreds of live video artists, experts and practitioners, so to further your knowledge of the hottest topics related to live video performance! The aim of LPM is to promote and diffuse the free circulation of ideas, knowledge, techniques and languages related to LIVE VIDEO practice, which will be the main focus of the Meeting. 3 days in which there will be a spectacular, innovative and engaging program, that you too can help make unique. Languages, techniques, cultural derives, innovative technologies: these are the themes that we want to discuss during our seminars and workshops. Send us your proposal for a talk, a presentation or a workshop and help us spreading knowledge! Look at thegallery of the latest edition: http://liveperformersmeeting.net/2013-cape-town/gallery/ https://flxer.net/lpm-team/events/lpm-2013-cape-town/ The video report of Cape Town edition is available at: http://vimeo.com/88073756 LPM is produced and organized by Flyer Communication, Linux Club, FLxER.net LPM Team

Не загружается меш или объект. MWM поддерживает файлы форматов obj, 3ds, stl и ply. Каждый объект должен содержать информацию о своей позиции, координатах текстур, координатах нормалей. Нормали могут быть созданы при выборе опции "Generate Normals" при импортировании. Загружается объект огромного (или крошечного) размера. Размер загружаемого объекта определяется его размером в CAD-программе, где он был создан. Рекомендуется изменять размер объекта в этой системе. Также можно выполнить масштабирование объекта прямо в MWM. Для этого надо зажать ALT и покрутить колёсико мыши. После загрузки текстур, они оказываются перевёрнутыми. Отображение текстур зависит от UV-координат в CAD-программе. Вы можете выполнить переворот (flip) UV-координат меша при экспорте из CAD-программы или выбрать опцию "Flip UV" при импорте в MWM. После этого текстуры должны отображаться корректно. Гизмо для объекта находится слишком далеко. Расположение гизмо зависит от координат объекта в CAD-программе. Рекомендуется центрировать объект перед экспортом из CAD. Загрузка объектов происходит слишком долго. MWM использует несколько проходов при загрузке и конструировании объектов. Более сложные объекты требуют большего времени. Пожалуйста, будьте терпеливы. При загрузке видео выдаётся предупреждение "bad file format" (некорректный формат файла). Для повышения производительности, поддерживаются не все форматы файлов. Рекомендуется использовать форматы MJPEG (motion JPEG/photo JPEG), AVI или MOV. Сколько объектов можно загрузить одновременно? MWM не накладывает каких-либо ограничений на количество загружаемых объектов, так что можно добавлять столько объектов, сколько сможет обработать ваше оборудование. Сколько источников освещения можно добавить? MWM не накладывает каких-либо ограничений на количество источников освещения, так что можете добавлять столько источников, сколько пожелаете. Только помните, что чем больше источников света Вы используете, тем больше вычислительных ресурсов потребуется для рендеринга сцены. Сколько текстур (видео/изображения) можно добавить к объекту? Количество текстур никак не ограничивается программно, но опять следует помнить, что чем больше текстур Вы используете, тем больше вычислительных ресурсов потребуется для рендеринга сцены. Какое максимальное разрешение допустимо для текстуры? Это опять зависит от Вашей аппаратуры, никаких ограничений программа не накладывает. Внутри MWM реализован ряд алгоритмов для обработки видео посредством GPU. Декодирование же видео выполняется посредством CPU. Так что все ограничения связаны только с используемой аппаратурой (CPU, GPU, полоса пропускания). Конечно, разработчики программы не могли протестировать все возможные конфигурации, так что Вы можете оставить им отзыв о том, как программа работает с большими разрешениями. Какое расширение имеют файлы проекта в MWM? Проекты сохраняются с расширением mwmp. Объекты или текстуры не перезагружаются из сохранённого проекта. Объекты сохраняются в папке "Object" рядом с файлом проекта. Для текстур в проекте сохраняются только пути к ним. Поэтому если Вы переместите или удалите текстуру, то Вам придётся перезагрузить её по новому расположению. Для того, чтобы обеспечить проекту полную портативность (при переносе его на другую машину), используйте метод "Export". Где MWM хранит логи? Логи расположены в C:\Users\UserName\AppData\Local\MWM\log Обязательно ли для работы MWM дорогое оборудование? Требования к оборудованию можно посмотреть на http://www.insidinc.com/multiwindowmapper/. Так как MWM использует технологии OpenGL и OpenCL, то Вам понадобится оборудование с поддержкой OpenGL версии 4.2 и OpenCL 1.0 или выше.