EN
навигация
Лаборатория за сценични изкуства

Експерименти с проследяване на движение, дигитални аватари и управление на сценични визуализации в реално време.

Лаборатория за сценични изкуства

  • Вид: Интерактивни, Сценични
  • Място: Пловдив, България
  • Дата: 16 септември 2023 г.
  • Продуцент: Държавна опера Пловдив
  • Режисьор: Веселка Кунчева
  • Технически директор и визуален артист (TouchDesigner): Петко Танчев
  • Визуални артисти (Unreal Engine): Студио Киберсектор (Александър Скерлев, Иван Иванов)
  • Музикален ръководител: Мира Искърова
  • Звуков дизайнер: Георги Атанасов
  • Фотограф: Александър Богдан Томпсън

„Лаборатория за сценични изкуства“ е експериментален проект, реализиран в Държавна опера Пловдив през 2023 г., който съчета уъркшопи с разработването на специализирана система за сценични изпълнения на живо. Лабораторията събра дигитални артисти, програмисти и изпълнители, за да изследва как улавянето на движение и обработката на изображения в реално време могат да се превърнат в изразни средства за сцената.

В основата на изследването беше връзката между движението на танцьора и прожектирания дигитален аватар. Костюм за улавяне на движение Rokoko предаваше данни към персонаж MetaHuman в Unreal Engine, а специално разработен интерфейс в TouchDesigner позволяваше управление на виртуалните сцени и визуалната им обработка в реално време. Обединяването на тези инструменти в общ работен процес даде възможност на екипа да експериментира с връзката между физическото движение, дигиталните тела и прожектираните образи.

Под техническото ръководство на Петко Танчев лабораторията съчета уъркшоп по TouchDesigner с практически занимания с балетистите на Държавна опера Пловдив. Процесът завърши с публична демонстрация на резултатите.

Споделено движение

Един жест се разгръща едновременно в две тела: танцьора на сцената и аватара в прожектираната среда. Свързани чрез улавяне на движение в реално време, те споделят едно и също движение, но обитават различни пространства. Танцьорът задвижва аватара, а визуалните артисти определят как това движение изглежда, като променят дигиталната сцена в хода на изпълнението. Заедно тези действия създават сценичен образ, който се анимира и обработва визуално по време на представлението.

Изграждане на сцена в реално време

Пространство за експерименти

„Лаборатория за сценични изкуства“ изследва как дигиталните инструменти могат да бъдат използвани съвместно като художествени средства за изпълнения на живо. В Държавна опера Пловдив разработването на специализирана техническа система протече успоредно с уъркшопи, които обединиха дигитални артисти, програмисти и изпълнители в общ творчески процес.

Уъркшопът по TouchDesigner, воден от Петко Танчев, представи подходи за създаване на интерактивни сценични решения. Практическите сесии с балетистите от Операта бяха посветени на улавянето на движение с костюм Rokoko, осигурен специално за лабораторията.

Свързване на инструментите

Обменът на данни за движение, управляващи сигнали и изображения в реално време позволи на Rokoko, Unreal Engine, MetaHuman, TouchDesigner и OffWorld да функционират в обща система. Петко Танчев създаде интерфейса и средствата за обработка на изображения в TouchDesigner, а Александър Скерлев и Иван Иванов от Студио Киберсектор разработиха компонента в Unreal Engine.

Костюмът Rokoko предаваше движенията на танцьора към Unreal Engine и така анимираше аватар MetaHuman. Специално разработеният интерфейс в TouchDesigner позволяваше на визуалните артисти да сменят сцени и аватари, да задействат ефекти и да настройват различни параметри. OffWorld осигуряваше управление на виртуалната камера в реално време, превръщайки гледната точка в още един елемент, с който екипът можеше да експериментира на живо.

Комуникацията между TouchDesigner и Unreal Engine беше двупосочна: управляващите сигнали се изпращаха към виртуалната сцена, а рендерираното изображение се връщаше в TouchDesigner в реално време. Там се добавяха визуални елементи и се извършваше последваща обработка, преди крайният резултат да бъде прожектиран зад изпълнителите.

В условията на живото изпълнение

Работата с танцьорите позволи на екипа да изследва как движението може да бъде представено чрез различни дигитални тела и среди. Докато изпълнителят анимираше аватара, визуалните артисти можеха да променят облика му и гледната точка към него, предлагайки нови интерпретации на едно и също физическо действие.

Публичната демонстрация представи експериментите в условията на изпълнение на живо. Танцьорите се движеха редом с прожектираните си двойници пред публика, сред която бяха и участници в уъркшопа. Изпълнение на пиано на живо, чийто звук се обработваше чрез Ableton Live, добави музикален пласт.

Лабораторията създаде работеща връзка между улавянето на движение, виртуалните персонажи и управлението на изображения в реално време, като постави основа за последващи експерименти в танца, театъра и операта.