在近期的ISS系统展览中,宋淼教授展示了ISS系统根据人体体感技术追踪演员动作,并在舞台背景生成实时影像的视觉特效。这是第一次ISS系统被运用到大型公共场合中。本次舞蹈名为《Ascension》(由MCCCA舞蹈团表演),舞蹈描述了一个崇敬者们礼拜神明的美丽的中国古老传说。舞蹈原本采用静态背景作为舞台效果,但在宋教授的建议下,静态背景由根据演员实时动态生成彩色实时影像的ISS系统特效代替。ISS系统通过人体体感装置、实时声像检测技术以及语音识别功能把人机互动数据进行处理,达到实时的影像,同时能对人的手势和姿势进行分析和运算,包括人体的骨骼及关节信息等。其运用到舞台效果中的互动投影技术,达到了混合现实的效果,即人们在操控虚拟影像的同时也把真实环境融入进了影像,从而增强了视觉及感官性。
观众甚至演员自己都发现ISS系统背景为传统演出增添了许多新奇。
宋教授表示,ISS系统仍然处于开发和实验的早期,但2014年1月18-19日,本技术在中国新年庆祝MCCCA(蒙特利尔中国文化艺术中心)舞蹈中的试用为系统的提高提供了珍贵的信息,也让我们对ISS系统在舞蹈作品中的进一步运用充满信心。
摄制组人员名单:
MCCCA及其成员Ming Zhao导演,Xianglian Lei女士及Jiamin Qiu女士。
Ascension舞蹈编导家;
技术协助和支持:来自康考迪亚大学DB Clarke剧院的Ted Stafford和他的成员;
康考迪亚大学计算机系,Peter Grogono教授的计算机图形工作室,Serguei Mokhov教授,ISS的技术领导;
由Oral history和Digital storytelling中心提供记录连续镜头的设备