디지털 프로젝션, 혁신적인 MultiView 3D 기술로 ‘Deep Fakes’ 전시에 생명을 불어 넣다

Switzerland의 혁신적인 전시회에 방문하는 사람들은 21개의 최첨단 미술작품과 가상 경험뿐만 아니라, MultiView 3D 프로젝션 기술과 Digital Projection의 Satellite MLS 시스템의 조합으로 독일 바겐베르크의 유네스코 세계문화유산인 1000년 역사의 베네딕틴 수도원, Michaelsberg Abbey의 모습을 볼 수 있습니다.

‘Deep Fakes: Art and its Double’는 2022년 4월까지 스위스 Lausanne의 EPFL Pavilions에서 진행되는 전시회로, 인공 지능, 컴퓨터 비전, 상호작용 및 몰입형 미디어, 3D 및 5D 프린팅 등의 새로운 디지털 문화가 미술계를 혁신하고 있다는 것을 보여주는 독특한 전시를 선보입니다. 이는 규모와 강도면에서 이러한 기술적 변혁을 다룬 최초의 전시회입니다.

전시회 큐레이터이자 EPFL Pavilions 디렉터인 Sarah Kenderdine은 이전 몇 년간 컴퓨터 과학계에서 새로운 창조적인 사례들이 출현한 결과물로 본 전시회를 “문화적 딥 페이크(cultural deep fakes)”라고 지칭하며 “아티스트와 프로듀서들이 컴퓨터 기술의 잠재력과 새로운 형태의 미술을 완전히 이해하기 시작한 것은 최근에 일어난 일입니다”라고 말합니다. Kenderdine 교수는 20년 이상에 걸쳐 박물관과 세계문화유산지(캄보디아의 안코르와 유럽의 그리스 올림피아)에서 대규모 몰입형 및 상호작용 전시회를 개발하고 제작한 경험을 가지고 있습니다.

미카엘스베르크 수도원은 2012년 구조적 손상이 발견된 이후 보수 작업으로 인해 폐쇄되었습니다. 이 과정에서 삼차원 레이저 스캐닝 전문 업체인 ArcTron은 도시 Bamberg의 요청으로, 르네상스 후기 및 로코 예술, 조각, 건축물 등 중요한 작품을 수록한 교회 내부의 고해상도 사실적 재현을 만들기 위해 위촉되었습니다.

Deep Fakes 전시회를 위해 바우하우스 대학교의 가상 현실 및 시각화 연구 그룹과 스핀오프 기업 Consensive는 ArcTron의 3D 모델에 대한 실시간 렌더링 기술을 개발하여 Multi-View를 사용하여 몰입형 가상현실로 제공하게 됩니다.

바우하우스 대학교에서 설치한 디지털 프로젝션 시스템은 INSIGHT Satellite MLS 4K HFR 360 MultiView 프로젝터 하나와 Volfoni사의 안경 여섯 쌍으로 구성되어 있습니다. Multi-View만큼 고속의 프레임 속도(360fps)를 사용함으로써 이 단일 프로젝터는 각 사용자에게 적합한 전시물의 시점을 유지하면서 참여자 여러 명에게 진정한 3D 경험을 제공할 수 있습니다. 이것은 사용자가 진정으로 공유하는 협업적인 방식으로 서로 볼 수 있고 상호작용할 수 있게 합니다.

Kenderdine 교수는 INSIGHT Satellite MLS 4K HFR 360 기술은 문화유산 전문가에게 혁신적인 기술을 제공한다며 “3D에 충분한 120프레임을 제공하는 대신, INSIGHT Satellite MLS 4K HFR 360은 360프레임의 특이한 고속 프레임을 제공합니다”라고 말합니다. 이러한 기술은 디지털 작품을 보는 다수의 사용자에게 공유 경험을 제공할 수 있어 문화유산 전문가들에게 혁신적인 도구로 평가됩니다. Kenderdine 교수는 “각 사용자에게 개별적 시점을 적용할 수 있다는 것은 협업에 매우 큰 진일보라고 생각합니다. “라며 극찬을 아끼지 않았습니다.

디지털 프로젝션의 Thierry Ollivier는 Deep Fakes 프로젝트에 참여하고 있는 회사의 대표로, INSIGHT Satellite MLS 4K HFR 360은 모던 멀티미디어 전시회를 위한 더욱 매력적인 솔루션을 박물관 전문가들에게 제공한다고 설명합니다. Satellite MLS는 작고 가벼운 프로젝터 헤드가 빛의 원본에서 분리되어 있어, 전시물 자체 근처에서 소음과 열 발생이 최소화되며 컴팩트한 디자인으로 밝은 4K 영상을 제공할 수 있다고 합니다. 이러한 독특한 디자인으로 Satellite MLS는 극장, 오페라하우스, 역사적인 건물 및 다른 공간이 제한적인 애플리케이션에 이상적이라는 Ollivier의 주장입니다.

Kenderdine는 Multi-View와 Satellite MLS와 같은 기술들이 미래의 예술 및 박물관 전시에 점점 더 중요한 역할을 할 것이며, 오디오 비주얼 기술이 방문객들을 더욱 상호작용적인 경험에 몰입시키는 데 도움이 될 것이라고 결론 내렸습니다. “박물관 수준에서 이러한 도구들은 새로운 이야기를 전하는 새로운 방법을 제공합니다. 교육적인 것이 아닌, 상호작용에 대응하고 새롭게 떠오르는 이야기, 그리고 방문객들이 체험하고 살아낼 수 있는 이야기입니다. 오디오 비주얼 기술은 아카이브를 열어주고 재사용 가능성을 훨씬 높여줍니다. 이것은 작가, 창작자 및 큐레이터들이 새로운 캔버스를 가지고 전에 본 적 없는 미학적 프레임워크를 창조하고 방문객들을 이동시키고 기쁘게 만드는 새로운 참여 방식을 만들어줍니다.”

EPFL Pavilions는 Digital Projection 솔루션에 대해 매우 만족스러웠다고 합니다. “해당 장비는 상상하던대로 움직였으며, Digital Projection에서 원격으로 지원해주어 하루 반나절만에 가동이 가능했습니다.

일반 대중도 대단히 좋아합니다. 이전에 본 적이 없는 차이를 인식합니다. EPFL의 과학자들도 기술이 제시하는 새로운 기회를 보기 위해 전시회를 여러 차례 방문했습니다.”

“Kenderdine 교수님과 최근 10년간 영상과 가상 현실에 관한 프로젝트에서 함께 일했던 저는 그녀가 기술과 예술 간의 격차를 줄이기 위한 재능과 노력을 칭찬합니다.”라며 Ollivier가 덧붙였습니다. “Digital Projection, Consensive 및 Volfoni의 전문성을 결합하여 Deep Fakes에서 Sarah와 그녀의 팀은 세계적인 문화 기관부터 지역 학생들까지 다양한 대중들에게 어떤 가상 현실 경험이어야 하는지 보여주었습니다. 직접 확인해 보면 믿을 수 있습니다.”