미카미 세이코의 관객은 왜 보는 동시에 감시되는가

미카미 세이코의 감각 설치와 《Desire of Codes》를 따라, 인터랙션이 관객에게 통제권을 주는 동시에 몸을 측정·기록하는 감시 장치가 되는 순간을 읽는다.

표지는 관객·센서·감시의 관계를 표현한 AI 생성 개념 이미지이며, 실제 작품이나 전시의 기록 사진이 아니다.

인터랙티브 설치 앞에서 관객은 보통 자신의 움직임이 작품을 바꾼다고 느낀다. 한 걸음 다가가면 빛이 켜지고, 고개를 돌리면 영상이 따라오며, 소리를 내면 공간의 음향이 달라진다. 이런 반응은 관객에게 주도권이 있다는 인상을 준다. 내가 입력하고 작품이 응답했으니, 이 관계의 중심은 나라고 생각하기 쉽다.

미카미 세이코(三上晴子, MIKAMI Seiko)의 작업은 그 확신을 불편하게 만든다. 관객이 장치를 움직인 바로 그 순간, 장치도 관객의 몸을 측정하고 기록하기 때문이다. 반응하는 공간은 자유로운 놀이의 무대이면서 센서가 사람을 데이터로 바꾸는 환경이다. 미카미가 1980년대부터 정보사회와 인간 신체를 다뤘고, 1990년대 이후 인간 지각을 끌어들이는 대형 인터랙티브 설치를 전개했다는 ICC의 작가 소개는 이 질문의 긴 계보를 보여 준다. ICC 작가 아카이브

그녀의 작업을 지금 다시 봐야 하는 까닭은 센서 기술의 선구성보다 그 기술을 대하는 태도에 있다. 미카미는 인터랙션을 관객의 자유와 같은 말로 취급하지 않았다. 몸이 작품의 입력이 될 때 무엇이 잘리고 수치화되는지, 누가 누구를 보고 있는지, 그 시선과 소리가 어디에 남는지를 설치의 감각으로 돌려주었다. 관객은 작품을 작동시키는 사람인 동시에 작품이 읽어 내는 대상이 된다.

감각은 몸 안에만 머물지 않는다

1997년작 《World, Membrane and the Dismembered Body》는 무향실에서 시작한다. 반사음이 거의 없는 방에 들어간 관객은 먼저 자신의 몸 안에서 나는 작은 소리를 듣고, 이어 스피커로 증폭되고 변형된 그 소리를 다시 듣는다. 소리가 되돌아오는 시간차는 마음이 예상한 몸과 실제로 들리는 몸 사이에 틈을 만든다. ICC는 이 환경을 ‘perception-driven architecture’라고 설명한다. ICC 작품 아카이브

여기서 귀는 완성된 소리를 받아들이는 수동적 기관이 아니다. 심장과 폐, 맥박 같은 내부 소리는 측정 장치를 거쳐 수치가 되고, 컴퓨터가 만드는 3차원 형태와 변하는 음향의 매개변수가 된다. 관객은 자기 몸에서 나온 소리를 듣지만, 그 결과를 직접 통제할 수는 없다. 몸은 친숙한 자아의 경계라기보다 측정과 변환이 통과하는 인터페이스로 나타난다.

이 작품은 기계가 몸에 낯선 무엇을 덧붙여서 섬뜩한 것이 아니다. 장치는 평소에도 계속 일어나지만 의식하지 못했던 심장 박동과 장기 소리를 외부 공간으로 꺼내 놓는다. 관객은 자기 몸의 주인이라는 감각과 자기 몸도 완전히 들여다볼 수 없다는 사실을 동시에 경험한다. 인터페이스는 사람과 기계 사이의 화면이 아니라, 몸 안과 밖을 나누던 경계 전체가 된다.

미카미의 작업에서 감각의 확장은 곧 통제력의 확장을 뜻하지 않는다. 더 많이 듣고 더 많이 보게 될수록 관객은 장치가 무엇을 골라 증폭했는지에 의존한다. 기술은 숨겨진 감각을 해방하는 동시에, 감각이 나타날 형식과 속도를 정한다. 이 이중성이 그녀의 설치를 단순한 체험형 장치와 갈라놓는다.

반응하는 바닥은 누구의 세계를 계산하는가

미카미와 이치카와 소타가 함께 만든 《gravicells—gravity and resistance》(2004–)에서는 바닥 전체가 감지 장치가 된다. ICC 설명에 따르면 설치는 225개의 패널 아래 센서를 두고, 관객의 체중과 기울기, 이동 속도에 따라 선과 이미지, 소리, 빛을 실시간으로 바꾼다. 여러 사람이 함께 들어오면 각자의 물리적 질량과 움직임이 하나의 가상 중력장 안에서 서로 영향을 준다. 설치 장소의 GPS 정보와 공간 변화를 계산하는 알고리즘도 이 계산에 포함된다. ICC 작품 아카이브

겉으로 보면 관객의 움직임을 시청각 효과로 번역하는 전형적인 인터랙티브 설치다. 하지만 바닥이 읽는 것은 ‘사람’ 전체가 아니다. 센서가 포착할 수 있는 압력과 기울기, 속도만 입력으로 들어온다. 나이와 기억, 이동의 목적은 계산되지 않는다. 관객은 고유한 개인이면서 동시에 질량과 벡터로 축약된 데이터다.

그 축약은 무조건 폭력적이라고 단정할 수 없다. 작품은 평소 배경으로 지나치던 중력을 감각 가능한 관계로 바꾼다. 혼자 걷는다고 생각했던 관객은 다른 몸의 이동이 자신의 주변 선과 소리를 바꾸는 장면을 보며, 공간을 함께 만드는 물리적 관계를 알아차린다. 다만 그 관계는 센서와 알고리즘이 선택한 변수로만 나타난다. 무엇이 입력으로 인정되는지에 따라 작품이 보여 주는 세계도 달라진다.

그래서 《gravicells》는 반응 속도나 몰입감만으로 평가하기 어렵다. 작품의 핵심은 관객이 화면을 얼마나 많이 바꾸는지가 아니라, 장치가 몸을 어떤 단위로 읽고 그 결과를 다시 환경처럼 돌려주는가에 있다. 관객의 행위와 시스템의 측정은 한쪽에서 다른 쪽으로 흐르는 단순한 명령이 아니다. 서로를 계속 바꾸지만, 측정 규칙을 정하는 권한은 대칭적이지 않다.

여섯 개의 눈이 관객을 따라올 때

이 비대칭은 《Desire of Codes》(2010/11)에서 노골적인 감시 환경으로 커진다. ICC와 YCAM의 작품 설명을 종합하면, 전시장에는 90개의 벽면 유닛과 그중 일부에 장착된 소형 카메라, 카메라와 프로젝터를 장착한 6개의 로보틱 서치 암, 곤충의 겹눈을 닮은 원형 스크린이 놓인다. 벽의 장치는 사람의 방향으로 꿈틀거리고, 천장의 팔은 접근하는 관객을 감지해 따라가며 촬영한 이미지를 다시 투사한다. ICC 작품 아카이브 YCAM 작품 아카이브

원형 스크린의 61개 육각형 셀에는 방금 촬영한 관객의 피부와 눈, 머리카락, 가방 같은 조각, 몇 초 전과 몇 시간 전의 기록, 세계 여러 공공장소의 감시 카메라 영상이 뒤섞인다. 전시장 곳곳의 지향성 마이크도 관객의 목소리와 기계음, 공간의 잡음을 모은다. 현재의 몸은 과거의 기록과 멀리 떨어진 장소의 감시 영상 사이에서 잘리고 재조합된다.

관객은 작품을 바라보지만 안정된 관찰자 자리를 얻지 못한다. 내가 화면을 보는 동안 카메라 팔도 나를 보고, 내가 장치의 움직임을 따라갈수록 그 장치는 내 움직임을 데이터베이스에 더한다. YCAM은 이 구조를 관객이 표현의 주체이자 감시의 대상이 되는 상황으로 설명한다. 이때 ‘표현’과 ‘감시’는 서로 반대되는 두 상태가 아니다. 같은 촬영과 투사, 저장 회로가 두 상태를 동시에 만든다.

작품 제목의 ‘욕망’은 사람에게만 속한 것처럼 보이지 않는다. 장치는 계속 더 많은 각도를 찾고, 더 많은 조각을 기록하며, 이미지를 분류하고 재생한다. 그렇다고 장치 자체에 인간과 같은 의도가 있다고 말할 필요는 없다. 계속 포착하고 축적하도록 설계된 시스템이 관객의 호기심과 움직임을 연료로 삼는다는 점이 중요하다. 관객이 적극적으로 참여할수록 감시 회로도 풍부해진다.

이 작품을 오늘의 얼굴 인식이나 스마트 공간과 곧바로 동일시하면 역사적 차이를 놓친다. 《Desire of Codes》는 특정 현재 AI 모델의 정확도나 데이터 정책을 분석한 작업이 아니다. 대신 카메라, 마이크, 데이터베이스, 실시간 피드백이 한 공간에서 관객의 위치를 어떻게 바꾸는지 선명하게 드러낸다. 최신 시스템을 비평할 때도 유효한 것은 기술의 예언이 아니라 이 관계의 설계다.

참여를 환대라고 부르기 전에

미카미의 세 작품을 이어 보면 인터랙션에 대한 질문이 달라진다. 작품이 내 움직임에 반응하는가를 확인한 뒤, 어떤 장치가 몸의 어느 부분을 읽었고 그 결과가 어떻게 되돌아왔는지 물어야 한다. 무향실은 몸 안의 소리를 꺼내고, 반응형 바닥은 몸을 질량과 속도로 바꾸며, 로보틱 감시 환경은 관객의 이미지를 시간과 장소가 다른 기록 속에 흩어 놓는다.

이 관점은 한국의 센서 기반 전시와 공공 미디어 설치에도 적용할 수 있다. 관객의 위치나 목소리, 얼굴, 맥박을 입력으로 쓰는 작품이라면 “참여형”이라는 말만으로 충분하지 않다. 무엇을 감지하는지, 잠깐 계산한 뒤 버리는지 아니면 저장하는지, 관객이 자신의 흔적을 알아볼 수 있는지, 센서가 읽지 못한 몸은 작품 안에서 어떻게 취급되는지를 함께 설명해야 한다. 이는 미카미가 직접 제시한 제작 지침이 아니라, 그녀의 작품에서 끌어낸 비평 기준이다.

참여형 작품은 관객을 환대할 수 있다. 동시에 가능한 행동의 범위를 장치가 정하고, 관객을 측정 가능한 단위로 만들 수도 있다. 둘 중 하나만 골라 작품을 칭찬하거나 비난하면 인터랙션의 실제 구조가 사라진다. 미카미의 설치가 오래 남기는 감각은 바로 그 애매한 위치다. 나는 작품을 움직였지만, 작품이 나를 어떻게 읽었는지는 전부 알지 못한다.

인터랙티브 아트를 볼 때 마지막에 남겨야 할 질문도 여기서 나온다. 내가 무엇을 바꾸었는가보다, 이 공간은 나를 무엇으로 바꾸어 읽었는가. 관객이 보는 동시에 보이는 존재임을 드러낼 때, 인터랙션은 버튼과 반응의 재미를 넘어 감각과 권력의 구조를 보여 주는 비평적 형식이 된다.