인터페이스는 우리가 느끼기 전에 움직인다

마크 B. N. 한센의 체화된 미디어와 피드포워드 이론을 통해, 디지털 환경이 사용자의 의식적 선택보다 먼저 감각과 행동의 조건을 조직하는 방식을 읽는다.

우리는 인터페이스를 대개 입력과 출력의 표면으로 생각한다. 버튼을 누르면 화면이 바뀌고, 몸을 움직이면 센서가 반응하며, 프롬프트를 입력하면 AI가 답한다. 이 설명에서 사람은 먼저 행동하고 기술은 그다음에 응답한다. 그러나 오늘의 디지털 환경은 그렇게 단순한 순서로 작동하지 않는다.

추천 피드는 사용자가 다음 영상을 고르기 전에 시선의 경로를 배열한다. 스마트 공간은 사람이 상황을 의식하기 전에 움직임과 온도, 위치를 감지한다. 생성형 AI 인터페이스는 질문이 완성되기도 전에 자동완성, 예시, 기본값으로 가능한 선택의 범위를 좁힌다. 마크 B. N. 한센(Mark B. N. Hansen)의 미디어 이론이 중요한 이유는 이런 장면을 ‘더 빠른 반응’이 아니라 감각과 행동의 조건을 미리 조직하는 환경으로 읽게 하기 때문이다.

스크린 안의 이미지보다 먼저 움직이는 몸

한센의 초기 작업은 디지털 이미지를 완결된 화면으로 보는 관습에 도전한다. 《New Philosophy for New Media》와 《Bodies in Code》에서 핵심적인 것은 이미지가 스크린 안에 이미 완성되어 있고 관객이 그것을 수동적으로 받아들이는 것이 아니라는 생각이다. 디지털 이미지는 몸의 거리, 움직임, 균형, 촉각, 주의가 개입할 때 비로소 경험으로 성립한다.

이 관점에서 몸은 콘텐츠를 운반하는 하드웨어가 아니다. 몸은 무엇이 전경이 되고 무엇이 배경으로 밀려나는지, 어떤 속도가 편안하고 어떤 지연이 불안한지, 빛과 소리의 압력이 언제 몰입에서 피로로 바뀌는지를 결정하는 감각의 프레임이다. 같은 프로젝션도 서 있는 높이와 이동 경로가 달라지면 다른 작품이 되며, 같은 인터랙션도 센서의 범위와 지연이 달라지면 전혀 다른 관계를 만든다.

그래서 체화는 미디어아트에 인간적 온기를 더하는 장식어가 아니다. 작품이 실제로 어디에서 작동하는지를 판별하는 기준이다. 관객의 몸을 지운 채 해상도와 화면 크기만 설명하면, 우리는 작품의 핵심 매체를 절반쯤 놓친다.

반응형 작품에서 피드포워드 환경으로

한센의 후기 논의는 여기서 한 걸음 더 나아간다. 《Feed-Forward》가 다루는 21세기 미디어는 사용자가 보고 해석한 뒤 반응하는 도구에 머물지 않는다. 센서, 네트워크, 데이터 흐름, 예측 시스템은 의식적 판단보다 앞선 층위에서 환경을 조정한다. 무엇을 볼지 선택하기 전에 노출 순서가 정해지고, 무엇을 원한다고 말하기 전에 다음 행동의 가능성이 계산된다.

이 차이는 피드백과 피드포워드의 차이로 설명할 수 있다. 피드백은 이미 일어난 출력이 다시 입력으로 돌아오는 순환이다. 한센에게 피드포워드는 단순히 미래를 더 정확히 예측한다는 뜻보다, 인간이 상황을 지각하고 의미화하기를 기다리지 않은 채 데이터 처리와 환경 조정이 먼저 일어나는 선행적 작동에 가깝다. 자동 밝기 조절이나 움직임 기반 공간 제어처럼 단순한 장치부터, 추천 시스템과 예측형 인터페이스처럼 복잡한 플랫폼까지 그 층위는 넓어진다.

문제는 예측이 정확한가에만 있지 않다. 시스템이 우리보다 먼저 움직일수록 사용자는 자신이 어떤 선택지 안에 배치되었는지 알아차리기 어려워진다. 반응이 빨라진 대신 숙고할 시간이 사라지고, 편리함이 커진 대신 다른 경로를 상상할 여지가 줄어든다. 미디어는 메시지를 전달하는 통로가 아니라 주의, 리듬, 기대를 배치하는 환경이 된다.

몰입형 전시와 AI 인터페이스를 다시 판단하기

이 관점은 몰입형 미디어아트에 유용한 비평 기준을 준다. 공간을 거대한 이미지로 채우는 것만으로는 충분하지 않다. 관객의 보행 속도와 시선, 체류 시간, 소리의 방향, 센서의 지연이 어떻게 조직되는지를 보아야 한다. 작품이 몸의 선택을 넓히는지, 아니면 정해진 감탄의 경로로 관객을 밀어 넣는지도 물어야 한다. 몰입은 화면의 크기가 아니라 감각의 조건을 누가 설계하는가의 문제다.

AI 인터페이스도 마찬가지다. 우리는 흔히 결과 이미지나 답변의 품질만 평가하지만, 실제 경험은 그 이전부터 설계된다. 추천 프롬프트, 자동완성, 기본 모델, 응답 속도, 재시도 버튼, 기록 방식은 사용자의 기대와 판단 리듬을 만든다. AI가 무엇을 생성했는지 못지않게, 사용자가 무엇을 요청할 수 있다고 느끼게 했는지가 중요하다.

한센의 언어만으로 데이터 추출과 차별, 플랫폼 소유의 문제를 모두 설명할 수는 없다. 그러나 그의 강점은 권력이 추상적인 규칙으로만 작동하지 않고 몸이 느끼는 속도와 분위기, 주의의 방향으로도 작동한다는 사실을 드러내는 데 있다. 좋은 미디어 비평은 시스템의 정책뿐 아니라 그 정책이 감각이 되는 순간까지 따라가야 한다.

끝내 남는 질문

인터페이스가 우리보다 먼저 다음 장면을 준비하는 시대에 중요한 질문은 “얼마나 빨리 반응하는가”가 아니다. 그 선행적 움직임을 사용자가 알아차리고, 거부하고, 다른 리듬을 선택할 수 있는가이다.

미디어아트와 AI가 새로운 감각 환경을 만든다면, 그 환경은 몸을 더 세밀하게 통제하는 데 그쳐서는 안 된다. 좋은 작품과 좋은 인터페이스는 예측의 정확성만 높이는 대신, 우리가 어떤 조건 속에서 느끼고 선택하는지 다시 감각하게 해야 한다.