우리는 보통 미디어를 “무엇을 말하는가”로 읽는다. 이미지는 의미를 전달하고, 사운드는 정서를 옮기고, 인터페이스는 사용자를 안내한다. 그런데 화면 뒤에서 실제로 작동하는 것은 그런 의미가 아니다. 클록의 펄스, 샘플링 간격, 처리 지연, 동기화 신호, 주소 지정과 재생의 회로가 먼저 돌아간 다음에야 우리가 보는 표면이 만들어진다. 독일 미디어 이론가 볼프강 에른스트(Wolfgang Ernst)는 바로 이 “표면 이전의 작동”을 미디어 이론의 출발점으로 끌어올린다.

아카이브는 기억이 아니라 작동이다

에른스트의 첫 번째 도발은 아카이브에 대한 통념을 무너뜨린다는 데 있다. 우리는 아카이브를 흔히 과거를 보존하는 문화적 제도로 떠올린다. 하지만 디지털 환경에서 아카이브는 “무엇을 기억할 것인가”의 문제이기 전에, 어떤 포맷으로 신호를 저장하고, 어떤 주소 체계로 호출하고, 어떤 장치에서 다시 작동시킬 수 있는가의 문제다.

이 관점에서 보면 클라우드 스토리지와 박물관 수장고는 같은 종류의 장소가 아니다. 디지털 아카이브는 끊임없이 인덱스되고, 캐시되고, 재생산되며, 결정적으로 “재생 가능성”에 의해 정의된다. 보관된 파일이 더 이상 열리지 않는 순간, 그 데이터는 의미를 잃기 전에 작동을 잃는다. 미디어아트의 보존 문제—오래된 비디오 설치가 왜 매번 복원의 대상이 되는가—가 단순한 기술 노후화가 아니라 본질적으로 시간 구조의 문제인 이유가 여기 있다.

기계의 고유 시간

에른스트의 더 근본적인 기여는 “기계의 고유 시간”이라는 개념이다. 인간은 분, 시간, 하루, 역사라는 스케일로 시간을 체험한다. 그러나 기계는 마이크로초 단위의 클록 사이클, 오디오 샘플링의 미세한 틱, 네트워크 패킷의 지연으로 시간을 분절한다. 이 두 시간은 같은 세계에 겹쳐 있지만 결코 같은 리듬으로 흐르지 않는다.

오늘날 자동매매 알고리즘이 1밀리초 차이로 승부를 가르고, 자율주행 시스템이 인간이 인지하기 전에 제동을 걸고, 추천 알고리즘이 사용자의 다음 클릭을 미리 계산해 둘 때, 우리는 사실상 인간 시간이 아니라 기계 시간 위에서 살고 있다. 에른스트는 이 사실을 비유로 말하지 않는다. 그는 그것을 매체의 실제 작동 조건으로 분석할 것을 요구한다.

흥미롭게도 이 통찰은 사운드 미디어에서 가장 선명하게 드러난다. 축음기, 자기 테이프, 디지털 오디오는 단지 소리를 담는 통이 아니라, 시간을 자르고 반복하고 호출하는 시간 기계다. 사운드아트와 데이터 기반 음향 설치가 이론적으로 강력한 이유는 그것이 “표현”이기 전에 “시간 구조의 노출”이기 때문이다.

신호가 의미보다 먼저다

세 번째로 에른스트는 의미보다 신호를 우선에 둔다. 영상은 서사를 전달하기 전에 전자적 스캔과 압축, 전송의 과정으로 존재하고, AI 모델은 인간의 해석 이전에 부동소수점 연산과 텐서의 흐름으로 작동한다. 우리가 “이미지”라고 부르는 것은 사실 이 신호적 사건의 한 단면일 뿐이다.

이 관점은 동시대 미디어아트와 직접 만난다. 료지 이케다(Ryoji Ikeda)의 데이터/사운드 작업, 오래된 비디오 신호를 재변조하는 실험, 머신러닝 모델의 잠재공간을 탐색하는 작업은 모두 “매체가 무엇을 말하는가”보다 “매체가 어떻게 작동하는가”를 전면화한다. 에른스트의 이론은 이런 작업을 단순한 형식 실험이 아니라 매체의 작동 조건을 드러내는 비평으로 읽게 만든다. 형식주의가 아니라 작동주의(operativity)다.

인터페이스 아래에서 무엇이 돌아가는가

이머시브 전시, 인터랙티브 설치, 실시간 엔진 기반 작업이 한국 미디어아트의 강력한 한 축이 된 지금, 에른스트는 더 절실하게 읽힌다. 관객은 화면, 스크린, 프로젝션, 센서 환경을 “체험”한다. 그러나 그 체험을 가능하게 만드는 것은 인간이 감각하지 못하는 동기화, 처리 지연, 신호 교환, 재생 장치의 조건이다.

인터페이스가 친절해질수록 그 아래의 기계 작동은 더 비가시화된다. 같은 이유로 AI 시스템도 더 매끄러운 챗 UI를 갖출수록 모델, 토크나이저, 추론 파이프라인의 시간 구조는 사용자에게서 멀어진다. 에른스트의 미디어 고고학은 이 비가시성에 저항하는 분석 도구다. 그것은 “보이는 것” 뒤에서 작동하는 시간을 다시 분석 대상으로 끌어올린다.

물론 한계도 분명하다. 그의 이론은 관객 경험과 사회적 의미, 플랫폼 자본주의의 정치경제를 정면으로 다루지 않는다. 그래서 카트 크로포드(Kate Crawford)의 AI 추출 비판이나 알렉산더 갤러웨이(Alexander Galloway)의 프로토콜·인터페이스 권력론과 함께 읽는 편이 더 좋다. 에른스트는 모든 것을 설명하는 프레임이 아니라, 다른 이론들이 잘 다루지 못하는 한 층위—기계의 시간 그 자체—를 정밀하게 드러내는 도구다.

닫는 질문

오늘 우리가 “미디어”라고 부르는 거의 모든 것은 점점 더 빠른 클록과 점점 더 깊은 자동화 위에서 작동한다. 그렇다면 비평과 작업 모두에게 남는 질문은 비슷하다. 우리는 화면 위에 보이는 것만으로 매체를 충분히 이해하고 있는가, 아니면 그 아래에서 흐르는 기계의 시간을 놓치고 있는가. 에른스트의 매력은, 이 질문을 추상적 사변이 아니라 회로와 신호의 문제로 되돌려 놓는다는 데 있다.