비전 기반 인터페이스

What

화면을 만지지 않고, 사람이 이미 하고 있는 움직임 — 머리의 기울기, 시선, 손 — 을 입력으로 삼는 인터페이스 스터디입니다.

Why

자동차 안, 순찰 관제실, 전시장처럼 손이 자유롭지 않거나 화면과 거리가 있는 자리가 있습니다. 여기서는 포인터가 아니라 몸이 입력입니다. 다만 몸을 읽는 순간 오인식과 사생활이라는 대가가 따라오므로, 무엇까지 읽을지를 먼저 정해야 합니다.

Process

• 머리 기울기 – Glide – 에어팟의 머리 움직임 센서와 CoreMotion으로 탑승자의 기울기를 읽어, 차가 흔들리기 2~7초 전에 햅틱으로 먼저 알립니다. 얼굴 영상은 저장하지 않고, 건강 데이터 연동은 정확도를 포기하더라도 뺐습니다.
• 시선 – Physix AI – 순찰 로봇 관제 화면을 아이트래킹으로 검증했습니다. 시선은 입력이 아니라 설계를 검증하는 자료로 썼습니다.
• 손 – Distance of Thinking – 관람객이 잡는 손잡이가 곧 조종간입니다. 카메라 대신 센서를 골랐고, 그래서 어두운 전시장에서도 동작합니다.

Result

• 몸을 읽을수록 설명이 더 필요해집니다. 시스템이 먼저 움직이면 사람은 이유를 묻습니다. Glide가 "왜 지금 알렸는지"를 늘 함께 말하는 이유입니다.
• 정확도보다 앞서는 기준이 있습니다. 얼굴 영상 저장을 빼고, 건강 데이터를 안 받는 쪽을 골랐습니다.
• 카메라가 답이 아닐 때가 많습니다. 센서 하나로 되는 일에 카메라를 쓰면 조명, 사생활, 연산이 전부 따라옵니다.