ProjectedAssistant

2019.04 · Auejin Ham, Hyunjin Kim, Geehyuk Lee

코드논문영상슬라이드

무엇
인공지능 스피커의 그래픽 인터페이스를 프로젝터로 벽이나 책상에 띄우는 시스템이다.
음성만 쓰는 비서는 목록이나 표를 전할 수단이 없고, 화면을 달면 그 앞으로 가야만 쓸 수 있다.
어떻게
Kinect v2로 사람과 표면을 인식하고 아두이노 PWM으로 프로젝터 방향을 움직여, 보이는 자리에 화면을 띄운다. WPF(C#)로 만들었고 Wizard of Oz 실험과 NASA-TLX로 평가했다.
새로움
화면이 사람을 따라오게 해, 비서를 쓰는 자리가 스피커가 놓인 자리에 묶이지 않게 했다.

초록

구현 시나리오는 방 규모의 얼굴 추적기와 프로젝션 디스플레이로 구성된다.

구현 시나리오는 방 규모의 얼굴 추적기와 프로젝션 디스플레이로 구성된다.

시각 인터페이스의 공간 의존성은 음성 명령의 장점을 떨어뜨릴 수 있다.

시각 인터페이스의 공간 의존성은 음성 명령의 장점을 떨어뜨릴 수 있다.

가상 비서의 음성 명령은 사용자가 기기를 볼 수 있든 없든 사용할 수 있다. 그러나 이 장점은 디스플레이가 사용자로부터 어떻게 배치되어 있느냐에 따른 시각 인터페이스의 공간 의존성 때문에 약해질 수 있다. 그래서 화면 투사를 적응적으로 조절하는 가상 비서 그래픽 디스플레이를 제안한다. 이 디스플레이는 고정된 노트북 디스플레이에 비해 과제 수행 시간이 26% 짧았다. 또한 NASA TLX 설문에서 신체적 부담은 2.7배, 정신적 부담은 1.45배 낮게 나타났다.