자연스러운 디지털 필기를 위한 UX

디지털 잉크의 까다로움

시장에 이미 많은 디지털 잉크 기술이 출시되어 있지만, 기능이 제한적인 경우가 대부분입니다. 즉, 이러한 기술들은 사용자가 입력한 획을 정적인 이미지로 캡처합니다. 페이지에서 사용자가 입력한 획을 이동하거나 크기를 조정할 수도 있지만, 그 외 다른 기능은 많지 않습니다. 그 결과 필기로 입력한 항목은 페이지에서 타이핑으로 입력한 텍스트와 같은 다른 입력 항목들과 별개로 존재합니다.

그래서 우리는 놀라운 정확도로 필기를 인식하고 변환할 수 있는 AI 엔진을 개발하면서도 '더 발전된 형태의 디지털 잉크를 위해서는 무엇이 필요할까?', '사용자에게 유용하면서도 기존의 종이와 잉크보다 뛰어난 결과를 제공하기 위해서 다른 어떤 방법이 필요할까?'라고 스스로 자문하고 있었습니다.

우리는 기존 문헌을 통해 타이핑, 딕테이션 또는 기타 디지털 입력 방식을 사용하는 대신 사람들이 손으로 글자를 쓰거나 그림을 그리는 방식을 선택하는 이유를 이해했습니다. 이렇게 해서 필기 인식을 뛰어넘어 디지털 잉크의 경계를 확장하기 위한 실험이 시작되었습니다. 우리는 응답성과 펜 제스처를 통한 수정 등의 기능을 포함하도록 연구 대상을 확대했습니다. 연구가 순조롭게 진행됨에 따라 곧 이러한 내용들이 AI 단독으로는 해결할 수 없는 과제라는 것이 명확해졌습니다. 우리는 동시에 감각적이고 지능적인 UI 설계에 집중해야 했습니다.

당연히 효과적인 입력

작업을 진행하는 동안 디지털 기기 사용률과 다양성이 기하급수적으로 증가하면서 필기 인식의 현재와 미래가 불확실해졌습니다. 그래서 우리는 연구를 더욱 강화하고 긴 시간 동안 사회적, 직업적으로 다양한 배경의 사람들을 만나서 일상 생활에서 필기가 사용되는 방식을 이해하고자 했습니다.

우리는 수천개의 실제 메모(종이 및 디지털)를 연구하고 수천 명의 참가자가 참여하는 상세한 설문조사를 수행했습니다. 그리고 놀랍게도 디지털 기기의 폭발적인 확산에도 불구하고 우리가 처음에 가졌던 가정은 계속해서 재확인되었습니다. 손으로 콘텐츠를 작성하는 것은 자유로운 표현부터 기억력 향상까지 놀랍고도 독특한 이점이 있습니다.

아이디어를 다양한 방향으로 펼치면서 기록하거나 어떤 관계를 브레인스토밍할 때는 키보드보다 펜과 종이를 사용하는 것이 훨씬 쉽습니다. 수식이나 악보를 쓰는 경우에도 마찬가지입니다. 그리고 다이어그램을 그릴 때도 마우스보다는 손을 사용하는 것이 훨씬 쉽습니다. 글쓰기는 단순히 완성된 결과를 만들어내는 것 이상을 포함하는 경우가 많습니다. 글쓰기는 생각하는 방식 그 자체를 의미합니다. 손으로 쓰거나 그릴 때 내 안에서 자유롭고 유기적인 방식으로 발전하는 생각들을 표현할 수 있습니다.

디지털 콘텐츠의 장점

하지만 손으로 콘텐츠를 작성하는 방식에도 불편한 점과 한계가 있습니다.

우리의 연구에 따르면 종이 메모가 디지털 도구 및 리소스와 깔끔하게 통합되지 않는 경우가 많은 것으로 나타났습니다. 사람들은 여러 장의 종이에 낙서처럼 끄적거린 정보를 분실하거나, 필기한 회의록이나 스케치한 다이어그램을 PowerPoint 또는 Keynote에 다시 입력하느라 귀중한 시간을 낭비하고 있었습니다. 처음에는 깨끗하게 시작했어도 점점 공간이 부족해지고 지울 수 없는 실수가 늘어남에 따라 결과물은 점점 더 엉망이 되고 지저분하게 되는 경우가 많습니다. 필기보다 디지털이 정보 검색, 구성, 이동성, 편집 및 연결 측면에서 더 효과적입니다.

생산성과 사용 편의성에 따라 서로 장점이 있는 이 두 가지 입력 방법의 하나만을 선택해야 하는 이유가 있을까요? 우리는 서로 다른 두 가지 방식의 장점을 모두 제공하는 솔루션을 만들 수 있다는 가능성을 보았습니다.

사용 사례 이해

또한 연구를 진행하면서 우리는 기존의 디지털 입력 방법이 불편하게 여겨지는 부분과 필기가(심지어 손가락을 사용한 필기가) 유리할 수 있는 부분이 무엇인지 조사했습니다.

자동차 내부의 디스플레이와 인포테인먼트 시스템이 좋은 예입니다. 버튼, 다이얼과 터치스크린 키보드는 운전자의 주의를 산만하게 하고 안전을 위협할 수 있습니다. 음성 인식도 심각한 단점이 있습니다. 자동차는 주변 소음으로 가득한 경우가 많고 빈번하게 발생하는 오류를 방지하기에 충분할 정도로 기술이 정확하지 않은 문제도 있습니다. 운전자가 인식 오류를 해결하기 위해 주의를 분산해야 한다면 치명적인 결과를 초래할 수도 있습니다.

하지만, 운전자가 도로를 주시하면서 손가락으로 지시사항을 쓸 수 있다면 어떨까요? 이렇게 하려면 우선 소프트웨어가 중첩해 쓴 문자를 분리하고 이해할 수 있어야 하므로 많은 도전 과제가 해결되어야 합니다. 하지만 이러한 솔루션의 장점과 응용 잠재력은 특히 화면이 매우 작은 스마트 워치에서 매우 중요합니다.

또 다른 예로 다이어그램 작성이 있습니다. 일반적으로 보고서나 프레젠테이션에 사용할 다이어그램을 그리려면 사용자가 별도의 애플리케이션 사용 방법을 익히거나 MS Word와 같이 이미 익숙한 애플리케이션에 대한 특별한 전문 기술을 익혀야 합니다. 펜으로 다이어그램을 그린 후 간편한 조작을 통해 완벽한 도형과 직선 및 타이핑된 텍스트로 변환할 수 있다면 어떨까요?

한 걸음 더 나아가, 다이어그램 안의 요소가 이동됨에 따라 다이어그램이 반응해서 커넥터 크기가 자동으로 조정된다면 어떨까요? 심지어, PowerPoint 또는 Keynote와 같은 인기 있는 프레젠테이션 앱에 손으로 그린 다이어그램을 복사해서 붙여 넣을 때 다이어그램이 자동으로 변환된다면 어떨까요?

MyScript는 필기 인식과 쓰기가 텍스트로 변환되는 것 이상의 기능을 사용자에게 제공하는 새로운 종류의 디지털 잉크를 구상하고 있었습니다.