自然なデジタル手書きのための UX

デジタルインクのさらなる活用

市場には多くのデジタルインクが出回っていますが、そのほとんどは機能に何らかの限度があります。つまり、これらのデジタルインクは、ユーザーが作成したストロークを静止画像としてキャプチャしているのです。 それらのストロークは、サイズを変更したり、ページ内で移動したりできますが、それ以上のことはできません。 結果的に、手書きのコンテンツはページ内の他のコンテンツ、特にデジタルテキストとは別に存在することになります。

そのため、弊社は、驚異的な精度で手書きを認識して変換できる AI エンジンを開発しながらも、デジタルインクを使って他に何かできないだろうか、 また、他にどのような方法でユーザーに利益をもたらし、従来の紙やインクよりも優れたパフォーマンスを発揮できるだろうかと自問していたのです。

既存の文献は、人々がなぜデジタルコンテンツをタイプ入力、ディクテート、または使用する代わりに手書きを選ぶのかを理解する上で役立ちました。 そこで、弊社は手書き認識を超えてデジタルインクの視野を広げる実験を始めました。 そして、焦点を広げ、ペンジェスチャーによる応答性や編集可能性などの機能を採り入れるようにしたのです。この試みは順調に進んだものの、そのうちすぐに、これらは AI だけでは克服できない課題であることが明らかになりました。 インスピレーションを伴ったインテリジェントな UX デザインにも焦点を当てる必要があったのです。

本来の効果的な入力

デジタル機器の普及や多様化が飛躍的に進む中、手書きの現状や将来が不明確なまま、弊社は作業に取り組んでいました。 そこで弊社は、さまざまな社会的および職業的背景を持つ人々に長期間にわたってインタビューを行い、彼らが日常生活で手書きをどのように使っているかを理解するための調査を強化しました。

弊社は、数千に及ぶ実際のメモ（紙とデジタル）を詳しく調べるとともに、数千人の回答者を対象にした詳細なアンケート調査を実施しました。 そして驚くべきことに、デジタルデバイスの爆発的な急増にもかかわらず、弊社で最初に打ち立てた仮説が幾度となく確認されたのです。つまり、手作業でコンテンツを作成すると、表現の自由度が向上することや、暗記力の強化につながることなど、驚くべきユニークなメリットがもたらされます。

キーボードを使用するよりも、アイデアをさまざまな方向に展開させながら記録したり、ペンと紙を使って関係性をブレインストーミングしたりする方がはるかに簡単です。これは、数式や楽譜を書く場合でも同じことです。 また、ダイアグラムを作成する場合などは、マウスを使うよりも手を使った方が簡単なことが多々あります。 ライティングは完成したコンテンツを作成するだけではなく、思考の一手段です。 私たちのアイデアは、手で文字を書いたり図を描いたりすることによって、より自由に、そしてより自然に進化できるのです。

デジタルコンテンツの利点

しかし、手書きでコンテンツを作成していると、限界やフラストレーションも生じます。

弊社の調査によれば、紙面上のメモをデジタルのツールやリソースに統合しようとするときに、さまざまな問題が発生していることが明らかになりました。 まず、紙面に書き留められた情報は失くしてしまうことがあります。 また、手書きの議事録や改良したスケッチ図を PowerPoint や Keynote にタイプ入力する場合など、文字起こしに貴重な時間を費やさなければなりません。 紙面上のメモは、最初はうまくいくものの、次第に余白が足りなくなったり、間違いをうまく消せなかったりして、秩序がなくなり、理解しにくくなります。 一般に、手書きの代替手段としてのデジタル化は、情報の検索、整理、移植性、編集、および接続性に関してはより効果的でした。

これらの 2 つの入力方法には、それぞれ生産性や使いやすさの点で異なる長所があります。なぜ、どちらか一方の入力方法を選ばなければならないのでしょうか。 そこで弊社は、両方の長所を生かせるソリューションを作成できる可能性に気が付いたのです。

ユースケースの理解

調査中、弊社は従来のデジタル入力方法が扱いにくいと思われる状況や、手で（指だけでも）書くことが有益であると思われる状況についても調べました。

車載用のディスプレイやインフォテインメントシステムが良い例です。ボタン、ダイヤル、タッチスクリーンキーボードは、ドライバーの注意をそらし、安全を脅かす危険性があります。 音声認識にも重大な欠点があります。車内には雑音が多く、現在の技術の精度ではエラーが頻繁に発生してしまいます。 そのような認識エラーをドライバーが修正しなければならないのであれば、ドライバーの注意が散漫し、悲惨な結果を導いてしまう可能性があります。

ドライバーが道路から眼を逸らすことなく指で指示を書くことができたらどうでしょうか。 確かに、これには課題があります。まずソフトウェアは、重ね書きされた文字を分離し、それぞれの文字を理解できる必要があります。 しかし、そのようなソリューションの利点やさまざまな用途の可能性を考えると、これはとても重要なことだと言えます。特に、小さな画面しかないスマートウォッチの場合はそうです。

もう 1 つの例は、ダイアグラムの作成です。 通常、レポートやプレゼンテーション用のダイアグラムを描くには、ユーザーが別のアプリケーションを習得するか、すでに使い慣れているアプリケーション（Microsoft Word など）の専門知識を得る必要があります。 そこで弊社の技術を使って、ユーザーがペンでダイアグラムを作成し、それを数回タップするだけで完璧な図形、直線、およびデジタルテキストに変換できるとしたらどうでしょうか。

また、変換後のダイアグラムが応答型で、要素を移動したときにコネクタのサイズが自動的に調整されるとしたらどうでしょうか。 さらに、手描きのダイアグラムを PowerPoint や Keynote などの人気プレゼンテーションアプリにコピーして貼り付けたときに、そのダイアグラムが自動的に変換されるとしたらどうでしょうか。

弊社は、手書き認識やデジタルテキスト変換以上のものをユーザーに提供する、新しいデジタルインクの構想を練っていたのです。