UX für eine natürliche digitale Handschrift

Digitale Tinte besser funktionieren lassen

Es gibt viele digitale Tinten auf dem Markt, aber die meisten sind in ihren Fähigkeiten etwas eingeschränkt: Sie erfassen die von Benutzern gemachten Striche als statische Bilder. Diese können in der Größe verändert oder auf der Seite verschoben werden, aber nicht viel mehr. Dies hat zur Folge, dass handschriftliche Eingaben getrennt von anderen Eingaben auf der Seite vorhanden sind – vor allem von eingegebenem Text.

Während wir also ein KI-Modul entwickelten, das Handschrift mit erstaunlicher Genauigkeit erkennen und konvertieren konnte, fragten wir uns auch: Was könnte digitale Tinte noch sein und tun? Inwiefern könnte sie ihren Benutzern Vorteile bringen und herkömmliches Papier und Tinte übertreffen?

Die vorhandene Literatur half uns zu verstehen, warum Menschen lieber mit der Hand schreiben oder zeichnen als zu tippen, zu diktieren oder andere digitale Eingaben zu verwenden. Also begannen wir zu experimentieren, um die Möglichkeiten der digitalen Tinte über die Handschrifterkennung hinaus auszubauen. Wir erweiterten unseren Fokus auf Funktionen wie Responsivität und Bearbeitbarkeit über Stiftgesten. Doch trotz guter Fortschritte wurde bald klar, dass dies Herausforderungen waren, die die KI nicht allein bewältigen konnte. Wir mussten uns parallel dazu auf gut durchdachtes, intelligentes UX-Design konzentrieren.

Natürliche, effektive Eingabe

Wir arbeiteten in einer Zeit, in der die Verbreitung und Diversifizierung digitaler Geräte exponentiell zunahm und der Status und die Zukunft der Handschrift ungewiss waren. Deshalb haben wir unsere Forschung intensiviert und über längere Zeiträume hinweg Menschen mit unterschiedlichem sozialem und beruflichem Hintergrund befragt, um herauszufinden, wie sie Handschrift in ihrem täglichen Leben verwenden.

Wir haben Tausende echter Notizen (auf Papier und digital) untersucht und detaillierte Umfragen mit Tausenden von Befragten durchgeführt. Und bemerkenswerterweise hat sich unsere Ausgangshypothese trotz der explosionsartigen Verbreitung digitaler Geräte immer wieder bestätigt: Die Erstellung von Inhalten mit der Hand bringt beachtliche und einzigartige Vorteile mit sich, von einer größeren Ausdrucksfreiheit bis hin zu einem besseren Erinnerungsvermögen.

Mit Stift und Papier ist es viel leichter, nicht-lineare Ideen aufzuzeichnen oder Brainstorming über Beziehungen durchzuführen als mit einer Tastatur. Das gilt auch für das Schreiben mathematischer Gleichungen oder von Musiknotationen. Außerdem ist es oft einfacher, Diagramme von Hand zu erstellen als mit der Maus. Beim Schreiben geht es oft um viel mehr als nur um die Erstellung fertiger Inhalte: Es ist eine Art des Denkens. Wenn wir mit der Hand schreiben oder zeichnen, können sich unsere Ideen freier und natürlicher entfalten.

Vorteile digitaler Inhalte

Die manuelle Erstellung von Inhalten bringt jedoch auch Einschränkungen und Frustrationen mit sich.

Unsere Untersuchungen haben gezeigt, dass Papiernotizen oft nicht sauber mit digitalen Werkzeugen und Ressourcen integriert werden können. Die Menschen verloren den Überblick über Informationen, die sie auf Papierschnipsel gekritzelt hatten. Sie verloren wertvolle Zeit mit der Transkription, da sie handschriftliche Protokolle abtippten oder skizzierte Diagramme in PowerPoint oder Keynote neu gestalteten. Ihre Notizen fingen oft gut an, wurden dann aber zunehmend chaotisch und unverständlich, weil ihnen der Platz ausging oder sie Fehler machten, die sie nicht mehr löschen konnten. Digitale Alternativen zur Handschrift waren im Allgemeinen effektiver für das Abrufen, das Organisieren, die Übertragbarkeit und das Bearbeiten von Informationen sowie die Konnektivität.

Warum sollten Menschen zwischen zwei verschiedenen Eingabemethoden wählen müssen, die beide gleichermaßen deutliche Vorteile in Bezug auf Produktivität und Benutzerfreundlichkeit bieten? Wir sahen die Chance, eine Lösung zu schaffen, die das Beste aus beiden Welten bietet.

Anwendungsfälle verstehen

Während unserer Untersuchungen haben wir auch die Umstände betrachtet, unter denen herkömmliche digitale Eingabemethoden unhandlich erschienen und sich das Schreiben mit der Hand (auch nur mit dem Finger) als vorteilhaft erweisen könnte.

Displays und Infotainmentsysteme im Auto sind ein gutes Beispiel: Tasten, Regler und Touchscreen-Tastaturen können den Fahrer ablenken und die Sicherheit gefährden. Selbst die Spracherkennung hat erhebliche Nachteile: In Autos gibt es oft Hintergrundgeräusche und die Technik ist nicht genau genug, um häufige Fehler zu vermeiden. Wenn Fahrer ihre Aufmerksamkeit zur Behebung von Erkennungsfehlern teilen müssen, könnte das schlimme Folgen haben.

Wie wäre es, wenn Fahrer ihre Anweisungen einfach mit dem Finger schreiben könnten, während sie ihre Augen auf der Straße lassen? Das würde sicherlich eine Herausforderung darstellen, denn die Software müsste zunächst einmal in der Lage sein, überlagerte Buchstaben zu trennen und zu verstehen. Die Vorteile und Anwendungsmöglichkeiten einer solchen Lösung wären jedoch erheblich – nicht zuletzt für Smartwatches mit sehr kleinen Bildschirmen.

Ein weiteres Beispiel ist die Diagrammerstellung. Das Zeichnen von Diagrammen für Berichte oder Präsentationen erfordert von Benutzern in der Regel entweder die Beherrschung einer separaten Anwendung oder die Aneignung spezieller Kenntnisse in einer Anwendung, mit der sie bereits vertraut sind (wie Microsoft Word). Was wäre, wenn unsere Technologie es ihnen ermöglichen würde, ein Diagramm mit ihrem Stift zu erstellen und es dann mit ein paar Fingertipps in perfekte Formen, gerade Linien und eingegebenen Text zu konvertieren?

Und was wäre, wenn das konvertierte Diagramm responsiv wäre und die Größe der Verbindungselemente automatisch angepasst würde, wenn Elemente verschoben werden? Noch besser wäre es, wenn das handgezeichnete Diagramm automatisch konvertiert werden könnte, sobald es in eine beliebte Präsentationsanwendung wie PowerPoint oder Keynote kopiert wird.

Wir machten uns ein Bild von einer neuen Art digitaler Tinte – einer Tinte, die dem Benutzer mehr bietet als Handschrifterkennung und Handschrift-in-Text-Konvertierung.